Photo by Thomas William on Unsplash从2016年到现在,流量的增加几乎进入了平稳的时期。 此时,如何为产业界和开发人员提供更多、更新的能力,提高平台用户体验? 本文来自腾云视频业务产品总监黄斌在LiveVideoStackCon 2019深圳站的精彩共享,愿与业界一道探讨视频云后半部分的方向和定位,与产业界同事一道构筑更好的视频生态。
文/黄斌
整理/实时视频堆栈1 .实时行业难点
腾云内部从2015年下半年开始进入视频云领域,腾讯多年来逐渐开放语音视频编解码器、语音视频通信和大容量同时业务经验,当时我们也是新手,位置是OVP (在线视频平台),类似于国外brightcove和国内CC视频 但是,确定业务重点方向的是2016年、2016年也是国内直播元年,业界爆炸使团队意识到直播业务量非常大,在高合并状况下视频流畅,提供丰富的IM通信,保证互动连麦等环节能够正常进行是我们的技术
我自己把市场上的产品分为零碎的消费、点播、实时的互动和即时播放4个维度,像右上象限那样实时性高、制作成本低的应用程序,是近年来急剧增加的应用程序。
这些新兴应用程序往往具有复杂的功能特性,头面企业有强大的研发团队,有能力构建上图要求,但对于中小企业来说,能够完成所有这些功能,面临的挑战非常大。 其中,各项功能要投入小队深入,成本也非常高。
在上述的图中,列举了视频云所需的基础服务、语音视频计算集群、CDN高速网络、终端能力和社交的系统,各部分所需的人才和时间成本能够更直观地把握现场广播应用程序的开发所需的资源投入和技术课题。 2 .腾讯云直播方案2.1腾讯云互动直播方案
基于语音视频通信技术能力在QQ平台的积累,我们设计了一套腾讯云交互式中继方案。
第一步骤是基于类别RTP私有协议实现多低延迟语音视频系统并确保能够实现播音器与连续麦克风交互式观众之间的低延迟语音视频通信,其中实时呼叫场景仍然是许多人的应用
第二步,团队借鉴CDN框架实现多层次分发,实现单人室内百万观众的低延迟视听,通过重定向逻辑随时上麦,实现麦与麦的交流场景
第三步骤包括输出旁路转码或标准流媒体协议( RTMP/FLV/HLS ),其能够进行录制和回放以满足H5观看者,并且与现有的私有RTP协议链路建立标准流媒体协议
由于该方案基于直播方案实现了非常好的兼容性,2016年腾讯很快获得了通用娱乐和社交等平台的领导客户,之后很多直播平台也基于同样的构想实现,腾讯在其中提供了标准云服务。 2.2腾云标准直播方案
对于中小型社交现场的需求,我们根据标准协商,提供更轻量的现场服务流,从云的转码、剪辑流、混流来看,这些在现在的视角依然是非常古典的现场情景,以上是2016年面向现场的两个主要 3 .前进-制作领域
从2018年到2019年,视频流量的增长进入平稳成长期,经过几年的持续增长,平台都进入微型化运营阶段,需要在用户、服务系统、成本和质量等方面进行优化。 与此同时,我们将返回标题问题“视频云的后半部分,前进还是“厚””
我们的产品方案描述了云处理、CDN的分发和终端SDK这样的链上方案的复盖度比较完善,但是在内容供给方或制作域中,随着最近2年短视频的增加,内容制作工具化的诉求开始接连出现,变得更加需要。 经过很多分析后,最后的队决定落地,制定了相关的制作领域和云的方案。 以下是团队制作领域中的产品介绍。 3.1美分
腾讯作为云化内容联合编辑工具,首先具备与传统编辑软件类似的基本编辑功能,并在内容方面整合了腾讯生态合作伙伴的大量视频内容,电竞、体育、综艺、娱乐等,这里只有原始素材 我们还提供特色精彩的专辑、节目拆卸等特色能力。
腾讯云切割作为SaaS的产品形式提供给创作者的同时,我们还将其基础能力提取到PaaS能力平台,除了最基本的视频处理、上传和导出以外,包括媒体资产管理和复杂的转码检索能力, 这两层可以以PaaS方式提供,需要这样的用户和合作伙伴能力来编辑他们的工具,我们提供合作伙伴PaaS平台能力。 3.2腾讯微切割插件
除Web编辑工具外,团队还需要与微信息一起创建小程序语音视频编辑插件的能力,微信息小程序和客户端团队需要提供最基本的语音视频合成、打包和呈现接口 目前,该腾云磨练、完善了微信小进程、腾讯音乐集团以及卓乐公司三方共同开发的331腾讯小进程的语音视频剪辑插件,相信不久就能与大家见面。 该插件集成了腾讯音乐集团提供的版权音乐在线库,基于331331腾讯视频云的强大语音视频处理技术开发并打包。 然后开发者们只需在小程序的插件市场上申请就可以立即调用,向小程序添加强大的语音视频剪辑功能。 3.3视频云终端功能更新
0
在短片制作中,最近全面升级了我们的美容动作能力,除了基础美容、特效贴纸之外,还增加了高级美容美容、身体识别特效、绿幕雕刻和脸融合等能力,在特性和性能方面大幅度升级。 3.4腾讯云广播电台LVC
腾云本身在云背后有混流、切换的能力,团队也将这些能力包装在可视化页面上,以云导游的产品形式开放,这种能力在企业培训、教育、节目制作等方面得到广泛应用。 腾云广播电台也可以通过API方式调用事前监视、迁移等功能,为一般用户提供完美的页面,在页面上直接进行广播操作。 3.5传输和全链路质量监控
传输方面声音影像也比较强的情况下,今年的英雄联盟决赛在法国进行,编码器在现场切出的TS片,根据我们提供的传输能力,实现ts over SRT,将清流信号从欧洲现场返回上海和北美,我们发现了公共网络传输的两个 4 .基础编解码器和平台能力4.1直播―超低延迟直播方案
对于我们的WebRTC CDN产品,我们称之为“直播”。 我们希望那个能成为我们实时CDN升级的重要能力。 WebRTC本身能够实现1秒以下的超低延迟,而且能够进行延迟控制,不能持续存储。 作为实时通话标准,有一系列应对网络变动和弱网络的策略,基于超低延迟,纸箱不会落后于其他高延迟流媒体方案。 此外,大多数浏览器已经广泛支持WebRTC,无需安装插件即可播放,WebRTC技术仍在快速发展,将来支持AV1、SVC等的我们也将在网络层与QUIC结合使用。 继续优化带宽成本、节点资源垄断以形成更好的传输方案,相信未来基于WebRTC的CDN将成为实时内容分发的趋势。 4.2全球部署
除超低延迟直播方案外,出海也是明年的发展重点,从系统平台来看,东南亚、中东、印度的节点流量增长非常快。 与国外的云制造商相比,在技术和产品水平上,国内的视频云和Akamai、AWS的产品平台还稍有不同,国内的视频云从视频的收集流向云转码处理,分发到CDN,包括最后的终端广播。 在诸如AWS这样的云制造商(基本上是相对耦合的闭环方案)中,相对断开平台产品的耦合,并且独立的源站和转码模块、视频传输模块、CDN模块能够分别独立地访问服务。 从互不相依的形式和协商来说,以海外的HLS、DASH、CMAF为主流,国内的视频云以RTMP上升、FLV、HLS下降为主流,在这个水平上,国内的顾客出国是根据国内的视频云团队的提案,业务访问比较顺畅的4。
新一代视频侧标准中,腾讯视频云直播、点播、媒体处理全部产品都支持AV1标准,腾讯云也是国内首家以直播+点播方式支持AV1视频处理业务的公共云制造商。 今年10月,腾讯正式加入开放媒体联盟( Alliance for Open Media,AOMedia ),推进视频AV1标准的商业化,是董事会成员之一,是董事会成员中迄今唯一的中国企业。 腾讯多媒体实验室和腾讯云积极推进视频AV1标准的商业应用。 AV1的高速hd转码服务为用户提供了低代码率和高代码率相同的图像质量体验。 使用高速hd转码技术,实时、点播业务与开源软件的画质相同,平均节省了30%+和超过40%+的带宽成本。 或者在同等带宽条件下,提供更高品质的视频画质体验。 腾云一直埋头于深耕音视频领域,不断完善自己的产品体系,结合用户的业务场景不断创新,为用户提供快速的hd、增强画质、修复老电影等技术产品。 5 .共同建设开发人员生态
近两年来,腾云积极参与各类技术开源社区,共同构建开发人员生态。 举个例子,腾讯视频云提供约20组各种语音视频处理SDK。 其中最主要的SDK对应demo的源代码,我们在GitHub上提供开发人员的参考,大大降低了开发人员的工作量和综合阈值。
如上所述,腾讯视频云的产品矩阵从最初的基础设施发展到语音视频PaaS平台,迄今为止在多个场景中积极尝试SaaS应用,提供了从内容源到视频云、广播终端等级丰富的产品方案,并且不同 我们将这些技术能力、基线产品和解决方案相结合,向开发人员和合作伙伴公开,构建更好的视频生态。