在今天的ldquo第三届5G千兆网络产业论坛;爱奇艺高级科学家王涛在《多机位互动视频制播系统及应用》上发表演讲,详细分享了5G等新技术驱动下的互动视频技术的发展和应用。

他指出,视频行业迫切需要丰富用户视听体验,提高制作播出效率。ldquo推动互动视频技术的发展和在5G环境下的应用,是提升高科技视频格式的重要任务。互动视频作为ldquo的一种,具有剧情选择、视角切换、画面交换等互动功能。非线性视频。新的商业形态可广泛应用于影视娱乐、文化旅游、体育赛事、在线教育、电商购物等领域。该技术及应用对提高互动视频制作效率、优化互动视频视听体验、促进高科技视频产业生态发展具有重要的功能和价值。rdquo

开发基于5G等技术的互动视频制播系统。

那么,5G在互动视频中扮演什么角色呢?王涛介绍,互动视频具有数据量大、实时性要求高的特点。按座位数计算,多座位互动视频的数据量比单座高4~10倍。如果视频流切换卡了几秒钟,会大大影响用户的沉浸感。5G的高带宽和低延迟能力为交互式视频提供了良好的基础设施。

王涛告诉与会人员,在此基础上,爱奇艺开发了具有自主知识产权、集互动视频创作、制作、发行、播出为一体的互动视频制播平台《多机位互动视频制作平台和播放系统》,包括互动视频制播系统、免费观看系统、多摄像头直播系统、互动投票系统。项目将进一步提升更大的商业价值,为下一代娱乐拓展更大的梦想舞台和想象空间。

爱奇艺基于5G宽带网络、边缘计算、高带宽、低时延的网络传输和视频预载技术,提升了互动视频切换的流畅度。同时提出了多视图一屏四视图的交互模式。在不妨碍用户观看主画面的同时,它提供了多个子视角,可以全方位、多角度显示内容,用户可以在多个子视角之间自由切换,满足了用户对内容多样性的需求。

ldquo在交互式视频播放系统的关键技术中,信令数据封装、多视图编码和智能编码是视频封装的关键技术,而在视频传输中,高带宽低时延传输和网络切片是关键技术。rdquo他表示,爱奇艺的主要创新包括互动视频数据格式标准、互动播控信令、视频预加载技术、互动播放引擎和多摄像头画面交互等。

交互式视频对网络基础设施提出了新的要求。

据王涛分析,互动视频数据量大,实时互动对网络基础设施要求非常高,因此爱奇艺开发了RTS超低延迟音视频分发网络系统。具体来说,爱奇艺通过编码GOP收缩、同机中继、源偏移,实现了云中多画面融合编码。同时基于高性能音视频转发单元、智能路由调度、防丢包、低时延音视频传输等,实现了端到端时延约500ms秒的超低时延音视频分发服务。具有访问成本低、节点覆盖广、承载千万级大规模并发的能力。

ldquo尤其是我们直播的时候,采集终端通常需要拉网络专线来保证带宽,但实际上在室外拉专线是非常麻烦的,在一些山区和移动场景部署网络就更不方便了。现在有了5G基站,我们可以通过5G背包直接将拍摄到的视频推送到后台视频云进行转码分发,大大提高了制作和播出效率。rdquo

同时,王涛指出,用户对5G也有很大的需求。有鉴于此,爱奇艺在十一黄金周前在全国500组高铁列车上部署了ldquo。奇数速度区rdquo服务方面,覆盖京沪、京广、沪昆等多条线路。通过爱奇艺App ldquo奇数速度区rdquo服务方面,乘客可以通过接入高铁WiFi连接到5G的边缘计算端,从而在高铁上流畅、无卡顿地观看视频,因此5G在边缘侧发挥着重要作用。

王涛今年在mdash拍摄了爱奇艺制作的全球首个虚拟制作XR现场演唱会;mdashldquo爱奇艺THE9虚拟城市线上演唱会rdquo介绍了实例。本次演唱会通过XR技术和影视级LED真实感虚拟技术实现了实时渲染,将逼真、风格化的虚拟场景完美融入舞台,为用户呈现震撼的科幻效果。通过多摄像头画面自由切换、自由视角、嘉宾粉丝与观众大屏幕连接、1v1互动对话、Avatar虚拟座椅、投票屏等多种新方式,增强了观众用户的互动观看体验。让每个人都可以通过屏幕获得一些超越场景的多重观看体验。

ldquo互动视频是我们在高科技视频领域的积极探索。它数据量大,实时性要求高,不仅增加了用户的视频体验和交互能力,也对我们的网络基础设施提出了新的要求。然而5G的大带宽、低时延、广连接解决了我们的瓶颈问题。我觉得5G是一个非常必要的基础设施,尤其是解决我们采集端上游和边缘端下游的瓶颈问题。此外,由于互动视频涉及新的数据格式和技术接口,我们与广电总局和MIIT研究了一系列互动视频标准。rdquo