科技峰会丨腾讯杰出科学家刘杉：通过沉浸式媒体技术实现虚实融合是未来颠覆性

在万物互联的5G时代，媒体的智能化已经成为不可阻挡的趋势和发展方向。

日前，由南方财经传媒集团旗下21世纪经济报道主办的2022 21世纪科技峰会正式召开会上，腾讯杰出科学家，腾讯多媒体实验室负责人，腾讯云副总裁，乔春明刘山以多媒体技术，标准与应用为题做了主题演讲

刘山表示，伴随着科技的快速发展，人们已经不满足于仅仅观看传统的二维视频，而是渴望更加真实，身临其境的体验因此，通过沉浸式媒体技术实现物理世界和虚拟世界的融合与共生也被认为是改变未来生活和工作方式的颠覆性趋势之一

最近几年来，以VR为代表的沉浸式媒体内容市场增长显著，应用领域越来越广泛据估计，到2025年，沉浸式媒体的市场规模可以增长到大约1600亿美元，更多的公司和制造商也在增加他们在R&D的投资和沉浸式媒体技术的生产

刘山指出，更深层次的沉浸式体验主要体现在真实场景的六自由度，更清晰流畅的内容展示，多通道交互等方面它依赖于VR，AR，点云等核心技术，最终由手机，电脑，头戴设备，大屏幕等不同设备呈现

一个优质高效的交互式沉浸式系统包括采集，处理，建模，压缩，传输，解压缩，渲染，交互等多个技术模块由于沉浸式媒体内容的数据远大于传统高清超高清视频，因此如何有效组合和全面优化所有这些技术模块，对于提供高质量的端到端体验更加重要和关键

此外，刘山表示，点云是沉浸领域的另一个代表性技术，这两年越来越受关注云到端系统包括点云数据处理，压缩，模型重建，渲染交互等技术模块

由于点云使用三维空间点阵来表示真实的物体和场景，可以想象构建一个高精度的点云模型所需的数据量是非常巨大的，因此点云数据压缩也是点云系统中不可或缺的环节。

刘杉表示，腾讯多媒体实验室从2018年开始投入VR系统建设，2019年有了第一个VR应用落地案例今年，VR 360全景视听系统进行了一系列功能升级，大幅降低了带宽和延迟，配合多视角投影转换，实现了丰富优质的视觉体验

据刘山介绍，腾讯多媒体实验室在性质上分为两大方向，一是多媒体及相关领域的前沿技术探索和标准制定，二是多媒体及相关领域的应用技术研发和产品化。

关于标准的制定，刘山表示，从广义上来说，标准可以促进和推动全球的技术和产业生态同时，高质量的标准核心技术在构筑知识产权和技术壁垒方面尤为重要

例如，最近几年来，伴随着沉浸式媒体应用的兴起，国内外标准化组织也推出了一系列相关技术标准，以更好地支持和推动相关领域的技术和产业发展。

目前，大约80%的互联网流量来自视频，而这些视频内容都是以压缩的形式传输的，因此视频压缩和视频编解码是数字时代视频应用的重要组成部分。

此外，刘山提到，最近几年来，基于数据驱动和深度学习的方法在计算机视觉等相关领域取得了突破性进展这些方法也被引入到多媒体数据压缩领域，并取得了一些可喜的进展

国内外一些主流标准化组织也成立了相关的专项研究小组，探索基于深度学习的多媒体数据压缩的标准制定。

这些技术的探索也在商业场景中发挥了作用刘山表示，在视频编解码方面，从去年到今年，腾讯多媒体实验室持续为腾讯各业务和产品提供核心技术和工程优化

比如优化后的云游戏编码引擎，可以减少30%的CPU内存占用，节省10%~20%的带宽成本。

郑重声明：此文内容为本网站转载企业宣传资讯，目的在于传播更多信息，与本站立场无关。仅供读者参考，并请自行核实相关内容。

编辑：肖鸥