加入收藏 | 设为首页 | 会员中心 | 我要投稿 厦门网 (https://www.xiamenwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 移动互联 > 正文

腾讯技术开放日 | 当5G遇上多媒体,会擦出怎样的火花?

发布时间:2022-10-24 22:42:04 所属栏目:移动互联 来源:网络
导读:
当韦德·沃兹把这幅VR眼镜往下一拉,“绿洲”的虚拟之门便开启了。
这是头号玩家极富仪式感的一幕,当拉下眼镜的一瞬,诞生了一个超脱于物理定律的,浩大的虚拟宇宙。
从电影中抽离,新兴

当韦德·沃兹把这幅VR眼镜往下一拉,“绿洲”的虚拟之门便开启了。

这是头号玩家极富仪式感的一幕,当拉下眼镜的一瞬,诞生了一个超脱于物理定律的,浩大的虚拟宇宙。

从电影中抽离,新兴的媒体技术触发了电影的灵感,也给人们带来了更科技化的智能体验。2016年是VR元年,但是元年过后,VR似乎陷入了低谷,一些新兴媒体技术的发展似乎遇到了多方面的瓶颈,比如说通信技术的天花板使得数据传输能力有限,无法为参与者提供真正意义上的沉浸式体验。我们离科幻电影中的剧情和场景,还有多远?

5G的来临,对于每一个产业都是一个跃迁的机会,或许可以让我们的生活“科幻”点。

对于新兴媒体产业,5G是否可以抬高天花板,让现有的媒体技术脱胎换骨,比如让VR产业重焕生机,让沉浸式体验“落入寻常百姓家”,让头号玩家的剧情成为现实?除了对已有媒体技术进行助推,是否有可能促进新的媒体技术和产业的诞生?

在“腾讯技术开放日·5G多媒体专场”上,腾讯多媒体标准组总监 & 5G 专家 Stephan Wenger 博士、腾讯 5G 知识产权专家徐剑波、腾讯 5G & 多媒体标准专家赵帅博士、腾讯多媒体专家工程师封薇薇出席了本次活动,并作了主题演讲。(文末附专家主题演讲视频)

当5G遇上多媒体,会擦出怎样的火花?

5G综述 | 掀起5G盖头来

“5G在国际的代码是IMT2020,意味着2020年将实现纯5G。”

—— 腾讯多媒体标准组总监、5G专家 Stephan Wenger

Stephan Wenger作为首位发言的专家,为我们掀起了5G的盖头,他分享了5G的特性和创新点,可落地的应用场景,同时,也介绍了通信标准的演进和制定标准的相关组织。我们可以从Stephan Wenger的发言的以下几部分,感受5G的全貌:

认识5G的三个维度:高宽带、多连接、可靠性低延时

“大家认识5G应该从三个维度理解:

第一个是高宽带,这也是大家对5G最普遍的理解;第二个是多连接,以后手中的智能家居、智能手表等都起到物物连接的特性。第三个,可靠性、低延时。可靠性,可用于一些重要的应用产品,比如无人驾驶。低延迟,比如腾讯比较关注的8K、AR/VR、自动驾驶、物联网、IoT,对低延迟有很高的要求。”

5G的五种创新技术和八大技术实现

“5G有五种创新技术,大规模多入多出;全双工;用于频谱效率波束成形技术;蜂巢式基站;毫米波。

一是大规模多入多出,5G天线有很多发射和接收,不像之前4G只能是单向。全双工,可以实现消费者内容共享。5G使得上传能力加强,对于一些需要很高上传能力的应用比如视频会议有很大帮助。波束成形技术,这是5G的驱动力,可以允许大家多设备连接,是5G的新增技术。蜂巢式基站,传统4G或者4G LTE是方圆几公里有一个基站,5G可能不需要了,每一个房间都有一个或者两个基站,这种基站可以随时移动,不需要在户外竖一个杆子把5G信号放在上面,而且特别特别小。毫米波,是它的缺点,缺点是它的穿透力很差,可能一个房子木头墙就穿透不了,意味着要实现5G全覆盖,可能一个房间里要两个基站同时维持大家的连接。

此外,目前已经实现了5G的八大技术:百兆级用户体验速率可达1Gbps、相对4G来说提高频谱效率、移动性能高达几公里/小时、毫秒级超低延迟、支持超高链接设备数量、相对4G来降低能耗、提高流量的密度、G级峰值速率。”

标准必要专利 SEP | SEP“玛丽说”

“SEP对通信产业链的重要性可以通过《超级玛丽》游戏公式体现,把还没有变大的玛丽看作一家公司,她吃了一个果子就是SEP,就变得非常有力量。”

——腾讯5G知识产权专家徐剑波

我国移动通信产业已经实现了“4G同步”、“5G引领”的历史性跨越,9月20日,工信部称,我国的5G标准必要专利数量已达全球第一。“制定标准”是一门技术要实现应用,最终落地的必经之路,而“获得专利”则是一门技术得以被保障,提供变现能力,促进整个产业创新的助推力。腾讯5G知识产权专家徐剑波在现场分享了“标准必要专利”(SEP:Standard Essential Patent)的必要性和生命周期:

为什么标准必要专利对通信产业链非常重要?

“可以通过《超级玛丽》游戏公式体现,把还没有变大的玛丽看作一家公司,她吃了一个果子就是SEP,就变得非常有力量。一个企业拥有SEP,意味着需要很多研发资源,如果有很强的研发,自然这个企业会得到比较快速的增长。如果企业拥有SEP,相当于手上拥有非常重要的武器。因为你技术领先,可以授权给别人,也可以找别人收费。这也是为什么今天我要讲标准必要专利(知识产权)非常重要的原因。”

SEP有怎样的生命周期?

“第一步,要启动Pre-Research,预演,不要都传得很热了再去,那一定很迟了。

第二步是Standarddeveloping process(标准制定过程)。

第三步是标准文本被董事会通过,成为事实上的标准。

第四步,有标准必要专利,要做一个声明给官方,需要诚实交代自己申请了哪些专利,以防专利的使用受限。

第五步,跟标准兼容的产品研制成功,另外是持有标准必要专利的公司就可以收许可费。通俗来讲就三步,IDEA通过专利保护起来,最后能获得资金。”

5G多媒体技术和应用

腾讯的“视频压缩术”

“只有5G,如果没有视频压缩,那对于多媒体来说传输一切都是0。”

—— 腾讯5G&多媒体标准专家 赵帅

随着4K、8K、AR等新兴媒体格式的出现,以及新兴媒体体验的逐步落地如沉浸式媒体、云游戏等,多媒体对通信技术的带宽和低延时提出了更高的要求。5G的出现,会怎样推进多媒体技术和应用的进化,多媒体产业应该要如何借势5G?腾讯5G&多媒体标准专家赵帅分享了他的理解和观点。

多媒体产业链需要标准制定

“为什么要多媒体产业要做标准?

有四点:一是互联互通。保证各个厂商在指定多媒体5G标准下,各个设备之间可以互联互通。这是做标准最基本的原理。

二是防止垄断。因为这样各个公司可以相互参加,每一个公司都会把自己的技术放在里面,保证技术的共享。

三是保证技术的先进性。比如参加5G国际标准制定时,不但可以把自己的技术贡献出去,更重要的是可以学习别人的技术,保证了我们技术的先进性。

四是知识产权专利。专利有两个作用:一是商业化。有专利后把专利应用在产品上,任何人要买这个产品时就要付专利费。另外是防御性,很多专利产生时目的并不是为了产生商业价值,而是保护自己。”

视频压缩技术(VVC)对于多媒体发展的必要性

视频流量一直是占领网络流量的先驱,在5G趋势下会只增不减。预测到2020年82%的流量是视频传输,包括视频会议、小视频、云游戏类似的服务。腾讯多媒体实验室对视频的研究成果颇丰,在赵帅的分享中,还谈到了视频压缩技术(VVC)对于多媒体发展的必要性,并且分享了腾讯多媒体实验室在VVC上的成果:

“简单讲一下视频压缩技术的演进,2003年AVC(H264)编码标准正式发布。2013年HEVC(H265)编码标准正式发布。每一次视频压缩技术的迭代都会比上一次主观上提高50%左右,客观上是30% 。现在VVC(H266)是我们积极参与的,VVC在HEVC上客观节省33%,主观是40%-50%。VVC视频编码架构跟HEVC基本一样,但为什么它会提高?有很大的原因是因为算法上有优化和提高。

腾讯多媒体实验室在很短时间内有几十项专利被研发,并且好几个人员都在VVC里承担主席席位。截止到2016年6月份,腾讯VVC视频压缩技术是全球第三,而且仅用了不到两年时间。”

5G沉浸式媒体 | 从二维走向三维

“沉浸式媒体,经历了一段低谷期后,开始步入极速上升期”

—— 腾讯多媒体专家工程师 封薇薇

5G的来临,使得传输问题有了质的突破,越来越多产业已经开始更多的应用了XR技术,包括体育、文旅、娱乐、影视、科教、新闻、商业。封薇薇认为现在以VR/AR为代表的沉浸式体验,将会有一个比较快速的上升期,作为腾讯多媒体专家工程师,她在现场展示了沉浸式体验中如何“从二维到三维”。

“把三维世界投影到二维平面上”

“如何把三维数据进行压缩传输,我们的想法是因为现在2D压缩传输已经比较常见或者相对比较成熟。我们更希望能够利用二维已有技术来对三维的东西进行压缩传输,我们会运用投影技术,将三维球体投影到二维平面,可以想象将一个地球仪投影到世界地图上。这种投影方式一般称之为ERP。经过了这样的投影,将三维球体转换成二维平面,就可以用正常的二维视频压缩技术将它进行压缩和传输。”

如何描述三维世界?

360视频-两个鱼眼的组合

“具体怎么采集三维信息呢?拿鱼眼做举例。一般摄像头都有一个角度,现在所有的摄像技术没有直接可以获取,任何一个镜头只有一定的视角的限制。假设是鱼眼情况下,视角限制是180度,如果想要360度,需要两个鱼眼镜头背靠背再将他们组合回去。”

点云的故事-把三维物体化作点

“除了 360 视频外,还有其他对三维世界描述的方式,比如把三维物体用点和面表示。另外的方法是,用激光雷达或者摄像机矩阵将一个三维物体直接数字化,变成关于点位置或者色彩的数据。在数字化三维物体时会含有大量点的数据,我们称之为点云。静态的点云包含千万级数据,而动态点云每帧可以有百万级数据。我们实验室参与了 MPEG 国际标准点云和 AVS 国标点云的制定,并拥有大量标准技术专利。我们实验室不止对标准的研究,还拥有多项提案和专利,点云这个技术已经有了多种应用场景,我们合作的腾讯自动驾驶团队,2019年预计的路测采集数据量大概十的十五次方,通过点云压缩,存储量会变为原来的1/6。”

从1G-5G到5G,通信技术的变革给我们带来了什么?

2G让我们可以收发短消息,3G让电子邮件和网上冲浪得以实现,4G让视频和游戏扎根我们的移动端,并开启了移动互联网时代。每一G的进步,带来的是一个时代的革新。而每一个产业也随着通信技术的进步阶梯式进化,对于媒体产业,亦是如此。

腾讯多媒体实验室已经在实时音视频通信、图像处理和音视频处理等技术领域积累了十几年的研究经验,当下,也在探索5G与多媒体的融合。在5G时代,随着整个新兴媒体产业的共进,新兴媒体产业的“绿洲”之门也将被打开。

腾讯技术开放日·5G多媒体专场

专家主题演讲视频

腾讯多媒体实验室,专注于音视频通信技术的前瞻性研究5g 腾讯,包括全球实时音视频网络优化、音视频编解码前沿算法研究、计算机视觉图像处理、基于AI的音频语音增强、声音美化及音视频质量评测等。

在服务于腾讯社交体系下的海量用户同时,在实时音视频通信、图像处理和音视频处理等技术领域积累了十几年的研究经验,拥有行业领先的技术水平。目前已为行业数百个产品提供了音视频技术支持与服务,如QQ电话、腾讯云、企业微信、QQ空间、全民K歌、快手、斗鱼、虎牙、蘑菇街等。

腾讯助力打造教育“罗湖模式”,中标近年来最大纯软件项目

熟了!腾讯教育又一“果实”落地

(编辑:厦门网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!