从《头号玩家》说起，聊聊当前的 VR 技术到底差在哪？
《头号玩家》口碑炸裂，给似乎已进入低谷期的 VR 产业带来了新一轮的热度。VR 技术因其充分的沉浸性、高真实性和高交互性等特点，在 2016 年曾受到广泛关注，并被寄予厚望。但由于一些老生常谈的问题，如成本过高、内容质量低、技术瓶颈制约、体验较差等，导致热度在这两年未能成功延续。纵观当今市场，VR 的身影虽然已有出现在影视、游戏、医疗、教育、直播等多个行业应用中，但均未有特别亮眼的表现。如何攻克现有的技术难点，成为整个 VR 产业最迫切需要解决的问题。
拿目前相对成熟一点的 VR 视频来说，全景摄像机等设备的出现，降低了 VR 视频内容制作的门槛，能简单粗暴的录制和生成三自由度或六自由度的全景图像。但由于视频清晰度不够理想，画面粗糙，播放卡顿等因素，导致用户观感较差，容易产生眩晕感。其衍生而来的 VR 直播同样存在类似的问题。VR 直播可为观看者营造较好的临场沉浸感，但它的技术难点在于视频清晰度不理想，高码率传输成本高和对转码实时性与终端解码性能要求非常高。
如上图所示，从全景采集到网络分发，再到对用户端方面的多终端适配播放，实现 VR 直播的各个环节都需要较高的技术支持。抛开采集和拼接这两个极度依赖软硬件的环节不说，VR 视频最终需要通过互联网分发给用户，如何提供清晰、流畅的 VR 体验，映射和传输方法起到了关键性作用，如何在有限的带宽上传输高质量 VR 视频也是目前最大的挑战。而映射过程与传输又紧密相关：为便于存储和压缩编码，摄录的全景球面视频内容需被几何映射到平面，映射过程影响了 VR 视频编码前的像素量，在一定程度上也决定了视频内容所包含的信息量。
目前的传输方法主要分为两类：全景传输和视点自适应传输。
全景传输
全景传输是指将全景视频以同等质量、完整的发送给用户，优点是保留信息量大，完整保留了原始球面视频的所有内容，而且可以直接使用现有的编码器和传输方式。但由于播放设备和视角的限制，用户在某一时刻只关心视角范围内的部分内容，导致造成较高的资源浪费，对带宽消耗大。
全景传输对应的映射方法是均匀映射，包括矩形映射（ERP）、立方体映射（CMP）、八面体映射、二十面体映射、柱状映射等等。理论上，使用面数越多的正多面体，可以使得映射后的数据量越小。但同时这些正多面体都需要通过“再拼接”形成矩形平面，会导致拼接过程中内容上的不连续，影响编码效率。
视点自适应传输 视点自适应传输，指的是根据用户视点动态传输视角范围内的视频，从而避免资源浪费。在相同带宽条件下，它可分配更多带宽给视角区域，从而提高用户视窗内视频的质量，增强观看体验。然而，若用户当前视点与视频预估的视点不符，看到的画面就会出现黑屏或质量很差等问题。
视点自适应传输对应的是非均匀映射和分块传输。非均匀映射在对球面内容采样时，会对球面上的像素点有不同的权重，从而保证关键视频内容得到保留。目前 Facebook 和高通等公司已提出多种非均匀映射传输方式 ，包括多分辨率立方体、金字塔映射、偏移立方体、阶段金字塔等，均是在保持视点区域质量的前提下，降低整体分辨率。不同的映射方式都还存在不同的问题，比如变形、失真、边界等等。
分块传输是另一种视点自适应传输方式，它灵活地将全景视频按照空间划分为若干个子视频块，客户端可根据网络状况和用户头部运动有针对性的向服务器端请求视频片段。对比非均匀映射，分块传输进一步减少了传输数据量，因为它只传一部分内容。分块传输也包括许多种切分方式，像是六面几何式、18 格矩形分割方 式、12 格矩形分割方式等。在视频传输过程中，切分粒度越小，视频块的组合就越贴近用户视角，浪费的视频内容也就越少。但由于在切分后像素之间的相关性被破坏，使得切分后编码数据量之和会略大于切分前的数据量，所以如何决定分块大小也是一个值得斟酌的问题。
当然，上面更多的是理论层的东西。如何根据现实业务，在映射和传输过程中尽可能的保证视频质量和降低资源占用，有待实际摸索和尝试。即将于 4 月 21 日举办的武汉源创会上，开源中国邀请到了优酷视频 VR 技术 leader 张天若，从优酷现有的 VR 业务出发，对应用的多机位采集、视频编解码、视频分发与多终端适配播放等核心技术与原理进行深入解读及答疑解惑，感兴趣的切勿错过。
传送门：https://www.oschina.net/event/2276486
从《头号玩家》说起，聊聊当前的 VR 技术到底差在哪？相关推荐
- 组一套《头号玩家》里的 VR 套装，要多少钱？
<头号玩家>最近刷了不少屏,虽然剧情本身很稀松平常,无外乎宅男逆袭一路高潮到底抱得美人归的起点爽文式故事,但其中的情怀加成大到足以掩盖本身情节的单薄,也毫不影响我们在看到某个熟悉的角色一闪 ...
- 玩游戏还是很羡慕吗?《头号玩家》的VR到底是结合多少技术?
<头号玩家>,一次是数位版,一次是3D版.几乎是两次不同的体验.坦白说,<头号玩家>剧情本身很稀松平常,无外乎宅男逆袭一路高潮到底抱得美人归的起点爽文式故事,但其中的「情怀」大 ...
- 《头号玩家》中的“绿洲”，用 VR 可以找到
图源:百度百科 出品 | AI科技大本营(ID:rgznai100) 2045年,现实世界令人失望,人们将救赎的希望寄托于"绿洲",一个虚拟游戏宇宙.人们只要戴上VR设备,就可以进 ...
- 盘点《头号玩家》里的 VR 技术，现在就能造个 Oasis 出来
来源:沉浸感丨公众号 作者: 刘芳平 由史蒂文·斯皮尔伯格导演的科幻电影<头号玩家>(Ready One Player)于 3 月 30 日在中国大陆上映.首个周末便收获广泛好评,登上 ...
- 头号玩家VR跑步机KAT Walk Mini上市，支持各种主流VR头显
KAT Walk Mini被定义为一款通用型VR标准输入设备,支持各种主流VR头显和所有自由移动的VR游戏. 电影院里传出上百次充满默契的惊呼,再也不会有一部作品能比<头号玩家>更强烈的触 ...
- 元宇宙都市传说02：《头号玩家》的隐喻
撰文 / 白欧 编辑 / 沈洁 到底什么是元宇宙? 可能很多人在回答这个问题时,会自然而然地联想到2018年上映的<头号玩家>.斯皮尔伯格在他的科幻故事中,并未提及"元宇宙&qu ...
- 人工智能/虚拟现实技术的工程伦理分析：以电影《头号玩家》为例
CSDN话题挑战赛第2期 参赛话题:人工智能的[能]与[不能] *人工智能已经迎来第三次浪潮,一方面,人工智能已经应用于社会的方方面面,并日益发挥着无可替代的作用:另一方面,人工智能存在着局限性以及争 ...
- 从《国产凌凌漆》看到《头号玩家》，你就能全面了解5G
2019 年 9 月,移动.联通.电信5G套餐预约总和已突破 1000 万.2019 年 11 月,三大电信运营商将在全国范围内提供携号转网服务.2019 年内,移动将建立 5 万个 5G 基站,联通 ...
- 响铃：“头号玩家”乐车邦，恰恰踩到了“无人”的点上
文|曾响铃 来源|科技向令说(xiangling0815) 最传统的线下门店4S店也在互联网冲击中发生着巨变.3月29日,鹅厂与中国汽车流通协会在腾讯总部签署协议,马化腾宣称要帮助广汇汽车等品牌们建立 ...
最新文章
- POJ 2084 Catalan数+高精度
- 创建工程并测试RedisTemplate
- 【02】Kubernets：使用 kubeadm 部署 K8S 集群
- leetcode162. 寻找峰值 变种二分见过吗
- Web前后端笔记-vue cli及java进行AES加解密
- avs3 ts格式封装 标准_超能课堂(204):多媒体容器格式变迁录
- rust里面的柴油桶有什么用_一种柴油桶倒油装置的制作方法
- Flex及AIR开发资源集合
- 中国第一代程序员简史：中国龙简晶的程序人生
- SPSS统计功能与模块对照表
- 1971年中国的预警机就上天了
- The following packages are not available
- 计算机系统维护要不要自动更新,电脑自动更新功能开启还是关闭，到底要不要关闭...
- UE4 键盘按键实现开关门
- C++ 使用Poco库操作 json 文件
- 基于K-Means聚类算法对NBA球员数据的聚类分析
- java毕业生设计大学生兼职平台计算机源码+系统+mysql+调试部署+lw
- Mac运行已安装软件提示“XXX 已损坏，打不开。移到废纸篓/推出磁盘映像。”解决方法
- 18. 图像分类、分割
- 逻辑思维强的人适合学计算机不,逻辑思维强的人适合什么工作?