5G与VR/AR到底有多大关联

2020年是5G元年，5G到来，VR/AR概念似乎也回暖了。咨询、投资、市场分析相关领域里关注5G+VR/AR的人又多了起来。然而也有不少从业者认为5G+VR/AR纯属概念炒作，认为两者之间并没有多大关系。

那么5G+VR/AR到底有没有真实的价值？在做了相关的行业研究后，我们认为：

1、5G的大带宽特性对于VR的价值是在线观看4K以上高分辨率的全景视频，而高分辨率是提升临场感的必要技术，对于AR在现阶段价值还不大，未来要看云计算与显示终端的关联，毕竟AR设备自带的处理器其图形处理能力还不足以满足深层次的、大场景的AR应用。

2、5G低时延特性的价值体验是通过云计算提升画质，同时帮助云计算降低其“网络延时”，使得采用云计算方案的VR/AR产品的“运动到成像时延”能够达到20毫秒的及格线以内（“网络延时”是“运动到成像延时”的组成部分）。

3、5G的低时延特性并无法直接帮助现在的VR/AR产品降低“运动到成像延时”。

下文我们将详细拆解5G与VR/AR的关系。

一、VR/AR如何接入5G网络？

要让5G网络发挥作用，先得让VR/AR连上5G网络。

我们先讨论VR。VR领域中分为一体机和分体机，分体机是以高性能计算机提供计算与显示输出，对于分体机来说5G作用等于0，其次就是一体机， VR一体机，即无需连接手机或PC，内置处理器，可以独立使用的VR产品。VR一体机使用的芯片组往往是较老的芯片配置，目前主流产品依然在使用高通骁龙821和835。这些芯片组目前不具备直接接入5G网络的能力。

为了应对这一问题，出现了5G CPE的设备其实就是可以插5G卡的Wi-Fi。它可以将5G信号转化为Wi-Fi信号，现存产品就可以通过Wi-Fi连到5G CPE，再连上5G网络了。

这和千兆家庭宽带也没有什么区别，从家庭的使用场景来看，确实如此，无论使用5G CPE还是千兆家庭宽带，VR一体机均为通过Wi-Fi进行网络连接，两者达到的下载速率也是相似的（千兆bps）速率。

同时，由于VR是全沉浸式的体验，绝大部分用户是在家庭或办公室使用，对于移动性的需求较小，因此千兆家庭宽带能很好发挥作用，对于5G移动网络的需求则相对要小很多。

数据来源：小米VR用户调研

千兆家庭宽带和5G，在面对复杂的城乡基础设施环境时，都存在铺设网络的可行性、效率、成本等问题，不过偏远地区VR设备的使用率相对经济发达地区呈指数级下降，现阶段可以忽略，从用户群体来说千兆宽带对VR设备来说更有价值和普及意义。

5G对于AR来说，则有所不同。

目前AR设备分两类，一是如微软的HoloLens，内置计算芯片的一体机，另一类是为了提升便捷性需连接手机及分体终端的设备，如Magic Leap One，国内的“亮视野”等厂家设备，相比国外国内做AR眼镜的整体思路是，让AR眼镜通过有线方式连接到手机上（Displayport over Type-C），AR眼镜仅仅作为显示单元，运算和电池都是用的手机，以此来降低眼镜的重量和便携性，提升佩戴舒适性（当然现在的技术距离全天舒适佩戴还有很远的距离）。

因此AR眼镜是否能连上5G网络，主要得看它连接的手机是否支持5G。当然AR并单指穿戴式设备，AR技术的核心是图形识别技术，现阶段具备高性能图像拍摄与显示的手机人手一部。相比VR，AR眼镜及其它AR终端能够相对轻松的搭上5G手机这趟顺风车。

5G有三大特性：大带宽、超低时延与高可靠性、大规模连接。其中前两者是与VR/AR息息相关的，我们接下来分别进行讨论。

来源：OFweek物联网

二、5G大带宽对于VR/AR的作用

5G大带宽对于VR的作用在于提升全景视频的分辨率和码率，从而达到更好的观看体验。

虽然目前的VR设备都可以观看全景视频，但是分辨率和码率往往不理想，看起来不甚理想，这是一个普遍的问题，既有5G问题也有服务器效能带宽等问题。

VR及格线的要求是什么。

在看视频的时候，我们希望视频的分辨率与屏幕的分辨率保持一致，以达到最好的效果。比如用1080p的电脑屏幕看1080p的视频，是最佳体验。

VR头显的视场角一般是110°左右，全景视频是一个360°的球体，相当于VR头显视场角的3倍多。VR头显屏幕分辨率一般为2K或4K，因此全景视频的最佳分辨率也是其3倍多，即8K或12K。

 

只有达到这样的分辨率才能有优秀的观影体验，然而这样的分辨率对于宽带速率要求是极高的。

现在国内主流视频平台的1080p视频，码率大约在1~2Mbps。比如爱奇艺的《海洋》全长近2小时，1080p视频文件大小为1.58GB，码率约为1.6Mbps。我国平均的网速速率远高于这一码率，所以一般情况下，你看1080p视频没有任何问题。

而VR全景视频的码率则要高一个数量级。以行业标杆的Oculus Studios出品的《Henry》为例，其片长为8分42秒，分辨率为5K，文件大小为1.3GB，码率约为20.8Mbps。这已经接近我国平均网速速率，大量用户会无法流畅地在线观看，必须要先行下载下来看才行。

来源：中国宽带发展联盟公布的2018年第四季度《中国宽带速率状况报告》

这就有点像15年前，大家看视频都得先通过BT或迅雷下载下来一样。现在你要看一个超高清的、高码率的优质VR全景视频，也需要先下载下来，才能够保证最好的观影体验。

5G和千兆家庭宽带，使得网络速率提升到1000Mbps左右，让在线观看20Mbps的全景视频成为可能，大家观看VR全景视频就和现在爱奇艺1080p视频的体验一样了。

除了视频之外，VR云游戏同样需要大带宽。VR云游戏其实也是一个全景视频流，也是360°的，因此也需要上述相同的分辨率和码率，才能达到最佳的体验效果。

对于AR来说，5G的大带宽有什么作用？

当前行业所畅想的AR眼镜应用场景主要分为两类：

第一类是手机的大屏化：将手机操作系统变成一个大屏的、多窗口的体验。 

来源：Rokid Vision AR眼镜概念视频

手机的大屏化场景所需的网络带宽与现有手机和PC无差异，5G无法提供额外的附加价值。

第二类是原生AR体验：即利用计算机视觉识别现实中的场景，将虚拟信息有机的叠加到现实的场景中。

原生AR体验往往是基于3D图形的，5G大带宽的作用主要是提升3D模型的实时加载速度，让3D模型无需提前下载到本地，只有需要用到的时候再从云端进行加载，减少包体大小。

受限于移动设备的算力，云计算/云渲染是AR技术发展的方向，是解决本地算力不足的有限方式，也是5G结合AR应用的最大价值体现。

AR应用对3D模型的精度需求极高、对3D模型实时加载的需求很强的情况下，5G才有其发挥的价值。目前需要应用打破这样的场景是工业应用，如工业仿真需要展现大型设备，需要多人协同的交互场景，这类应用有一个基本特点就是都具有保密性，公网应用的可能性极低，内部网络足矣。

三、5G低时延对于VR/AR的作用

提到5G低时延对于VR/AR的作用，在各种媒体上看到类似“5G降低VR/AR时延，解决VR/AR眩晕感”这样的说法。

这是一个巨大的误区。

5G对于降低VR/AR时延没有任何的作用。

要讲清楚这个问题，我们先来看什么是VR/AR时延。VR/AR时延又称为运动到成像时延（Motion-to-Photon Latency），是指从IMU或视觉传感器检测头部/手部的运动，到图像引擎渲染出对应的新画面并显示到屏幕上，这样一个链路的时延。

主流的VR头显均已在本地做到了20毫秒以内的运动到成像时延，整个链路都是在本地设备上完成的，并不需要连网。20毫秒是一个人类感知的黄金分割线，时延低于20毫秒，我们就感觉不到了。我们测试过一些2018年的产品，时延已经达到了10毫秒左右。

有人可能要说了，那既然已经做到20毫秒以内了，为什么我玩VR还会眩晕？

那是因为导致VR眩晕的因素不止是时延，单将硬件设备需要提升单眼分辨率到4K，双眼8K，刷新率目前大多数设备在80赫兹以下，如果可以提升至120赫兹会大幅度降低眩晕感，其次就是内容舒适度。目前的技术已经解决了时延和问题，但是在硬件参数上满足8K分辨率120赫兹刷新率还有较大距离，内容设计上带来的眩晕感随着硬件设备的解决会同步得到提升，但是场景快递移动带来的眩晕感是需要个人去适应的，VR游戏和体验中的剧烈运动和快速移动依然可能会让你眩晕。这完全取决于你对晕动症的耐受程度，每个人都有所不同。

5G低时延的特征对于VR/AR的作用并不是降低时延，而是通过云游戏的技术方案提高画质，并降低云计算中的网络时延。

无论是VR一体机，还是连接手机的AR眼镜，都是运行在移动端上，主要是高通骁龙系列。相比PC的CPU和GPU而言，移动端的3D图形性能还是有数量级上的差异。VR/AR强调的是沉浸感，对于画质的要求很高，最极致的VR体验需要强劲的高端PC来承载。

5G可以将3D图形运算放到云端，也就是云游戏的技术路线。这样就可以利用云端强劲的PC级CPU和GPU来进行3D图形运算，再以视频流的形式传回本地的VR/AR设备上，让移动芯片的VR/AR设备也能显示出最顶级的画质。

然而，云计算的技术方案对于VR/AR来说，最大的挑战在于网络时延。如果采用了云计算的技术方案，那么网络时延就变成了运动到成像时延的一部分，网络时延会增加整体的运动到成像时延。从目前的数据来看，网络时延是整个链路中最长的部分，也是尚未解决的部分。

目前基于家庭宽带的情况，云计算的时延约在150毫秒左右。比如，Google的云游戏服务Stadia，经Digital Foundry初步测试，时延在166毫秒。

如果把这样的技术方案搬到VR/AR上来，那一定会让用户晕到天昏地暗。

这个时候5G低时延的价值就来了，如果5G真的能够达到标准中的1毫秒时延，那么基于5G的VR/AR云计算方案就能够达到合格的用户体验。如果真能做到，这会是VR/AR成为市场主流产品的重要基础设施。

那么问题来了，5G实际上到底能做到多低的时延，什么时候能做到这样低的时延。这才是关键。

再次来总结一下。我们认为：

5G的大带宽特性对于VR的价值是在线观看5K以上分辨率的大码率全景视频，以及大场景显示，对于AR在现阶段价值要优于VR，切记手机即是AR终端。

5G的低时延特性并无法帮助现在的VR/AR产品降低“运动到成像时延”，它的价值是通过云计算技术提升画质，同时帮助云计算降低其“网络时延”（“网络时延”是“运动到成像时延”的组成部分），使得采用云计算方案的VR/AR产品的“运动到成像时延”能够达到20毫秒的及格线以内，当然广义上的AR包含诸多应用场景，对于消费者日常AR导航、AR旅游、AR广告、点菜等应用来说现有技术足矣，对于游戏场景仍需解决网络时延和云计算的问题。