为眼镜造“芯”者,高通铺路无界XR

为眼镜造“芯”者,高通铺路无界XR

XR是下一代移动计算平台。

高通中国区XR业务负责人郭鹏在前不久的XR生态合作伙伴大会上如是说。

其实,有这样想法的不只是高通。

Facebook创始人扎克伯格此前就曾表示,VR将是继手机之后最主要的计算和通信平台。为此,扎克伯格不惜花20亿美元天价收购Oculus,并开始他的造梦大戏。

同样看上XR的华为,继去年发布首款VR眼镜后,本月又对外公布了即将面世的6DoF VR眼镜。

这么多头部科技公司为什么会盯上现在市面上那些看似笨重的XR眼镜呢?

其实,这些厂商正在极力创造的是取代你鼻梁上那副玻璃眼镜的一副能带你进入另一个虚拟世界的XR眼镜。

一个XR过渡性计划

作为上一代移动计算平台,智能手机至今已经走过十余载,人手一部智能手机早已不再是什么不可思议的事情。然而,XR经过五年的摸爬滚打,才刚刚掀开属于它的时代的一角。

2020年5月26日,3Glasses、爱奇艺、Nreal、Pico、影创科技等XR设备厂商,OPPO、vivo、一加、中兴等手机厂商,外加中国移动、中国联通、中国电信、德国电信、EE、KDDI等来自全球的15家运营商同时出现在增强现实世界博览会(AWE)的一份名单上。

为眼镜造“芯”者,高通铺路无界XR

能够聚集如此庞大阵容的合作伙伴生态,正是高通提出的「XR眼镜适配计划」,这一计划旨在推动XR设备通过USB Type-C与搭载骁龙855或865移动平台的5G智能手机相连。

5G智能手机+XR眼镜分体式设计,正是高通近几年看好的一个XR发展方向。

所谓XR,即扩展现实(Extended Reality),是VR、AR、MR的技术总称。

以VR设备为例,去年面世的Oculus Quest被视为是VR行业从PC VR走向VR一体机的一台标志性设备。那么,既然VR一体机看似已经得到了不错的市场反馈,为何还需要将VR眼镜与智能手机强关联?

相较智能手机全球近15亿的出货量而言,即使如Oculus Quest这样已经出货百万的VR设备,仍然无法如智能手机一样普及,甚至有VR行业从业者表示,95%以上的普通用户都还不曾了解过VR。

究其原因,VR设备体积过于庞大,复杂度过高成为关键因素之一。

正因如此,设备轻量化成为VR行业一个重要课题。

纵观当下VR一体机的核心处理器,几乎用的还都是高通骁龙8系列平台。甚至由于VR行业成熟度远不如智能手机行业成熟度高,应用的平台版本相对主流智能手机也要稍有滞后,如果将VR一体机上的处理器下沉到手机端,采用分体式设计会如何?

结果就是可以让VR设备做得更轻薄、计算能力也更强,甚至还能通过智能手机这一天然的大流量池带来更大量级的用户流量。

高通认为,XR设备在未来1-4年内以智能手机配件形态发展将是一条主流发展途径。

与此同时,5G技术逐渐成熟并成为大势所趋已是不争的事实,作为与高速率、低延时的5G网络天然有高契合度的VR行业,也被认为会由此迎来一个高速成长时期。

为眼镜造“芯”者,高通铺路无界XR

站在整个产业链上游的高通自然有明显优势去深入思考XR行业,于是,经过一年的筹划,「XR眼镜适配计划」在今年正式面世。

高通这样的想法与诸多身处XR行业的厂商可以说是不谋而合。纵观过去两年,分体式设计已经逐渐成为XR行业的一条主线,以VR领域明星企业3Glasses为例,3Glasses在从PC VR进入移动VR时,选择的正是与智能手机直连的更轻薄化的VR眼镜形态。

今年首次试水AR眼镜领域的酷派,同样认为,轻量级AR眼镜首先需要经过一个“手机配件”的发展阶段。

不过,这样的分体式设计只是XR眼镜的一个过渡形态,无界XR才是高通看到的未来。

无界XR:XR变革的下一个十年

无界XR(Boundless XR),即分离式渲染。

高通认为,未来1到4年,随着5G技术的普及,XR一体机的内容处理、画面渲染等大计算量工作将被移至云端,终端设备的算力仅用来实现更成熟的双6DoF、手势识别等交互体验。

与此同时,现阶段的XR分体式设计也将基于5G技术从有线走向无线,并最终与XR一体机走向融合。

为眼镜造“芯”者,高通铺路无界XR

可以说,5G技术为XR带来的不仅仅是更稳定的网络传输,更让XR设备实现了分布式智能,从而加速了XR设备的轻薄化、智能化,以及向消费领域的快速渗透。

正因XR设备有这样明朗的发展思路,回头再看“以5G传输为主导的小型化、无线化、多功能的XR设备最终取代智能手机,成为继电脑、手机之后的下一代移动计算平台”这样的趋势预判就不再是天方夜谭。

其实,无界XR理念已经开始在诸如Oculus Quest、Pico Neo 2设备中有所应用。

以今年年初面世的Pico Neo 2一体机为例,这款设备一个亮点在于可以通过无线串流方式购买并体验发布在Steam平台上的PC VR游戏,尤其可以体验今年V社耗时数年创作的经典之作《Half-Life:Alyx》,也为这款设备带来了不错的用户流量。

作为这一理念的提出者和奉行者,据郭鹏介绍称,高通在芯片、软件、参考设计、生态加速计划四个方面,为整个行业快速进入无界XR铺平了道路:

第一,芯片。高通自2016年推出骁龙820/821平台后,基于移动硬件领域经验,开始对XR设备处理器迭代。包括随后基于VR优化的骁龙835平台,推出XR1、XR2平台。

第二,软件。XR的交互模式与智能手机的显示、触摸等交互模式不同,有头手双6DoF、眼球、表情等全面调动人类感知系统的各类交互模式,因而需要更强大、系统的底层软件支撑。

我们可以提供用于打造XR体验的六自由度(6DoF)和即时定位与地图构建(SLAM)等感知算法;

我们可以对用户的头部进行定位,让用户在运动的情况下与设备进行交互;

我们还有眼球追踪、表情追踪,语音输入等相关算法;

除此之外,高通还会提供针对显示和GPU的优化,以及针对功耗与性能的优化。

第三,参考设计。高通从骁龙820、821平台开始,每一代XR平台都会提供完整的XR软/硬参考设计,并会提供软件开发的参考代码,以此加速。

据悉,高通提供的XR原型机的参考设计方案很完整,同时也是配置要求很高一套方案。设备厂商拿到这样的方案一般通过做“减法”,最终落地到各垂直行业应用领域。

第四,生态加速计划。除去前文提到的「XR眼镜适配计划」,高通此前还针对XR领域推出「HMD加速器计划」、「XR企业计划」等XR生态加速计划。

为眼镜造“芯”者,高通铺路无界XR

相较于Facebook针对Oculus投巨资构建自家相对封闭式的技术生态、内容生态和开发者生态,高通拉来运营商、技术开发商、内容开发者、设备厂商共同参与的这些XR生态加速计划均如「XR眼镜适配计划」一般,是针对整个行业生态构建、推动XR业态加速成熟落地的更为庞大的开放生态计划。

而高通从芯片、软件、参考设计到开放生态的整体谋划布局,也将为XR带来更强的行业拉动性,加速XR无界化。

高通XR的“大杯”和“超大杯”

2018年5月,高通正式对外推出首款XR专用平台——高通骁龙XR1平台;

2019年12月,高通再次对外发布首款支持5G的XR2平台。

为眼镜造“芯”者,高通铺路无界XR

从沿用智能手机系列代号的820、821、835等,转入开辟XR专用平台,在走过初期摸索期的XR行业开始对处理芯片有更高、更明确的需求时,高通抓住了这一时机,入场、加注。

XR1、XR2正是高通在XR行业押的两枚重注。

可能有人会疑惑:XR1、XR2发布间隔仅一年半,是否XR行业已经快要赶上智能手机的迭代速度?

其实不然,正如前文提到,XR行业成熟度远不如智能手机行业成熟度高,高通这样的产品布局其实也有深意。

一方面,二者市场定位不同。郭鹏解释称,“骁龙XR1平台和XR2平台是面向不同市场的产品,XR1平台面向中高端市场,而XR2平台属于旗舰级平台,直接面向最高端的XR平台。”

可以说,XR1、XR2是高通面向XR设备推出的“大杯”和“超大杯”。

另一方面,XR2的快速推出也正推动XR行业迅速进入5G时代。从高通用于XR行业的骁龙8系列平台到XR专用平台,从XR1到XR2,高通显然也在加快面向这一行业的产品布局,尤其是首款支持5G的XR2及其参考设计相继公布,让XR行业得以快速摸到5G技术的大门。

5G能为XR行业带来什么?

一个深得行业认可的说法是:5G、AI、XR三者的结合,将为消费者以及各行业提供更加智能、更加互联、更加沉浸式的XR体验。

高通XR2为这样的产品出现做足了准备。

除去是全球首个支持5G连接的XR专用平台外,XR2还支持60GHz无线连接、七路并行摄像头、90fps 3Kx3K的单眼分辨率、内置诸多AI硬件加速模块……

为眼镜造“芯”者,高通铺路无界XR

以支持7路并行摄像头为例,XR设备与外界环境交互依赖于传感器,尤其视觉传感器,因而对视觉AI能力有较高的要求,高通XR2通过支持七路并行摄像头,结合硬件上的CPU、GPU、CV-ISP为视觉AI算法提供硬件支撑。

据雷锋网了解,XR2作为全球首个通过支持低时延摄像头透视技术实现真正MR体验的XR平台,首款搭载XR2平台的MR眼镜——影创科技研发的“鸿鹄”眼镜,也将在下个月(10月)正式对外发布。

XR助力千行百业

相较于消费领域XR设备,面向商用领域的XR产品已经走上了越来越多的“工作岗位”。

以工业场景为例,微软HoloLens已经应用于民航发动机智能维修与虚拟培训系统,亮风台AR眼镜在核电站设备运维上的应用。

此外,在今年疫情期间,地产领域结合VR技术开发的VR看房应用,以及AR线上会议系统、VR线上发布会等诸多结合行业的XR应用备受关注,并已在行业中尝试落地应用。

同样针对企业应用,去年9月,高通在企业可穿戴技术峰会(EWTS)上对外公布了XR企业计划,这一计划旨在联合XR设备厂商,基于骁龙XR平台,推动XR在诸如制造业、能源、医疗、航空、教育、零售等行业应用落地。

一面是消费XR开始加速,另一面是商用XR不断繁荣。

随着5G技术在XR领域应用不断成熟,AI技术在XR领域迸发出越来越多的创新应用,下一个十年,XR改变的不仅仅是娱乐产业,也将改变人类的生产、生活方式,成为下一个时代值得期待的移动计算平台。

雷锋网(公众号:雷锋网)雷锋网

雷锋网原创文章,未经授权禁止转载。详情见转载须知

为眼镜造“芯”者,高通铺路无界XR

(完)