布局XR,高通都做了些什么?
除了上述XR1芯片之外,高通在XR领域的布局远超我们想象。
1、芯片:低中高三端齐下
其实在XR1芯片推出之前,高通的821、835、包括最新的845都已经在VR/AR设备中有应用,特别是835和845方案,都专门针对VR/AR做了优化。
相比其他几款,XR1则是为XR定制。从郭鹏口中,我们了解到高通对这款芯片的定位,在其看来,XR1是820、821方案最适合的过渡产品,性能较这两款芯片有提升,但相比835、845这种主打顶级体验的方案又略微逊色。
“目前针对VR和AR产品的演进,与手机相比是有一些差异的。比如刷新率的支持就十分明显,因为手机都是支持比较主流的60Hz,在VR、AR设备上则需要支持75Hz甚至90Hz。另外一方面是屏幕的分辨率,手机上一般是很难用到4K甚至2K,但是在VR设备上,要追求大的FOV(视场)达到沉浸式体验,2K、4K分辨率其实都是不过分的。除此之外还有一些专门针对XR的新技术,比如说3DoF或者6DoF的手势方案、眼球追踪、局部渲染的支持,这是以前在手机上都是没有的,但对于XR而言是新技术。不管是对于骁龙820、821、835和845上针对支持XR的软件,还是骁龙XR1这个专用芯片的软件和硬件,我们针对VR和AR都有特别的优化、来支持XR的特性功能。”
高通845平台
据称,XR1的亮点主要集中在4个方面:
1、AI Engine,能够处理AI用例,运行是计算机视觉算法,以实现应用于AR场景的姿势预测、物体识别等。
2、支持4K 60帧视频播放,并且可以利用ISP软硬件算法降噪,支持OpenGL、OpenCL和Vulkan等API。同时,基于高级视觉处理技术,如视觉惯性测距(VIO)等,让用户能在虚拟世界里自由移动,或在AR体验中与虚拟物体进行互动。
3、全景声效果。XR1的头相关变换函数(head-related transfer functions, HRTF)可根据用户的头耳传递参数“定制”合成双耳声,让用户感觉仿佛声音是来自空间中某个特定的位置。
4、支持3DOF和6DOF交互,显示时延低于20ms。
据称目前Meta、Vive、Vuzix和Pico等厂商已基于首款专用的XR1平台进行开发,今年Q4季度将会有搭载了这款方案的产品面世。
另外,对于835和845平台,835已经在Vive Focus、Pico Neo、爱奇艺奇遇二代等主流的头显中应用。而845,高通将其定义为移动端的顶级体验方案。今年年初,高通针对这一平台推出了VR头显参考设计,在头显中集成了眼球追踪、手势识别、SLAM定位、6DoF追踪等功能。高通曾表示,骁龙845移动平台“旨在帮助消费者拍摄影院级视频,以及模糊物理世界和虚拟世界之间的界限”。
高通VR一体机参考方案
从芯片方案上,高通的平台覆盖了低中高到顶级的体验方案。在芯片的研发投入上,根据IC Insights发布的2017年半导体研发领域投入TOP10的公司来看,高通仅次于英特尔,去年在芯片研发上投入了34.5亿美元。
(数据来源:IC Insights)