高通是如何通过骁龙845改变XR行业 带来更沉浸式体验

　　2018年03月19日，在移动虚拟现实领域，高通可能是最大的玩家，他们已经与合作伙伴推出了超过20款XR设备，涵盖一体机和XR兼容智能手机。另外，据映维网了解高通还在研发20多款相关设备。不仅如此，高通还设立了HMD Acceleration Program (HAP)，通过参考设计来支持客户快速实现商业化。

　　为了进一步实现这一目标，高通新推出的高通骁龙845移动平台集成了最新的Qualcomm Adreno 630视觉处理子系统架构，后者包含了优秀的的集成图形、视频和显示处理技术，以及尖端的性能。通过将娱乐，教育和社交转变为具备直观交互，惊人视觉效果和逼真音效的高度沉浸感体验，这将能来改变XR的行业生态。

　　Adreno 630的效率十分优异。与上一代相比，其图形性能提高了30%，功率高出30%，而显示吞吐量则提高了一倍以上。

　　1. 6DoF+SLAM

　　骁龙845是首个支持六自由度头部追踪的移动平台，并且支持即时定位与地图构建功能(SLAM)。

　　在体验虚拟现实时，你必须能够实时创建和更新物理环境的映射，同时能够追踪你的位置。

　　利用骁龙845的六自由度和SLAM功能，你可以通过高级算法浏览并避开狭窄区域的墙壁和障碍物。你还可以了解房间的大小，扫描房间中的对象(以避开它们)，并将真实世界的对象整合至你的虚拟世界之中。如果你是一个“Trekkie(意指星际迷航粉丝)”，你会注意到这与企业号的全息甲板存在一定的相似之处。

　　能够实现高达单眼400万像素的SLAM可通过多个异构引擎进行管理，包括Snapdragon 845上的Qualcomm Spectra 280 ISP，Qualcomm Hexagon 685 DSP和的Qualcomm Kryo 385 CPU。

　　SLAM同时是AR在追踪场景中精确定位虚拟对象的关键技术，能够确保系统在真实环境中实现精确的可视化与定位。

　　2. 手部追踪+语音指令

　　高通与Leap Motion等公司进行了合作，帮助骁龙845在最低延迟时间内实现了最佳的手部追踪精度。最近已经证明，先进的虚拟现实应用Think FAST能够为中风患者提供帮助，并最终助力拯救生命。这款应用程序具备先进的手部追踪功能，用户在操作直观的界面显示时能够感知双手，并且支持在训练模块中进行选择。

　　骁龙845能够判断你的命令关键字，这样就可以通过语音命令来简化你的XR体验。在Think F.A.S.T训练期间，你的语音输入可支持你与和患者进行交流。对于骁龙845如何进一步提升教育和企业培训，Think F.A.S.T.是一个优秀的例子。

　　3. 眼球追踪

　　骁龙845搭载了数字图像处理技术Adreno Foveation。与上一代相比，这可以显着降低功耗，提高XR应用性能，并且优化注视点内的视觉质量。

　　Adreno Foveation采用了独特的图形渲染技术，通过眼动追踪技术来判断用户的注视点位置，然后集中图形资源来增强这一区域的视觉效果。例如，注视点以外的区域渲染质量将逐渐减少，系统将以更多的资源来渲染注视点区域。

　　Adreno Foveation包含多项技术进步：多视角渲染(Multi-view rendering)，平铺聚焦(tile-based foveation)和细粒度终断(fine grain preemption)。

　　多视角渲染（Multi-view rendering）：不同于当前VR头显的常规渲染标准(独立渲染每个眼睛缓冲区)，对象将首先渲染至左眼缓冲区，然后自动复制到右眼缓冲区，并对位置和与视图相关的变量(如反射)进行合适的修改。

　　分块聚焦（tile-based foveation）：高通与软件合作者一起开发了这个设计，分块聚焦能够将场景分解为多个块状进行处理。用户直接感知的聚焦区将以最高的细节量进行渲染，周边分块则呈现更少的细节，而场景边缘的分块则接收最少的细节。

　　细粒度终断（fine grain preemption）：这是一种有效中断当前正在执行的进程的方式，能够最小延迟启动更高优先级的进程。一旦中断过程完成，系统也可以有效地继续前一个过程。这能够实现优化的结果，特别是要求高实时性，低延迟时间的XR应用。

　　4. AR新方向

　　语音用户界面对于下一代XR体验非常重要，特别是AR。即将推出的AR眼镜可以拥有一个“始终倾听”的组件，能够识别关键短语以唤醒眼镜或调用特定动作，比如说“Hey Snapdragon”。未来的AR眼镜还可以利用骁龙的计算机视觉和面部识别技术，以及训练有素的机载神经网络来识别房间中的人。借助这种情景信息，AR眼镜的应用程序可以推荐操作，或者自动采取行动(例如显示有关房间内人员的有用信息)。

　　AR还可以改变你购物和进行移动支付的方式。在2017年12月举行的骁龙技术峰会上，高通与ODG合作展示了如何在虚拟购物环境中使用这样的眼镜。在演示中，只需简单地注视商品，并点击眼镜即可将物品添加至购物车。在付款时，眼镜将执行虹膜认证，扫描用户眼睛，确认你的身份，并实现最终的付款。

　　5. 3D音频

　　骁龙845同时支持3D音频，能够进一步将你沉浸在VR环境之中。例如，3D音频反映了周围环境的物理组成。如果你站在一个虚拟洞穴之中，你能够像现实世界洞穴那样听到声音的混响和反射。

　　Adreno 630代表了一个真正的动态视觉处理子系统，使得骁龙845能够在2018年为市场提供全新的体验。