雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

高通是如何通过骁龙845改变XR行业,带来更沉浸式体验

文章相关引用及参考:映维网

这将能来改变XR的行业生态。

映维网 2018年03月19日)在移动虚拟现实领域,高通可能是最大的玩家,他们已经与合作伙伴推出了超过20款XR设备,涵盖一体机和XR兼容智能手机。另外,据映维网了解高通还在研发20多款相关设备。不仅如此,高通还设立了HMD Acceleration Program (HAP),通过参考设计来支持客户快速实现商业化。

为了进一步实现这一目标,高通新推出的高通骁龙845移动平台集成了最新的Qualcomm Adreno 630视觉处理子系统架构,后者包含了优秀的的集成图形、视频和显示处理技术,以及尖端的性能。通过将娱乐,教育和社交转变为具备直观交互,惊人视觉效果和逼真音效的高度沉浸感体验,这将能来改变XR的行业生态。

Adreno 630的效率十分优异。与上一代相比,其图形性能提高了30%,功率高出30%,而显示吞吐量则提高了一倍以上。

1. 6DoF+SLAM

骁龙845是首个支持六自由度头部追踪的移动平台,并且支持即时定位与地图构建功能(SLAM)。

在体验虚拟现实时,你必须能够实时创建和更新物理环境的映射,同时能够追踪你的位置。

利用骁龙845的六自由度和SLAM功能,你可以通过高级算法浏览并避开狭窄区域的墙壁和障碍物。你还可以了解房间的大小,扫描房间中的对象(以避开它们),并将真实世界的对象整合至你的虚拟世界之中。如果你是一个“Trekkie(意指星际迷航粉丝)”,你会注意到这与企业号的全息甲板存在一定的相似之处。

能够实现高达单眼400万像素的SLAM可通过多个异构引擎进行管理,包括Snapdragon 845上的Qualcomm Spectra 280 ISP,Qualcomm Hexagon 685 DSP和的Qualcomm Kryo 385 CPU。

SLAM同时是AR在追踪场景中精确定位虚拟对象的关键技术,能够确保系统在真实环境中实现精确的可视化与定位。

2. 手部追踪+语音指令

高通与Leap Motion等公司进行了合作,帮助骁龙845在最低延迟时间内实现了最佳的手部追踪精度。最近已经证明,先进的虚拟现实应用Think FAST能够为中风患者提供帮助,并最终助力拯救生命。这款应用程序具备先进的手部追踪功能,用户在操作直观的界面显示时能够感知双手,并且支持在训练模块中进行选择。

骁龙845能够判断你的命令关键字,这样就可以通过语音命令来简化你的XR体验。在Think F.A.S.T训练期间,你的语音输入可支持你与和患者进行交流。对于骁龙845如何进一步提升教育和企业培训,Think F.A.S.T.是一个优秀的例子。

3. 眼球追踪

骁龙845搭载了数字图像处理技术Adreno Foveation。与上一代相比,这可以显着降低功耗,提高XR应用性能,并且优化注视点内的视觉质量。

Adreno Foveation采用了独特的图形渲染技术,通过眼动追踪技术来判断用户的注视点位置,然后集中图形资源来增强这一区域的视觉效果。例如,注视点以外的区域渲染质量将逐渐减少,系统将以更多的资源来渲染注视点区域。

Adreno Foveation包含多项技术进步:多视角渲染(Multi-view rendering),平铺聚焦(tile-based foveation)和细粒度终断(fine grain preemption)。

多视角渲染(Multi-view rendering):不同于当前VR头显的常规渲染标准(独立渲染每个眼睛缓冲区),对象将首先渲染至左眼缓冲区,然后自动复制到右眼缓冲区,并对位置和与视图相关的变量(如反射)进行合适的修改。

分块聚焦(tile-based foveation):高通与软件合作者一起开发了这个设计,分块聚焦能够将场景分解为多个块状进行处理。用户直接感知的聚焦区将以最高的细节量进行渲染,周边分块则呈现更少的细节,而场景边缘的分块则接收最少的细节。

细粒度终断(fine grain preemption):这是一种有效中断当前正在执行的进程的方式,能够最小延迟启动更高优先级的进程。一旦中断过程完成,系统也可以有效地继续前一个过程。这能够实现优化的结果,特别是要求高实时性,低延迟时间的XR应用。

4. AR新方向

语音用户界面对于下一代XR体验非常重要,特别是AR。即将推出的AR眼镜可以拥有一个“始终倾听”的组件,能够识别关键短语以唤醒眼镜或调用特定动作,比如说“Hey Snapdragon”。未来的AR眼镜还可以利用骁龙的计算机视觉和面部识别技术,以及训练有素的机载神经网络来识别房间中的人。借助这种情景信息,AR眼镜的应用程序可以推荐操作,或者自动采取行动(例如显示有关房间内人员的有用信息)。

AR还可以改变你购物和进行移动支付的方式。在2017年12月举行的骁龙技术峰会上,高通与ODG合作展示了如何在虚拟购物环境中使用这样的眼镜。在演示中,只需简单地注视商品,并点击眼镜即可将物品添加至购物车。在付款时,眼镜将执行虹膜认证,扫描用户眼睛,确认你的身份,并实现最终的付款。

5. 3D音频

骁龙845同时支持3D音频,能够进一步将你沉浸在VR环境之中。例如,3D音频反映了周围环境的物理组成。如果你站在一个虚拟洞穴之中,你能够像现实世界洞穴那样听到声音的混响和反射。

Adreno 630代表了一个真正的动态视觉处理子系统,使得骁龙845能够在2018年为市场提供全新的体验。

本文链接https://news.nweon.com/42719
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯