Meta更新介绍基于IOBT的WMM手部追踪技术,改善视场外的追踪体验
Wide Motion Mode是指头显支持大范围运动检测
(映维网Nweon 2024年02月20日)Meta曾在2023年11月发布了Meta XR Core SDK v62,而团队日前更新了相关文档,并进一步介绍了新纳入的Wide Motion Mode功能。
简单来说,Wide Motion Mode是指头显支持大范围运动检测,而这项功能是基于2023年9月介绍的内向外身体追踪/Inside-Out Body Tracking(IOBT)。
Meta一直在积极优化Quest的追踪性能。2023年8月发布的Quest v56提供了实验版本的Multimodal和Capsense,以及Fast Motion Mode等功能。
在2023年9月,Meta又介绍了IOBT和Generative Legs(生成式双腿)。其中,IOBT将能够利用Quest 3的多个前置摄像头,尤其是侧面的摄像头,以及先进的计算机视觉算法来追踪用户的手腕、手肘、肩膀和躯干,从而能够精确地追踪上半身。对于IOBT,我们可以看到Quest 3已经可以支持相当大范围的运动检测。
在2023年11月,Meta发布了Meta XR Core SDK(v62),并开始探索基于IOBT的Wide Motion Mode。现在,团队已经更新了Meta XR Core SDK v62的文档,并进一步介绍了Wide Motion Mode。
据介绍,Wide Motion Mode(WMM)允许系统追踪双手,即便你的手是头显的视场之外,它都能显示合理的手势,从而改善社交临在和大幅度运动追踪。Meta指出,这是基于在引擎盖下运行的IOBT功能,系统可以在手部追踪丢失时使用估计的手部位置来实现手势检测。
团队指出,这项功能的优势包括:
-
即便手在视场之外,都可以提供看似合理的手势,从而改善社交临在
-
更可靠的大动作交互,例如手臂摆动和投掷等
-
减少由于用户转头时追踪丢失而导致的手势和交互失败
-
支持基于手臂摆动的移动机制,用户可以使用他们的手臂在游戏中移动,比如《Echo VR》
需要注意的是,目前WMM依然存在一定的限制:
-
尽管系统将始终提供手势,但当手部追踪丢失时,提供的手势将不准确,因为系统是使用身体追踪数据来获取大致位置,并将最后的手姿作为手部姿态本身。
-
你可能会看到,在重新建立手部追踪时,由于从基于身体追踪的手势过渡到基于手部追踪的手势,位置精度会有异状。
-
WMM在极弱的光线下可能不太稳健。在光线不足的情况下,系统将恢复到标准的手部追踪。
值得一提的是,Meta表示Wide Motion Mode支持Quest 3及所有未来设备。另外,随着Quest v62在月初的发布,Multimodal和Capsense已经结束实验状态。