微软AR/VR专利介绍一种利用融合深度传感的全身追踪方法
全身追踪
(映维网Nweon 2024年01月05日)目前大多数基于XR一体机的Avatar系统都没有下半身。一个重要的原因是,尽管设备能够通过摄像头覆盖和算法补充来精确追踪上半身,但基本没有摄像头视场覆盖的下半身只能通过算法进行估计判断。随着头显形状参数的不断小型化轻薄化,摄像头的视场覆盖问题将会变得越发困难。
不过,诸如Meta,苹果和微软等巨头都在积极探索相关的解决方案。例如在名为“Full body tracking using fusion depth sensing”的专利申请中,微软就介绍了一种利用融合深度传感的全身追踪方法。
微软指出,为了提供真正身临其境的MR体验,需要对真实物理中的用户和对象进行精确的运动追踪。例如,可以通过可穿戴设备的雷达传感器设备来检测、测量和/或追踪对象的位置。每个雷达传感器可以生成、捕获并评估与可穿戴设备和周围环境相关的雷达信号。在视场内具有足够反射率的对象将产生具有特征到达时间(TOA)、到达角(AOA)和频移(多普勒频移)的雷达返回信号。
然后,可以对感知到的返回信号进行处理,从而确定距离和方向,并根据目标的雷达特性识别目标。另外,包括位置和识别的对象信息可以基于与来自一个或多个数字摄像头或惯性测量单元的测量的相关性进一步解析。
......(全文 4814 字,剩余 4361 字)