微软AR/VR专利提出通过惯性追踪和光流运动进行运动补偿
通过惯性追踪和光流运动进行运动补偿
(映维网Nweon 2024年12月26日)透视图可以提供各种有益的用户体验,包括帮助用户感知周遭的物理环境。在低光成像条件的示例中,由图像传感器捕获的单个图像帧可能无法提取足够的场景信息以向用户提供可解释的图像。另外,若是实施长曝光时间以便捕获额外的场景信息,这又可能导致图像模糊。
在一份专利申请中,微软提出可以通过惯性追踪和光流运动进行运动补偿,从而解释图像传感器的运动。例如,可以在捕获连续图像帧的同时获得惯性追踪数据,并且可以使用惯性追踪数据来对齐连续图像帧。然后,可以从包含比单个图像帧本身所能提供的更多场景信息的输出图像组合对齐的图像帧。
图2A示出用户202操作头戴式显示器204,用户环境中包含球208、盒子210和桌子212。头显204可为各种目的获取周围环境的图像,例如便于通过成像或计算机视觉任务。
......(全文 2572 字,剩余 2237 字)