微软XR专利分享:准确对齐头显摄像头、控制器摄像头的图像,改善MR透视画面
准确对齐头显摄像头和控制器摄像头的图像,从而改善头显的透视画面。
(映维网Nweon 2024年12月18日)现在的AR/VR控制器已经开始搭载传感器并实现自追踪功能。换句话说,控制器摄像头和头显摄像头可以同时捕获环境。
通过结合并对齐两个摄像头捕获的图像,系统可以改善头显的透视画面。然而,由于头显摄像头和控制器摄像头彼此独立移动,所以准确对齐图像以生成复合透视图像存在诸多挑战。
在日前公布的两份专利申请中,微软就介绍了一种准确对齐头显摄像头和控制器摄像头的图像,从而改善头显的透视画面的方法,涉及确定用于对齐由不同图像传感器捕获的场景内容的运动模型,以及用于选择运动模型以对齐不同图像传感器捕获的场景内容。
在一个实施例中,系统通过从两个图像中提取特征,使用提取的特征确定图像之间的特征对应,并使用特征对应来计算可用于将像素从一个图像映射到另一个图像的运动模型,将由头显摄像头捕获的图像与控制器摄像头捕获的图像对齐。运动模型可以定期更新/计算,以方便不同摄像头拍摄的图像连续对齐。
......(全文 6588 字,剩余 6176 字)