微软专利分享空间重建数据选择，防止MR虚拟元素与物理元素的配准丢失
用于空间配准的技术
（映维网 2022年01月11日）混合现实允许用户相对于可视用户空间中的物理元素放置虚拟元素，例如箭头、文本、其他数字图形。但随着视觉用户空间的移动，相关的物理元素数据可能会丢失或损坏，或者变得不准确或不可靠。所以，虚拟元素和物理元素之间的空间配准可能出现丢失。由于虚拟元素失去了相对于物理元素的定位，这种空间配准的丢失会减损用户的体验。
在名为“Data selection for spatial reconstruction”的专利申请中，微软就介绍了一种相关得解决方案。具体来说，其主要描述了一种用于空间重建的数据选择。
在图1中，智能手机104在两个不同视场100和102中对虚拟元素和物理元素进行空间配准。在视场100中，用户可以在物理用户空间中看到微波炉106和台面107。在所述实现中，微波炉106由移动智能手机104的摄像头捕获。来自摄像头的视频流包括视频帧的时间序列，其中每个视频帧是摄像头在特定时间捕获的图像。
当用户移动智能手机104及摄像头时，视窗发生变化，从视场100变成视场102。在视场102中，摄像头已经移动，使得微波炉106及其台面107的一部分脱离了摄像头画面。
为支持混合现实环境，可以对物理用户空间的捕获视频帧进行分析，以识别图像特征。然后将所述图像特征映射到用户空间中，从而执行一系列的操作。例如，用户可以将箭头注释118这个虚拟元素放置在视场100中。
为了检测相关图像特征，智能手机104接收并分析视频帧的时间序列。在一个实现中，由智能手机硬件处理器执行的图像处理引擎检测由视频帧提供的图像特征点，从而用于空间重建。例如在图1中，图像处理引擎分析图像并识别可分类为特征点的图像特征。作为分析的一环，图像处理引擎可以测量跨多个视频帧的相似图像特征的对应关系。示例图像特征可以包括但不限于边缘和角等等。根据图像特征，图像处理引擎可以将图像中的各种位置识别为特征点，例如边缘的交点和角点等等。
......（全文 3218 字，剩余 2535 字）
