Snap AR/VR专利提出一种在二维图像域实时检测场景变化的系统
在二维图像域而不是三维空间中实时检测场景变化
（映维网Nweon 2023年09月08日）视觉追踪装置可用于捕获图像。例如，在周一的第一会话上，用户佩戴AR设备在房间里走动，然后在周二的第二会话中在同一个房间走动。视觉追踪设备可以根据AR设备的图像数据，使用三维空间中的体素来检测场景的变化。然而，检测3D域的变化是资源密集型的，并且由于3D模型的3D重建的敏感性而可能导致不准确。
在名为“Scene change detection with novel view synthesis”的专利申请中，Snap提出了一种在二维图像域而不是三维空间中实时检测场景变化的系统。
系统首先使用视觉定位将第一会话的坐标系统对齐到第二会话。然后，系统应用NeRF模型生成新图像。NeRF模型使得系统能够在没有特定场景训练的情况下生成新图像。系统从新图像的特征中减去第一会话的第一图像的特征，从而识别场景变化。
在一个示例中，变化的梯度在热图中以不同的颜色显示。然后，系统将热图显示为第一图像或新图像的叠加。
......（全文 2506 字，剩余 2144 字）
