雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

Snap AR/VR专利提出一种在二维图像域实时检测场景变化的系统

查看引用/信息源请点击:映维网Nweon

在二维图像域而不是三维空间中实时检测场景变化

映维网Nweon 2023年09月08日)视觉追踪装置可用于捕获图像。例如,在周一的第一会话上,用户佩戴AR设备在房间里走动,然后在周二的第二会话中在同一个房间走动。视觉追踪设备可以根据AR设备的图像数据,使用三维空间中的体素来检测场景的变化。然而,检测3D域的变化是资源密集型的,并且由于3D模型的3D重建的敏感性而可能导致不准确。

在名为“Scene change detection with novel view synthesis”的专利申请中,Snap提出了一种在二维图像域而不是三维空间中实时检测场景变化的系统。

系统首先使用视觉定位将第一会话的坐标系统对齐到第二会话。然后,系统应用NeRF模型生成新图像。NeRF模型使得系统能够在没有特定场景训练的情况下生成新图像。系统从新图像的特征中减去第一会话的第一图像的特征,从而识别场景变化。

在一个示例中,变化的梯度在热图中以不同的颜色显示。然后,系统将热图显示为第一图像或新图像的叠加。

......(全文 2506 字,剩余 2144 字)

映维网会员请登录SCC板块阅读完整文章
PICO、大朋等公司员工可联系映维网免费获取权限

本文链接https://news.nweon.com/112388
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯