上海交大等团队提出3D场景实时修复方法InstaInpaint

PICO 4 Ultra

查看引用/信息源请点击:映维网Nweon

InstaInpaint相比先前方法实现了1000倍的速度提升

映维网Nweon 2025年10月27日)3D场景重建技术的最新进展使得在虚拟现实和增强现实中的实时浏览成为可能。为了支持交互式操作(例如移动或编辑物体)以提升沉浸感,业界提出3D场景修复方法以用于修复或补全改变后的几何结构。然而,当前的方法依赖于耗时且计算密集的优化过程,这使得它们难以用于实时或在线应用。

在一项研究中,上海交通大学,加利福尼亚大学默塞德分校,新加坡科技设计大学团队提出了InstaInpaint。这是一个基于参考的前馈框架,能在0.4秒内根据2D修复提案生成3D场景修复结果。研究人员开发了一种自监督的掩码微调策略,使得能够在大规模数据集上训练定制的大型重建模型(LRM)。

通过大量实验,团队分析并确定了几个能够提升泛化能力、纹理一致性和几何正确性的关键设计。InstaInpaint相比先前方法实现了1000倍的速度提升,同时在两个标准基准测试中保持了最先进的性能。另外,研究人员展示了InstaInpaint能够很好地泛化到灵活的下游应用,如物体插入和多区域修复。

上海交大等团队提出3D场景实时修复方法InstaInpaint

......(全文 2465 字,剩余 2082 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/135453
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  AR/VR开发者  |  映维粉丝读者
XR 招聘Job
XR Research Wechat Group/微信群
资讯