香港中文大学团队提出单视图沉浸式3D场景重建新方法ExScene
仅使用单视图输入即可实现一致的沉浸式场景重建
（映维网Nweon 2025年07月11日）对增强现实和虚拟现实应用日益增长的需求凸显了从简单的单视图图像制作沉浸式3D场景的重要性。然而，由于单视图输入提供的部分先验，现有的方法往往局限于从单视图输入重建低一致性的窄视场3D场景。相关限制使它们无法泛化重建沉浸式场景。
为了解决这个问题，香港中文大学(深圳)未来智联网络研究院和香港中文大学(深圳)团队提出了ExScene。这是一个两阶段的管道，可以从任何给定的单视图图像重建沉浸式3D场景。ExScene设计了一种新的多模态扩散模型来生成高保真度和全局一致的全景图像。
然后，研究人员开发了一种全景深度估计方法，从全景中计算几何信息，并将几何信息与高保真全景图像结合起来训练初始三维高斯飞溅模型。以其作为基础，团队引入了一种具有二维稳定视频扩散先验的GS精细技术。他们在扩散去噪过程中加入camera轨迹一致性和颜色几何先验，以提高图像序列间的颜色和空间一致性，然后用于微调初始3DGS模型，从而获得更好的重建质量。
实验结果表明，ExScene仅使用单视图输入即可实现一致的沉浸式场景重建，大大超过了最先进的基线。
......（全文 2011 字，剩余 1569 字）
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限
