西北大学提出基于物理的文本到3D高斯飞溅运动生成框架
文生3D
(映维网Nweon 2025年05月05日)文生3D是虚拟现实和数字内容创作中的一项价值技术。然而,用低效提示生成高保真3D对象并准确地模拟其物理运动依然是未解决的挑战。针对这个问题,美国西北大学团队提出了一个创新的框架,利用大型语言模型改进提示和扩散先验引导的高斯飞溅来生成具有精确外观和几何结构的3D模型。
团队同时结合了基于连续介质力学的变形图和颜色正则化,为生成的三维高斯合成生动的物理基础运动,坚持质量和动量守恒。
通过将文本到3D生成与基于物理的运动合成相结合,框架渲染出具有物理感知运动的逼真3D对象,准确反映对象在不同材质的各种力和约束下的行为。大量的实验表明,所述方法实现了高质量的运动。
文本到3D建模在创建高度逼真的3D表示方面取得了显著成就。已有研究在使用文本-图像先验生成精细3D对象方面取得了非常大的进展。另外,其他研究在产生给定3D对象的运动方面同样取得了进展。
尽管取得了进步,但目前的方法在从低效文本提示合成逼真的3D对象并准确模拟运动方面存在挑战。3DGS由于其出色的精细细节渲染能力、基于点的表示和快速的渲染速度而成为神经渲染领域的一项突出技术。
......(全文 1172 字,剩余 730 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限