基于高斯飞溅交互渲染用于创建可照明可动画的Avatar
以更快的速度渲染更高质量的结果
(映维网Nweon 2025年01月20日)从多视角或单目视频中创建可照明和可动画Avatar是数字人类创作和虚拟现实应用的一项挑战。以前的方法依赖于神经辐射场或光追,导致训练和渲染过程缓慢。
通过利用高斯飞溅,浙江大学,伦敦大学学院,犹他大学团队提出了一种简单有效的方法,可以将身体材质和照明从稀疏视图或单目视频中分离出来,这样Avatar就可以在新的视点、姿势和照明下以交互帧率同时渲染。
具体而言,首先使用SDF获得规范体三维网格,并为每个网格顶点分配属性。然后,规范空间中的高斯函数从附近的体网格顶点进行插值以获得属性。随后,使用前向蒙皮将高斯属性变形到posed空间,并将可学习的环境照明与高斯属性结合起来进行阴影计算。
为了实现快速的阴影建模,研究人员从密集的视点对人体网格进行栅格化,以获得可见性。团队指出,所述方法不仅简单,而且足够快,可以在环境光线变化的情况下进行角色动画的交互渲染。实验表明,与以往的研究相比,所提出方案可以在合成数据集和真实数据集上以更快的速度渲染更高质量的结果。
......(全文 1796 字,剩余 1378 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限