浙江大学+Vivo提出FAGhead从单目视频实现可控Avatar方法

查看引用/信息源请点击:映维网Nweon

从单目视频中实现完全可控Avatar

映维网Nweon 2024年12月27日)3D Avatar的高保真重建有着广泛的应用,包括虚拟现实。在一项研究中,浙江大学和vivo团队提出了FAGhead,一种从单目视频中实现完全可控Avatar的方法。

研究人员显式转换传统的三维变形网格(3DMM),并优化了中性3D Gaussians以实现复杂表情的重建。另外,他们采用了一种具有可学习Gaussian点位置的Point-based Learnable Representation Field以提高重建性能。同时,为了有效地管理头像的边缘,引入了alpha渲染来监督每个像素的alpha值。

在开源数据集和捕获数据集的大量实验结果表明,所述方法能够生成高保真的3D Avatar,并且完全控制表情和姿态。

在3D内容创作和虚拟现实技术等一系列应用的推动下,单目视频的3D Avatar重建出现了显著的增长。随着数字人类的发展,对自动合成逼真Avatar的需求越来越大。

以往的研究主要是利用3D变形模型,重点关注形状和表情的变换。但在单视图设置下,所述方法不能满足真实感要求,并且需要精确的几何网格作为先决条件,而这限制了它们的应用。

......(全文 1158 字,剩余 792 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/126713
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯