Meta推出通用面部编码技术:实时逼真Avatar动画实现自然VR对话

查看引用/信息源请点击:映维网Nweon

通过消费者头显的摄像头实时动画化逼真Avatar

映维网Nweon 2025年01月08日)忠实的实时面部动画是VR真实感的重要条件。为了模拟真实的交流,Avatar动画需要高效和准确:能够在数毫秒内捕获极端和微妙的表情,以保持自然对话的节奏。

面部的倾斜和不完整视图,头显按佩戴的可变性以及环境引起的照明变化是挑战。在一项研究中,Meta提出了一种可通过消费者头显的摄像头实时动画化逼真Avatar的方法。

团队提出了一种基于交叉视图重建目标的自监督学习方法,并可以将其泛化到新用户。同时,他们提出了一种轻量级的表情校准机制,它可以以最小的额外成本来提高准确性,并降低运行时效率。

另外,研究人员提出了一种改进的参数化方法以用于精确的ground truth值生成,并提供对环境变化的鲁棒性。由此产生的系统可为新用户实时生成准确的面部动画。

......(全文 1529 字,剩余 1210 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/126925
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯