Meta研究两步合成分析方法估计Avatar高分辨率人脸纹理
重建面部
(映维网Nweon 2023年04月18日)近年来,虚拟现实和混合现实取得了巨大的进展,而这导致了行业对创建Avatar和人脸逼真渲染的巨大兴趣。特别是,硬件的普及将为游戏、其他家庭娱乐应用或沉浸式电话会议系统的asset创建开辟巨大潜力。
然而,在照明条件变化的情况下,从任意视点逼真地渲染人脸是一个极其困难的问题。它涉及面部几何形状和皮肤纹理的精确重建,如漫反射率、镜面增益或皮肤粗糙度。传统上,这个问题需要在专家监督下,并通过昂贵且经过仔细校准的捕获装置记录数据来解决。
在名为《High-Res Facial Appearance Capture from Polarized Smartphone Images》的论文中,由慕尼黑工业大学、马克斯·普朗克智能系统研究所、以及Meta的研究人员希望简化这一捕获过程,允许个人用户能够重建自己的面部,同时将与光照阶段相比的质量下降减至最低。
人脸的几何形状和材质的解开是一个极其不适定的问题。目前的解决方案包括一种具有多个摄像头和光源,并具有毫米精度的校准的捕获抓给你之。将面部皮肤表面与皮下响应分离的一种常见方法是,将偏振滤光片与这种昂贵的捕获装置结合使用。给定这样一个精心校准的捕获装置,可以使用可微分渲染来估计分析合成方法中的单个皮肤参数。
......(全文 3372 字,剩余 2922 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限