告别昂贵设备与人工标注:Meta以数据驱动方式重塑VR面部追踪

PICO 4 Ultra

查看引用/信息源请点击:映维网Nweon

基于红外摄像头的实时面部表情追踪系统

映维网Nweon 2026年02月26日Meta Reality Labs团队介绍了一种名为REFA的实时面部表情方案,它能够利用嵌入VR头显中的红外摄像头所捕获的第一人称视角图像,实时追踪面部表情,以便用户能够以非侵入式方式精准驱动虚拟化身的面部表情,且无需冗长的校准步骤。

作为数据集构建工作的一环,研究人员采用轻量化采集方案,仅需搭配定制摄像头的VR头显与智能手机,采集了涵盖1.8万名多样化受试者的面部数据。为处理数据,他们开发了鲁棒的可微分渲染管道,可自动提取面部表情标签。

告别昂贵设备与人工标注:Meta以数据驱动方式重塑VR面部追踪

传统的VR面部追踪面临三大挑战:头显遮挡面部导致难以捕获完整表情、额外增加摄像头带来的成本和复杂性、以及移动平台的计算限制。这使得虚拟化身常常呈现出僵硬的表情。

......(全文 1068 字,剩余 768 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/138371
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  AR/VR开发者  |  映维粉丝读者
XR Research Wechat Group/微信群

您可能还喜欢...

资讯