Meta AR/VR专利使用模拟传感器低成本低功耗实现面部肌肉追踪
压力传感器将能够根据头显与人脸接触来识别面部肌肉的运动,而温度传感器可以检测到肌肉血流量的增加
(映维网Nweon 2024年08月22日)目前的VR/AR头戴式设备包括眼动追踪系统、内视摄像头和超声波扫描仪,它们可用于收集用户面部表情的实时信息,并帮助生成与用户相关的Avatar,从而具有真正的社交临在。然而,最先进的眼动追踪和面部追踪硬件使用的成像系统需要大量的系统功率和计算周期,它们往往是过于复杂的设备,体积庞大,重量大,而且实现高精度相对具有挑战性。
为解决沉浸式现实应用技术领域中出现的上述问题,Meta在名为“Embedded sensors in immersive reality headsets to enable social presence”的专利申请中提出使用一组模拟传感器,以低成本和低功耗的方式实现面部肌肉追踪。
另外,发明利用了头显面部界面和与用户接触的其他表面中的压力/触觉传感器、温度传感器、音频和潜在的其他传感器来实现基于用户肌肉收缩的眼动追踪和面部追踪。
其中,传感器可以识别哪些肌肉正在收缩,而软件可以利用相关输入来重建Avatar的面部肌肉运动,或者理解用户的视线在场景中的方向。
......(全文 2768 字,剩余 2362 字)