Meta发布支持检测舌头伸出的面部追踪OpenXR插件
检测舌头伸出
(映维网Nweon 2023年12月20日)在日前的v60 SDK(Unity和Native)中,Meta发布了一个包含检测舌头伸出的新版本面部追踪OpenXR扩展。尽管Meta Avatars SDK尚未纳入这个功能,但在将SDK更新到v60之后,第三方的Avatar解决方案已经可以通过所述OpenXR扩展来支持舌头伸出检测。
例如,X用户コレヂャン就通过全新的VRCFT模块进行了演示。
自开始支持以来,Meta就一直在积极优化眼动追踪和面部追踪。在2022年11月,这家公司发布了包括Aura在内的多个演示应用,目标是向社区展示眼动追踪和面部追踪等方面的性能效果。
尽管相关演示展示了相当出色的面部和眼部动作,但系统一直无法支持舌头,难以实现吐舌头等动作。
但现在随着v60 SDK(Unity和Native)开始提供包含检测舌头伸出的新版本面部追踪OpenXR扩展,Avatar将能够实现吐舌头等动作。
当然,Meta Avatars SDK尚未纳入这个功能,但第三方的Avatar解决方案已经可以通过所述OpenXR扩展来支持舌头伸出检测。例如在用于ALXR的新版本VRCFT中,开发者korejan为Quest Pro纳入了Meta提供的舌头伸出检测功能(ALXR是一个基于OpenXR的跨平台PC串流应用,类似于Virtual Desktop,Steam Link和Quest Link等工具。VRCFT则是一个用于ALXR的面部追踪模块)。
X账号コレヂャン的演示通过Quest Pro和VRChat进行了展示。如下面的视频所示,我们可以看到用于追踪面部区域的系统可以同时支持吐舌头等动作。
新版本的VRCFT托管在GitHub。舌头伸出检测可通过名为VDX的应用程序支持Air Link和Virtual Desktop。你可以将扩展作为ALXR的本地模块安装。如果使用ALVR串流应用,则可以将其作为远程模块安装。