格拉斯哥大学研发面部表情XR控制系统，实现97％准确率的无手柄交互
查看引用/信息源请点击：techxplore
仅通过面部表情来精确控制计算机
（映维网Nweon 2025年04月08日）为了帮助残障人员拥抱XR技术，苏格兰格拉斯哥大学和瑞士圣加仑大学正在研究如何仅通过面部表情来精确控制计算机。
利用支持面容识别的头显，相关实验可靠地识别出七种简单的面部动作，并将其用于支持用户控制VR游戏和浏览网页。
这种解决方案为残疾人利用XR提供了全新的方式，并为所有人提供了一种免手操作的选择。
在实验中，被试需要将头显能够识别的53种面容姿态，每个表情重复三次，每次保持三秒钟。然后，对每个表情的舒适度、易用性以及自我感觉进行评分。
测试表明，突出面部不同区域的七个特定面容姿态在可靠识别和用户舒适性之间提供了最佳平衡，包括张开嘴巴；眯起左右眼；鼓起左右脸颊；以及将嘴角扯向两边。
格拉斯哥大学计算机科学学院的格雷厄姆·威尔逊（Graham Wilson）表示：“有人认为虚拟现实本质上是一种体力技术，因为它通常需要用户通过控制器执行灵巧的手部动作，或者进行不是每个人都能舒适地完成的全身动作。这意味着，目前依然存在阻碍VR和AR体验广泛普及的障碍。通过这项研究，我们希望探索商用VR头显的功能是否可以适应不同的人群，以帮助用户仅使用面部精确控制软件。研究结果令人鼓舞，而这可能有助于挖掘出使用技术的新方法，不仅适用于残疾人，同时适用于更广泛的人群。”
为了测试所确定的七种面部动作的有效性，研究人员建立了自己的神经网络模型，并以97%的准确率读取头显识别出的表情。
然后，他们要求10名非残疾被试使用头显执行两项不同的任务。首先，被试在VR游戏环境中使用面部表情来转向、选择和射击。然后在AR环境中，他们用面部表情来滚动、选择和浏览网页。在这两种情况下，他们同时会使用传统的手持VR控制器来比较体验。
被试报告称，尽管控制器为游戏提供了更精确的输入，但使用面部表情的效果更好，因为无需过分努力即可提供有益的控制水平。他们同时发现通过面部表情浏览网页十分简单直观，并表现出在未来使用面部输入的高度意愿。
团队表示：“这为我们未来的研究奠定了基础。我们计划在进一步的研究中与运动障碍或肌肉障碍等残疾人合作，为开发者和XR平台提供新的建议，帮助他们扩大可访问性选项，并帮助他们摆脱手部和基于控制器的输入的限制。”
