剑桥大学AR/VR研究员探索用基于手势的3D内容创作替代传统菜单系统
之前要通过菜单选择工具,现在AI可根据用户意图直接帮你选
(映维网Nweon 2023年12月20日)想象一下,只需通过简单的手势就可以按照所愿操纵面前的虚拟对象。针对这一点,英国的研究人员设计了一个名为HotGestures的新系统,它允许用户在虚拟环境通过快速手势来进行创建和设计。在两个实验中,被试表示这种方法既快速又易用。
当前的虚拟现实系统允许用户从菜单中选择工具来创建新的对象和图像。但这需要首先选择菜单,然后成功选择正确的工具。
皮尔·奥拉·克里斯滕松(Per Ola Kristensson)是英国剑桥大学工程系的交互系统工程教授,同时是人类启发人工智能中心的联合主任。他的团队一直有志于创建允许用户通过一个简单的手势来指示想要如何在VR中操作对象,而无需从菜单中选择工具的系统。
克里斯滕松解释说:“我们的系统通过头显的集成手部追踪器持续接收用户手指和双手运动的观察结果。”其中,人工智能会评估手部运动,并预测用户想要哪种工具。
HotGestures的设计初衷是为了帮助用户完成多种状态的手势。例如,用户可以执行拿笔的手势,然后通过手指之间的距离来指示所需的笔触宽度。克里斯滕松表示:“在这种情况下,用户可以通过动态地移动食指和拇指来改变笔画的宽度。”
在他们的研究中,克里斯滕森的团队邀请了16名研究被试。志愿者们首先查看了如何使用HotGestures的视频演示,并有足够的时间练习10种不同的手势,包括静态动作和动态动作。研究人员计算了参与者用手势完成一个动作所需的时间,以及通过菜单选择相同动作所需的时间。在试用HotGestures之后,被试报告了相关的体验。
结果表明,对于大多数操作,使用手势模式比菜单选择模式要快,特别是对于笔、立方体、球体和复制操作。研究人员同时发现,两种模式在错误率方面没有显著差异。
调查结果显示,参与者认为使用手势的方法更快,但使用起来有点费力,而且比从菜单中选择更不准确。研究小组推测,这是由于大多数参与者可能不熟悉使用手势进行3D建模的想法,所以与使用更传统的菜单相比,这可能会导致更多的犹豫和不确定性。
在第二个实验中,同样的参与者允许选择使用HotGestures活菜单。在这种混合情况下,用户大多数时候倾向于依赖HotGestures,但更喜欢从菜单中选择特定命令。总的来说,16名被试中有14人更喜欢混合解决方案,剩下的两名参与者更喜欢只选择HotGestures。
克里斯滕松表示,他期待着这种VR方法能够得到更广泛的应用。他说道:“我们已经免费提供了源代码和数据,因为我们希望这能成为在虚拟现实和增强现实中使用虚拟工具的一种既定的标准方式。”