微软AR/VR专利提出利用AI神经网络进行更精确手势识别
利用AI神经网络来帮助识别手势
(映维网Nweon 2023年08月10日)手势交互为AR/VR用户提供了一种低成本、易于学习的输入命令方式。但对于公共场合,用户希望以社会可接受的程度进行操作,比如说更加微妙的手势。然而,对于微妙的手势,在不同场景中可能会造成误触发。
所以在名为“Gesture recognition based on likelihood of interaction”的专利申请中,微软提出可以利用AI神经网络来帮助识别手势。
图1示出了佩戴头戴式显示设备105并站在房间110中的用户100的示意图。用户100可以通过手势与虚拟内容交互,而不需要持有控制器或其他输入设备。
在一个实施例中,可以利用第一神经网络,以确定用户是否基于包括手、身体、头部和眼睛数据输入的数据帧序列执行手势交互。通过这种方式,第一神经网络可以评估用户是更有可能与NUI界面交互还是与现实世界的对象交互。然后,第二神经网络使用基于指示可能性调整的参数在预定窗口期间执行手势交互识别。
微软指出,模型可以利用对接收的数据帧序列的分析来生成手势交互的可能性,然后可将其用作手势交互识别机器的输入,以允许系统更准确地识别具有更宽松约束的更广泛手势。
......(全文 4843 字,剩余 4423 字)