Crunchfish发布XR Skeleton手势交互解决方案
只需一个标准的手机摄像头,系统即可检测和追踪每只手的21个关键点
(映维网 2020年09月12日)移动交互解决方案开发商Crunchfish日前发布了名为XR Skeleton的手势控制技术。只需一个标准的手机摄像头,系统即可检测和追踪每只手的21个关键点。
这种对人手的描述通常称为骨架模型,并可以实现非常精确和灵活的交互解决方案,如用于操作虚拟对象或菜单系统。
Crunchfish表示,这项技术旨在实现尽可能接近现实世界的增强现实体验,而它能够支持一系列的手势操作,并且对于AR眼镜而言更是完美的选择。
在相关的演示中,系统只需一个标准的RGB 2D摄像头就可以在所有三维空间中提供21个点之间的绝对距离。所述解决方案将能够同时支持多个摄像头传感器,适用于AR眼镜,VR设备,以及移动智能手机。另外,Crunchfish指出XR Skeleton的用例主要是AR/VR,如裸手操纵虚拟对象,但这一解决方案同时提供了远距离控制各种屏幕功能的新方法。
首席执行官乔亚金·奈德马克(Joakim Nydemark)解释道:“通过组合21点注释的人手图像,绿幕,合成手模型,以及经过特别调整的神经网络,我们训练了完整的骨骼手势算法,而它比市场中的任何其他硬件类解决方案都更要稳定和准确。Crunchfish XR Skeleton是我们迄今为止最先进的手势控制产品,它在任何情况下都能为用户提供完美的交互体验。”