手势交互Crunchfish XR Skeleton 1.1发布,提高精度,降低负载
精度提高了一倍
(映维网 2021年02月23日)Crunchfish日前发布了手势控制产品XR Skeleton的新迭代。对于XR Skeleton 1.1,团队将精度提高了一倍,而处理负载则降低了30%。利用普通的移动摄像头,XR Skeleton可以检测并追踪手部在三维空间中的21个点。
通过识别手部的所有运动部分和轮廓,并将相关点接到一个骨骼结构,在增强现实中实现精确操作将成为可能。尽管只是利用标准的二维移动摄像头,Crunchfish的最新软件依然能够提供完整的三维体验。
XR Skeleton的背后是基于人工智能和高级神经网络。即便采用的摄像头只能读取手部的“平面”(二维),系统都能够智能地计算手部在所有三维空间中的移动方式。原本这需要多个大型神经网络,并对处理器和电池提出严苛的要求,但对于XR Skeleton 1.1,团队成功将性能提高了30%。另外,XR Skeleton 1.1的精度(21个点与实际关节的距离)同样提高了一倍。
Crunchfish手势交互研发主管丹尼尔·迈尔森(Daniel Milesson)表示:“自上次产品发布以来,我们在根据2D图像重建3D信息方面取得了进一步的成绩。这在很大程度上是通过一个先进的过程,以及结合了为实时应用优化神经网络的深厚专业知识。对于最新版本的XR Skeleton,我们展示了团队可以通过少量资源创建高效解决方案的能力。”