Crunchfish手部交互系统XR Skeleton开始支持全身骨架追踪
通过全新的图像数据训练算法,可以在短时间内纳入新对象的检测和追踪。
(映维网 2021年05月13日)Crunchfish日前发布了一个可以通过标准摄像头传感器进行全身追踪的手势骨架网络。这同时展示了XR Skeleton平台的多功能性:通过全新的图像数据训练算法,可以在短时间内纳入新对象的检测和追踪。
作为说明,Crunchfish XR Skeleton于2020年发布,并重点瞄准手势追踪和裸手交互。只需一个标准的手机摄像头,这个系统即可检测和追踪每只手的21个关键点。产品的主要目标用例包括AR/VR设备和智能手机,但其多功能性同时适用于其他方面,包括汽车和飞机娱乐系统中的裸手交互,以及用以代替电视遥控器等等。
下面是Crunchfish XR手势交互的演示视频:
对于日前发布的骨骼模型,团队已经利用Crunchfish FB Skeleton将单纯的手势追踪扩展到全身追踪,并且同样是通过一个标准的RGB摄像头实现。
据悉,通过向神经网络提供合成数据和人体注释图像的组合,开发人员仅在数个月内就创建了一个能够进行全身追踪的解决方案。FB Skeleton将在今年晚些时候作为商业解决方案对外提供。
Crunchfish手势交互研发总监丹尼尔·米莱森(Daniel Milesson)表示:“创造各种新解决方案的开发速度证明了我们骨架手势控制系统的技术实力和多功能性。”