研究员探索通过腕带设备进行全身姿态追踪

查看引用/信息源请点击:映维网Nweon

用单摄像头追踪全身姿态的可穿戴设备

映维网Nweon 2022年11月21日)未来的腕带设备或许可以通过深度神经网络来实时追踪用户的全身姿态。日前,美国康奈尔大学和上海交通大学的研究人员开发了一款可以以3D方式追踪全身姿态的但摄像头腕带设备BodyTrak。据介绍,这是第一款用单摄像头追踪全身姿态的可穿戴设备。

团队认为,这种技术可以融入至现有的商业智能手表等腕带设备。他们表示:“由于智能手表已经搭载了摄像头,而BodyTrak这样的技术可以理解用户的姿态并给出实时反馈。两者的结合既方便又实惠,同时不会限制用户的移动。”

如上图所示,BodyTrak搭载了一个硬币大小的摄像头,而团队专门定制了一个能够精确填充摄像头未捕获身体部位图像的深度神经网络。

具体来说,尽管摄像头无法完整捕获用户的全身姿态,但定制的深度神经网络可以读取摄像头的基本图像,亦即基本的身体轮廓,然后估计位于手臂、腿、躯干和头部的14个关节的3D位置,并相应地进行填充补全,从而虚拟地实时重建身体姿态。

研究人员对9名被试进行了实验。其中,每名被试在不同的场景中进行12项日常活动,如走路、静坐或锻炼。结果表明,系统仅使用身体指向的一个微型RGB摄像头(11.5mm x 9.5mm)就可以推断出全身姿势(14个关节的3D位置),平均误差为6.9 cm。

......(全文 692 字,剩余 224 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/102749
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯