雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

惯性式动作捕捉系统该如何正确应用在虚拟现实中

YiViAn 2016年4月24日)目前动作捕捉系统有惯性式和光学式两大主流技术路线,惯性式虽然后于光学式出现,但以其超低廉成本和简便成熟的处理流程,以及完全实时的数据计算和回传机制,成为了更加炙手可热的技术。接下来笔者就为大家解析一下惯性式动作捕捉系统。

惯性式动作捕捉系统原理?

动作捕捉系统的一般性结构主要分为三个部分:数据采集设备、数据传输设备、数据处理单元,惯性式动作捕捉系统即是将惯性传感器应用到数据采集端,数据处理单元通过惯性导航原理对采集到的数据进行处理,从而完成运动目标的姿态角度测量。

具体实现流程如下:

在运动物体的重要节点佩戴集成加速度计,陀螺仪和磁力计等惯性传感器设备,传感器设备捕捉目标物体的运动数据,包括身体部位的姿态、方位等信息,再将这些数据通过数据传输设备传输到数据处理设备中,经过数据修正、处理后,最终建立起三维模型,并使得三维模型随着运动物体真正、自然地运动起来。经过处理后的动捕数据,可以应用在动画制作,步态分析,生物力学,人机工程等领域。

接下来我们具体看一下加速度计,陀螺仪和磁力计是如何工作的。

加速计是用来检测传感器受到的加速度的大小和方向的,它通过测量组件在某个轴向的受力情况来得到结果,表现形式为轴向的加速度大小和方向(XYZ),但用来测量设备相对于地面的摆放姿势,则精确度不高,该缺陷可以通过陀螺仪得到补偿。陀螺仪的工作原理是通过测量三维坐标系内陀螺转子的垂直轴与设备之间的夹角,并计算角速度,通过夹角和角速度来判别物体在三维空间的运动状态。它的强项在于测量设备自身的旋转运动,但不能确定设备的方位。而又刚好磁力计可以弥补这一缺陷,它的强项在于定位设备的方位,可以测量出当前设备与东南西北四个方向上的夹角。

在动作捕捉系统中,陀螺仪传感器用于处理旋转运动,加速计用来处理直线运动,磁力计用来处理方向。通俗易懂的讲,陀螺仪知道“我们是否转了身”,加速计知道“我们运动多长距离”,而磁力计则知道“我们的运动方向”的,在动作捕捉系统中三种传感器充分利用各自的特长,来跟踪目标物体的运动。

惯性式动作捕捉系统优势在哪里?

首先是技术优势:惯性式动作捕捉系统采集到的信号量少,便于实时完成姿态跟踪任务,解算得到的姿态信息范围大、灵敏度高、动态性能好;对捕捉环境适应性高,不受光照、背景等外界环境干扰,并且克服了光学动捕系统摄像机监测区域受限的缺点;克服了VR设备常有的遮挡问题,可以准确实时地还原如下蹲、拥抱、扭打等动作。此外,惯性式动作捕捉系统还可以实现多目标捕捉。

其次是使用便捷的优势:使用方便,设备小巧轻便,便于佩戴。

还有成本优势:相比于光学动作捕捉成本低廉,使得其不但可以应用于影视、游戏等行业,也有利于推动VR设备更快的走进大众生活。

总的来说,惯性式动作捕捉技术有着对捕捉环境的高适应性,它的技术优势、成本优势和使用便捷的优势,使得它在影视动画、体验式互动游戏、虚拟演播室、真人模拟演练、体育训练、医疗康复等领域都有着优异的表现。


本文章来自北京G-Wearables公司项目经理张莹,G-Wearables公司在研发基于惯性传感器的动作捕捉系统StepVR。文中观点不代表YiViAn观点。


惯性式动作捕捉系统有劣势吗,如何解决呢?

上文中笔者介绍了惯性式动作捕捉系统及其优势,那它有什么劣势吗,又该如何解决这让的劣势呢?接下来笔者就跟大家介绍一下惯性式动作捕捉系统目前存在的问题,并为大家介绍一种解决方案。

一般情况下惯性式动作捕捉系统采用MEMS三轴陀螺仪、三轴加速度计和三轴磁力计组成的惯性测量单元(IMU, Inertial Measurement Unit)来测量传感器的运动参数。而由IMU所测得的传感器运动参数有严重噪声干扰,MEMS 器件又存在明显的零偏和漂移,惯性式动作捕捉系统无法长时间地对人体姿态进行精确的跟踪。于是,国内一家全沉浸式动作捕捉系统的研发企业G-Wearables自主研发了一套新的动作捕捉算法,即使用IK+室内定位技术做主动作捕捉算法,使用惯性式动作捕捉做辅助算法,即充分发挥了惯性式动作捕捉系统适应性强,抗干扰抗遮挡,成本较低等优势,又避免了其无法长时间对人体姿态进行精确跟踪的劣势,实现了一套无需校准,实时、1:1精准的动作捕捉,刷新率达90赫兹,具有低延迟、高还原度的体验效果。

什么是IK算法?

首先笔者先为大家介绍一下IK算法及其在动作捕捉系统中的应用。

IK是Inverse Kinematics的缩写,即反向运动学。在人体分层结构中,关节和骨骼实际构成了运动链,比如肩关节、肘关节、腕关节及其子骨骼就是一条运动链,是整个人体运动链上的一条分支,身体即是利用运动链对运动进行控制。运动分为正向运动和反向运动。已知链上各个关节旋转角,求各关节的位置信息和末端效应器(end effector)的位置信息,这是正向运动学的问题;而己知末端效应器的位置信息,反求其祖先关节的旋转角和位置,这是就是反向运动学。

反向运动学根据决定运动的几个主关节最终角度确定整个骨架的运动,通常用于环节物体,由不同运动约束的关节连接成环节构成的分级结构骨架。分级结构骨架由许多采用分级方式组的环节链构成,包括分级结构关节或链,运动约束和效应器,由效应器带动所有部分同时运动。但必须遵循特定的等级关系,以便在变换时阻止各个部件向不同方向散开。如:投球动作,只规定出球的起始位置、终了位置和路径,手臂等即跟随关节的转动可按反向运动学自动算出。反向运动学方法在一定程度上减轻了正向运动学方法的繁琐工作,是生成逼真关节运动的最好方法之一。

IK算法如何应用在动作捕捉系统中呢?

如上文笔者介绍的,如果己知末端效应器的位置信息,反求其祖先关节的旋转角和位置,这是就是反向运动学。也就是我们通过室内定位技术,获取末端效应器的位置信息,然后利用IK算法推算出祖先关节的旋转角和位置,从而知道运动者的运动信息,再利用运动信息实现实时动作跟踪显示。

该公司所用的室内定位技术是激光定位技术,通过墙上的激光发射器扫描佩戴者佩戴的机身上的位置追踪传感器(即IK算法中的末端效应器),从而获得位置和方向信息。具体来说,该室内定位技术是靠激光和光敏传感器来确定运动物体的位置。若干个激光发射器会被安置在对角,形成一个矩形区域,这个区域可以根据实际空间大小进行调整。每个激光发射器内设计有两个扫描模块,分别在水平和垂直方向轮流对定位空间发射横竖激光扫描定位空间。运动者身上有光敏传感器,通过光敏传感器接收到激光的时间计算出光敏传感器的准确位置。

通过激光室内定位技术获取传感器的精确位置后,即可利用IK算法反向推算出祖先关节的旋转角和位置,从而知道运动者的运动信息。但是由于激光定位过程中可能存在遮挡问题,比如下蹲、拥抱、扭打等动作。于是应用惯性传感器做补充跟踪,即当出现遮挡情况时, IK+室内定位相结合的动作捕捉技术无法完全准确的实现,这个时候利用惯性式动作捕捉技术做补充。反过来可以利用室内定位技术对惯性式动作捕捉技术做实时校准,不需要另行校准,从而解决遮挡问题的同时,也避免了惯性式动作捕捉无法长时间精确工作的弊端。



本文链接https://news.nweon.com/15932
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯