Quest 3通过AI支持逼真映射用户动作的全身Avatar
Quest 3将能支持能够逼真映射用户动作的全身Avatar
(映维网Nweon 2023年09月29日)Meta表示,Quest 3可以实现高精度的内向外上半身追踪,而团队将于12月通过软件更新带来基于AI的下半身估计,从而为Avatar带来双腿。通过上述组合,Quest 3将能支持能够逼真映射用户动作的全身Avatar。
目前大多数头显只追踪用户的头和手,而且由于摄像头数量和视场覆盖的限制,系统有时候需要借助IK来估计手臂,所以造成不准确。
但对于Meta全新的消费者头显Quest 3,它将能够利用它的多个前置摄像头,尤其是侧面的摄像头,以及先进的计算机视觉算法来追踪用户的手腕、手肘、肩膀和躯干,从而能够精确地追踪上半身。Meta称之为内向外身体追踪/Inside-Out Body Tracking(IOBT)。
同时,Meta将在12月通过软件更新带来Generative Legs/生成式双腿。团队表示,它通过人工智能模型来估计双腿的位置。由于可以利用精确上半身追踪作为输入,预计Generative Legs可以提供更精确的双腿估计。
但需要注意的是,由于只是估计,Generative Legs目前仅能支持估计行走,跳跃,蹲下等粗略的动作,不能覆盖更为细微的动作。
但通过结合IOBT和Generative Legs,Quest 3将能支持能够逼真映射用户动作的全身Avatar。