Meta VR研究称能准确流畅预测全身运动,尤其是下半身运动
根据给定的稀疏上身追踪信号(头和双手)来实现全身追踪,亦即头显追踪的头部运动,以及控制器追踪的双手运动
(映维网Nweon 2023年02月24日)目前大多数基于VR一体机的Avatar系统都没有下半身,一个重要的原因是,尽管设备能够通过内向外追踪实现头部和双手的动捕,而这又使得估计手臂和胸部的位置相对容易,但系统难以判断你的腿、脚或臀部位置,所以今天的Avatar一直都是缺失下半截。
所以,行业一直在探索各种解决方案。例如,Meta早前的一份研究就提出了基于AI的纯头显全身Avatar动捕方案,无需任何光学标记。
在另一篇论文中,Meta的研究人员又提出了另一种为Avatar长出双腿的方法AGRoL。据介绍,这是一种全新的条件扩散模型,专门用于根据给定的稀疏上身追踪信号(头和双手)来实现全身追踪,亦即头显追踪的头部运动,以及控制器追踪的双手运动。所述模型使用了一个简单的MLP架构和一种新的运动数据调节方案,从而能够准确流畅预测全身运动,尤其是具有挑战性的下半身运动。
......(全文 2459 字,剩余 2058 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限