Meta VR研究称能准确流畅预测全身运动,尤其是下半身运动

查看引用/信息源请点击:映维网Nweon

根据给定的稀疏上身追踪信号(头和双手)来实现全身追踪,亦即头显追踪的头部运动,以及控制器追踪的双手运动

映维网Nweon 2023年02月24日)目前大多数基于VR一体机的Avatar系统都没有下半身,一个重要的原因是,尽管设备能够通过内向外追踪实现头部和双手的动捕,而这又使得估计手臂和胸部的位置相对容易,但系统难以判断你的腿、脚或臀部位置,所以今天的Avatar一直都是缺失下半截。

延伸阅读无需光学标记,Meta研究基于AI的纯头显全身Avatar动捕方案

所以,行业一直在探索各种解决方案。例如,Meta早前的一份研究就提出了基于AI的纯头显全身Avatar动捕方案,无需任何光学标记。

在另一篇论文中,Meta的研究人员又提出了另一种为Avatar长出双腿的方法AGRoL。据介绍,这是一种全新的条件扩散模型,专门用于根据给定的稀疏上身追踪信号(头和双手)来实现全身追踪,亦即头显追踪的头部运动,以及控制器追踪的双手运动。所述模型使用了一个简单的MLP架构和一种新的运动数据调节方案,从而能够准确流畅预测全身运动,尤其是具有挑战性的下半身运动。

......(全文 2459 字,剩余 2058 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/105458
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯