传苹果曾为Vision Pro开发全身追踪功能,但因效果不佳而砍掉
由于摄像头视场问题,VR头显难以实现全身追踪,所以一般是通过软件进行估算,但效果不佳
(映维网Nweon 2023年10月28日)多年来,在VR中产生准确的腿部运动一直是难以解决的问题。当然,诸如Meta这样的巨头正在积极解决这个问题。例如,Meta即将带来基于AI的下半身估计,从而为Avatar带来双腿。再叠加Quest 3可以实现高精度的内向外上半身追踪,这家公司表示系统届时将能支持能够逼真映射用户动作的全身Avatar。
根据The Information的报道,苹果同样有为Vision Pro开发全身追踪。但由于效果不佳,苹果在“几年前”就将所述功能砍掉。
目前大多数基于VR一体机的Avatar系统都没有下半身,一个重要的原因是,尽管设备能够通过摄像头覆盖和算法补充来精确追踪上半身,但基本没有摄像头覆盖的下半身基本只能通过算法进行估计判断。随着头显形状参数的不断小型化轻薄化,摄像头的视场覆盖问题将会变得越发困难。
对于Meta的全身Avatar,它实际上在很大程度依赖于AI算法,而根据相关的演示和情报,系统只能支持有限的下半身估计,而且精度方面远非完美。
至于苹果Vision Pro,它搭载了朝下的摄像头,所以尽管苹果没说且普遍认为主要用于手部追踪,但社区一直有人认为它将同时用于下半身追踪。根据The Information日前的说法,所述摄像头最初的设计确实同样考虑到了下半身追踪。
但由于上述原因,Vision Pro在很大程度上依然是需要依靠算法来预测评估用户的下半身。然而,The Information指出苹果当时测试的效果并不理想,无法实现精确可信的下半身姿态,所以这家公司在“几年前”就砍掉了这一功能。报道写道:“苹果在几年前就砍掉了Vision Pro了全身追踪功能,因为工程师无法使其足够可靠”。
当然,The Information没有明确苹果是不是暂时搁置,还是完全放弃。考虑到Meta的进步,以及苹果的投入,随着技术的进步,不排除苹果未来依然会提供基于AI算法的全身追踪Avatar。