苹果在专利提出用于Avatar生成的增强配准技术
用于Avatar生成的增强配准技术
Vision Pro QQ群交流：653565822
（映维网Nweon 2024年10月16日）现有的Avatar生成系统往往不能准确地代表用户，并且通常不能很好地支持功率有限的移动设备。针对这个问题，苹果在一份专利申请中提出了用于Avatar生成的增强配准技术。具体来说，发明用于确定基于单个图像的主体和关节位置的重建网格。
在一个实施例中，将输入图像应用于特征网络，例如图像编码器，以获得主体的表面特征。通过对图像的给定特征点进行采样，可以得到一个特征向量。然后，给定特征向量和给定深度值，分类网络可以预测给定点是在主体的体积内还是在主体的体积外。通过对所有3D点这样做，可以恢复体积的表面。
所述过程同时涉及根据所述3D形状的正面深度和背面深度确定所述主体的一组关节。在一个实施例中，可以从所述3D形状确定所述前后深度。例如对于给定的像素，可以识别指示前表面和后表面的深度。前深度可从设备捕获的深度传感器数据或从与图像相关的深度数据获得。
在一个实施例中，可以使用考虑来自图像和/或前方深度数据的特征来预测后深度数据的网络来确定后深度。利用图像、前深度数据和后深度数据，关节网络可以为主体预测一组关节的位置。
......（全文 3656 字，剩余 3212 字）
