雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

苹果AR/VR专利提出基于机器学习推断着色技术生成Avatar

查看引用/信息源请点击:映维网Nweon

推断着色

Vision Pro QQ群交流653565822

映维网Nweon 2024年07月18日)由于设备性能的限制,目前的Avartar系统通常无法传达细微的面部表情或情绪状态。所以在名为“Inferred shading”的专利申请中,苹果提出了一种利用基于机器学习的推断着色技术来生成Avatar。

为了生成逼真的Avatar,可以根据特定的环境点亮脸部的纹理。在一个或多个实施例中,可以训练推断着色网络来映射照明值、几何表情模型、头部姿势和camera角度,以产生根据与照明值相关联的环境照明的纹理。

在一个或多个实施例中,可以通过在具有各种照明变化的各种环境的图像训练自动编码器来获得照明值,从中可以确定表示场景中的照明和颜色的环境latent。这个过程包括训练阶段和应用阶段。

第一阶段涉及训练基于环境图像数据的环境自动编码器。捕获或以其他方式生成各种照明环境的一系列图像,以便在环境和场景中如何分布照明之间获得ground truth数据。在一个或多个实施例中,可以使用合成图像。

......(全文 3848 字,剩余 3500 字)

映维网会员请登录SCC板块阅读完整文章
PICO、大朋等公司员工可联系映维网免费获取权限

本文链接https://news.nweon.com/122909
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯