微软专利探索基于AR眼镜+智能手机的虚拟化身生成渲染
生成逼真的Avatar
(映维网Nweon 2022年05月28日)微软于2021年发布了Mesh for Teams,正式开启MR全息办公,从而提升远程协作体验。其中,用户可以通过Avatar的方式参加视像会议。在名为“Multiple device sensor input based avatar”的发明中,这家公司介绍了一种根据多传感器设备来渲染生成Avatar的方式。
简单来说,可以用两台设备来分别捕获用户的不同部位,然后整合出完整的Avatar。例如,AR眼镜可以捕获用户身体的双手,而智能手机可以捕获用户的面部表情。
来自与用户相关联,且在物理空间中具有不同视角的多个设备的传感器输入可共同提供关于用户的信息。由于所述信息具有足够的特异性水平,所以可用于生成逼真的Avatar。
另外,由于Avatar是通过将用户面部的三维表示纹理映射到三维身体模拟来生成,所以它可以准确地捕捉细微差别的人类行为,例如用户的面部表情和手势。这种在Avatar视频流中生成,从而能够并入虚拟现实或混合现实体验中,例如多个用户之间的虚拟现实或混合现实电话会议。
......(全文 2594 字,剩余 2233 字)