迪士尼研究院最新语音动画研究可实现更逼真的社交VR

文章相关引用及参考：roadtovr

这种基于深度学习的新系统似乎提供了非常高的准确性和细节度

（映维网 2017年08月17日）迪士尼研究院联合几所大学的研究人员撰写的一篇新论文，其描述了一种根据深度学习实现程序语音动画的新方法。该系统可以对人类录音进行采样，并自动生成匹配的口型动画。这种方法的应用范围十分宽广，比如提高动画管道的效率，以及通过实时绘制用户讲话时的虚拟化身口型动画来使社交VR交互更具说服力。

迪斯尼研究院，东安格利亚大学，加利福尼亚理工大学和卡内基梅隆大学的研究人员撰写了题为“A Deep Learning Approach for Generalized Speech Animation”的论文，其描述了一种已经通过“深度学习/神经网络”方法进行训练的系统，通过单个扬声器的参考片段（2543句）来教导系统在各种语音单元（音素）期间应该形成的形状及其组合，时长达8小时。

经过训练的系统可用于分析来自任何扬声器的音频，并自动产生相应的口形，然后将其应用于自动语音动画的面部模型。研究人员表示，该系统独立于扬声器，可以“近似计算其他语言”。

......（全文 896 字，剩余 521 字）

请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限