英伟达亮相Avatar参考设计NVIDIA ACE和AI数字人增强技术Maxine
全新的英伟达数字人类技术增强了不同行业的用户交互
(映维网Nweon 2024年07月30日)英伟达日前预览了一个可以通过表达情感和幽默等元素来与人类交流的交互式数字人James詹姆斯。据介绍,James詹姆斯采用了NVIDIA ACE,是一种用于创建自定义,超现实主义,交互式Avatar的参考设计。用户很快就可以通过ai.nvidia.com与詹姆斯进行实时对话。
另外,英伟达展示了NVIDIA Maxine AI平台的最新进展,包括Maxine 3D和Audio2Face-2D,目标是实现身临其境的远程呈现体验。
开发者可以使用Maxine和NVIDIA ACE数字人机技术来提高用户与数字界面交互的体验,而诸如HTC VIVE和Looking Glass等企业已经在使用Maxine和ACE来提供身临其境的用户交互体验。
数字品牌大使:James詹姆斯
James詹姆斯是一个基于NVIDIA NIM微服务的虚拟助手,可以提供情景准确的响应。
使用检索增强生成RAG, James詹姆斯可以准确地告诉用户最新的英伟达技术。ACE允许开发者使用自己的数据来创建特定领域的Avatar。
他自然的声音是由ElevenLabs提供,而NVIDIA ACE允许开发者根据不同的用例定制动画、语音和语言。
NVIDIA Maxine:在远程呈现中增强数字人类
Maxine是一个部署尖端人工智能功能的平台,可以提高数字人类的音频和视频质量,并可以通过视频会议设备支持实时、逼真的2D和3D Avatar。
Maxine 3D将2D视频肖像输入转换为3D Avatar,允许在视频会议和其他双向通信应用中集成高度逼真的数字人。这项技术很快就会提供抢先试用。
Audio2Face-2D目前属于抢先体验阶段,这项技术可以根据音频输入为静态人像制作动画,从一张图像中创造出动态的、会说话的数字人。你可以通过ai.nvidia.com尝试这项技术。
拥抱英伟达数字人技术的企业
HTC VIVE和Looking Glass等是最新一批在广泛用例中采用NVIDIA ACE和Maxine的公司。
例如,HTC VIVERSE将Audio2Face-3D NVIDIA NIM微服务集成到VIVERSE AI代理中,用于动态面部动画和口型同步,从而实现更自然和身临其境的用户交互。
全息技术公司Looking Glass则在“魔镜”演示中利用了一个简单的摄像头设置,以及Maxine先进的3D AI功能来生成用户面部的实时全息图像。