MPEG-I沉浸式音频揭秘:重新定义下一代VR与AR音效

PICO 4 Ultra

查看引用/信息源请点击:映维网Nweon

重新定义下一代VR与AR音效

映维网Nweon 2025年11月25日MPEG-I 沉浸式音频是由国际标准化组织运动图像专家组制定的一套国际标准,它的核心目标是为虚拟现实和增强现实世界创造极其逼真、动态和交互式的3D声音体验。日前,诺基亚发文介绍了MPEG-I沉浸式音频标准:

MPEG-I沉浸式音频揭秘:重新定义下一代VR与AR音效

随着虚拟现实和增强现实逐渐步入主流应用,一场让沉浸式体验真正逼真化的竞赛正在进行——这不仅限于视觉,更包括听觉。MPEG-I 沉浸式音频应运而生,这一新的全球标准旨在重新定义声音如何塑造我们对数字世界的体验。

所述标准近期已由MPEG音频小组最终确定,而它定义了声音在3D空间中的行为方式,从而为虚拟现实和增强现实实现自然、动态且逼真的音频效果。

从体育、游戏、培训、现场音乐会到虚拟旅行和沉浸式社交体验,MPEG-I为新时代奠定了基础。在这个时代,沉浸式音频将如同环绕四周的视觉影像一样真实且易于获取。

创新解析

新标准支持完整的六自由度移动——这意味着当你转身、行走或环顾四周时,声音会自然地随之调整——同时保持足够轻量,以实现高效的流媒体传输和实时渲染。

它能模拟真实的声学环境,包括早期反射、混响、声学遮蔽、衍射和多普勒效应,使得在VR/AR中的导航体验更加真实。

MPEG-I 沉浸式音频的建模能力将有助于让创作者、开发者和最终用户更易于获得和普及高质量的沉浸式体验。

想象一下,当你穿过虚拟体育场时,听到人群的欢呼声根据你的位置逼真地变化;或者在一个虚拟音乐会中,声音随着你在空间中的移动而做出相应反应。该标准将在VR和AR中实现逼真的音频体验,并确保跨设备和跨服务生态系统的互操作性,从而提高生产效率并降低成本。

在AR和VR中,用户都能完全沉浸在周围的声学环境中,并可以在声场中导航,同时音频声源保持在其各自的位置上。

VR音频重现将你带入完全虚构的声学环境,而在AR重现中,你的物理声音环境会以合理的方式与额外的虚拟声音相辅相成。

支撑所述标准的技术

想象一下进入元宇宙中的一个黑暗洞穴。当你行走时,你的脚步声会产生逼真的回声,在石壁上回荡,并且声音会根据洞穴的大小和形状发生细微变化。

诺基亚在三个主要领域为MPEG-I沉浸式音频贡献了尖端音频技术:后期混响渲染、增强现实支持以及多个HOA采样的渲染。

MPEG-I沉浸式音频中的后期混响是首个为VR和AR应用打造的沉浸式版本,它可以为物理声学环境自动配置自身,并支持互联环境。

AR支持通过聆听空间信息接口实现,使应用程序能够配置物理聆听空间的虚拟表示。

最后,多个HOA信号采样的渲染使最终用户能够体验到完整保真的6DoF环境,这些环境是实时采集的,无需昂贵的预制作成本。

MPEG-I沉浸式音频能够从音频场景录制区域中离散位置采集的HOA信号,自动创建一个连续的音频场景。

MPEG-I沉浸式音频旨在使新的VR/AR及扩展现实应用成为可能,在这些应用中,沉浸式音频重现能够自动根据正在被采集或建模的空间进行自我配置。

标准化的下一步

标准化的沉浸式音频技术正在解锁新的可能性和目标市场。目前我们已经迈出了重要的第一步,使参考渲染软件能够在消费级移动设备上运行,允许用户能够在他们的安卓设备体验新颖的AR和VR体验。

目前团队正在开展进一步的工作,以实现用移动设备为MPEG-I沉浸式音频采集空间音频,最终允许消费者能够采集完整的六自由度场景。

标准化的下一步是根据关键用例的应用开发者反馈,进一步开发渲染技术。

推动早期标准采用者和内容创作者的应用,对于获取洞察、理解音频行业如何推进个人消费者、企业及跨行业的沉浸式音频未来至关重要。

本文链接https://news.nweon.com/136279
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  AR/VR开发者  |  映维粉丝读者
XR 招聘Job
XR Wechat Group/微信群

您可能还喜欢...

资讯