Quest 3S MR全面提升，Meta发布全新开发工具和功能特性

查看引用/信息源请点击：映维网Nweon

新工具和功能是如何实现你的愿景，并帮助你更快地构建体验

（映维网Nweon 2024年09月26日）在Meta Connect大会，Meta介绍了解影响未来的数种技术，其中之一是混合现实。新的功能和进步将能帮助所有技能水平和专业领域的开发者构建更加动态的体验。

下面是将介绍大会期间展示的新工具和功能是如何实现你的愿景，并帮助你更快地构建体验：

利用混合现实的最新进步

自去年的Connect以来，Meta进行了多次重大更新，以帮助你在不牺牲性能的情况下开发更加动态，逼真和愉快的混合现实体验。

下面是简短的回顾：

• 透视改进：在过去的一年里，团队改进了Passthrough以提供更好的分辨率，舒适度，颜色调整，以及虚拟手和透视手之间的对齐。现在，用户将能够看到他们的物理环境，减少图像和手的扭曲，并实现更流畅的交互，更平衡的颜色表示，以及更好的整体质量。

• Depth API计算改进：最新的Depth API为开发者提供了两全其美的效果，包括更好视觉质量的遮挡，以及更低的计算成本和延迟。随着视觉质量的提高，延迟的减少（77毫秒到63毫秒），GPU使用减少12%，Depth API可以帮助你的混合现实体验无缝地融入物理世界。

• 简化大规模多房间体验的开发：团队最近添加了使用MRUK在多个房间之间生成导航网格的功能。在构建支持大规模和多房间环境的应用程序时，MRUK可以帮助促进导航和模拟。现在，你可以使用MRUK轻松实现虚拟元素，如角色、宠物和跨一个或多个房间移动的对象。具体来说，MRUK允许你在一个函数调用中加载多个房间，并将它们合并到单个游戏区域。

用新功能丰富你的应用

团队分享了不断扩展的混合现实功能套件功能：

• Audio-to-Expressions：这个功能使用应用的音频流来提供完整的面部动画，无需面部追踪。你可以用这项技术来制作完整的面部表情，只需他们的声音即可。现在，当用户说话、发笑甚至咳嗽时，他们的表情将变得更有意义，更能表达他们的情感。

• Acoustic Ray Tracing （ART）:：ART是专门为满足在任何虚拟环境中带来准确、沉浸式声学的挑战而设计。这个功能模拟声波如何在空间中传播，以帮助你产生更全面，准确和自然的空间音频环境。通过简单的执行和灵活的调整控制，ART可以帮助你实现听起来恰到好处的效果。

• 微手势：通过识别基于手指的手势，微手势扩展了混合现实中手部交互的可能性和便利性，包括拇指滑动和沿着食指侧面轻敲以触发离散动作。相关手势可以在2D菜单导航、UI快捷方式和移动等场景中发挥作用，以提高舒适度和易用性。

• Passthrough Camera Access API：透视摄像头访问将于明年初纳入至Meta Horizon OS。访问摄像头馈送可以解锁混合现实中的各种新体验，包括对象追踪和场景理解等。

使用新功能来更快地构建混合现实体验

在开发者主题演讲中，Meta宣布Meta Quest设备已经支持Unity 6，并有一个新的build-target和缓存改进，可以减少高达90%的build时间。在Unity 6.1中，Unity将为Meta Quest添加专门的build配置文件，以便开发者更容易和更快速地配置项目。这个过程将从36个步骤减少到只有7个，当你从平台浏览器中选择这个新平台时，Unity 6为平台构建设置提供了合理的默认值，以及推荐和需要的包。

即便你是开发沉浸式应用的新手，构建混合现实体验都不一定需要丰富的经验。Meta已经提供了数个新的工具和资源，以加快你的开发过程，包括MRUK。

Meta为MRUK引入了全新的功能，提升了工具简化混合现实开发的能力。

• Destructible Mesh：这个功能允许你将房间网格转换为具有无限可能性的可破坏对象。

• Instant Placement：这个即时放置功能允许你将面板或其他对象直接放置在网格之上。

总之，以上特性可以帮助你更有效地针对用户的物理环境进行开发，并且在用户与物理环境交互方面更具创造性。

另外，Meta同时在研讨会和会议展示了Immersive Debugger。这个方便的配套工具为调试提供了一个解决方案，无需摘下头显，从而帮助减少组织中不同角色之间的迭代时间。

使用Interaction SDK来快速增强你的混合现实体验

当然，混合现实涉及到用户和虚拟元素之间的交互。为了帮助你创建高质量的UI，提供直观的视觉反馈，强大的输入模式支持和一致的交互行为，Meta宣布将于10月在Unity和Figma推出Interaction SDK UI set。

所述UI set提供了支持控制器和手交互的基本组件和模式，并与Meta Quest设计系统保持一致。加上主题功能，你可以非常容易地自定义UI set。

以前，在Interaction SDK中制作可戳画布或可抓取对象是一个耗时过程，涉及连接单个组件或将它们插入预制件。为了帮助你加快交互实现，Meta最近推出了Interaction SDK Quick Actions。这个功能允许你可以通过右键单击上下文菜单来轻松地为Unity场景添加交互。

Meta同时宣布，Unreal对Interaction SDK的支持将在v69版本中发布。这个集成与Meta XR Unreal插件一起工作，提供以前仅适用于Unity的高质量交互，例如光线投射，以及单手和双手对象转换。

在v69中，Meta同时引入了对Meta Haptics Studio的跨平台支持。

使用Building Blocks快速设置多人混合现实体验

关于交互，用户之间的交互同样重要。利用Multiplayer Building Blocks，你可以将Meta XR core SDK中包含的多个核心多人游戏功能快速拖放到Unity项目中，包括自动配对，玩家语音聊天等。

利用性能增强来构建高质量的混合现实体验

性能对于提供流畅的用户体验和支持虚拟对象和物理对象之间的流畅交互至关重要。自去年的Connect以来，Meta已经发布了一系列的功能来提升CPU和GPU的性能，并帮助你提高混合现实体验的质量。

• AppSW：AppSW具有合成帧的能力，是一个有效工具，但从历史上看，由于留下明显的伪影，特别是快速移动的对象，这种功能产生了权衡。现在，Meta已经成功地减少了相关伪影，使得AppSW可以提供更舒适的体验，并帮助开发者减少了对这种权衡的担忧。

• 在Quest 3和3S提升GPU频率：对于启用了动态分辨率的应用，你能够进一步将你的GPU频率提升高达10%。你所需要做的就是启用动态解析并从中获益。GPU频率的提升与可用的热余量相关。

• 通过Graphics Jobs提升Unity的CPU性能：Graphics Jobs将大部分渲染工作移出主线程并尝试将渲染线程多线程化，从而能够显著提高FPS。Meta实现了一个定制的解决方案，使主线程能够被卸载，同时避免渲染线程多线程的辅助命令缓冲区的GPU成本。你可以在下个月发行的《蝙蝠侠：阿卡姆之影》中看到这一功能，多亏了Graphics Jobs，这款游戏的FPS提升了21%。

使用LIV SDK有效地捕获和营销你的应用程序

得益于与LIV的多年合作，Meta宣布LIV SDK现在可以帮助你在沉浸式VR应用程序和MR应用程序中使用带有外部摄像头的PC捕获逼真的混合现实内容。

现在，你可以方便地制作预告片，社交媒体内容或利用包含混合现实功能的高质量素材。使用旨在帮助你在应用程序中突出混合现实的工具，你可以有效地向广大受众展示体验的独特方面。