WWDC26大会:visionOS讲座视频汇总
visionOS讲座视频汇总
(映维网Nweon 2026年06月10日)苹果已经放出了visionOS的相关开发者讲座视频,下面我们汇总了相关视频、链接和内容介绍:

使用 Reality Composer Pro 3 加速空间场景迭代:借助 Reality Composer Pro 3 中强大的新功能,构建出色的空间体验。了解如何为沉浸式场景添加内容、视觉效果、光照和交互,而且全程无需离开编辑器。探索如何在编辑器中使用 AI 辅助功能进行快速迭代。
使用 Foveated Streaming 将沉浸式内容融入 visionOS:了解 Foveated Streaming 如何以高保真质量将远程渲染的场景传输到 Apple Vision Pro。探索这个框架如何通过完全无线的方式,将 visionOS 原生功能与第三方流媒体技术相结合,并通过 OpenXR 场景和 NVIDIA CloudXR 进行演示。了解 Foveated Streaming 框架、与 NVIDIA CloudXR SDK 的集成,以及动态注视点流式传输技术如何在保护隐私的同时带来种种好处。
探索 visionOS 对象追踪的增强功能:了解 visionOS 如何提升对象追踪和空间配件输入能力。探索追踪动态手持对象的新方法,巧妙地连接物理世界和数字世界。了解新增的空间配件支持类别,以及构建专属自定配件需要什么,以便在你的 App 中实现独一无二的交互模式。
图像理解方面的新动向:借助 Vision 框架和 Foundation Models 框架的最新更新,解锁强大的图像理解能力。新的轻点分割请求为你带来图像分割的新方式,而且 Vision 框架现在还支持 watchOS。将 Apple Foundation Models 中全新的图像支持与 OCR、条形码扫描以及你自己的工具相结合,为你的 App 构建由 LLM 支持的视觉理解能力。
探索 USDKit 以及 OpenUSD 的新进展:深入了解 Apple 平台上通用场景描述 (USD) 支持的最新进展,包括基于 Swift 的 USDKit、新的空间预览 API,以及增强的空间网页功能。探索如何利用 OpenUSD 标准的最新更新,添加对辅助功能、高斯泼溅点和压缩几何的支持。我们还将逐步介绍 Mac“预览”中扩展的 USD 编辑和渲染工具,演示如何在你的 App 中充分利用这些功能。
使用 Xcode 扩展 Reality Composer Pro 3 的功能:探索 Reality Composer Pro 3 如何助你构建规模更大、更具雄心的空间项目。了解如何创建项目专属插件,以便编辑自定组件、运行自定系统,并构建自己的 ScriptGraph 节点,从而全面掌控你的空间创作工作流程。
使用 Reality Composer Pro 3 加速你的空间工作流程:探索如何完全在 Reality Composer Pro 内,利用其强大的图形化工具套件来构建丰富的交互功能和惊艳的视觉效果。了解如何使用 Shader Graph 制作动态材质、将骨骼动画与 Animation Graph 相融合,并使用 Compute Graph 模拟粒子效果。你还将深入探索如何通过 Script Graph 实现 App 交互、使用 Sequencer 协调场景事件,并利用 Behavior Trees 来设计智能的 NPC 行为——所有操作都无需离开编辑器。
探索 Spatial Preview 框架:了解新的 Spatial Preview 框架如何将 Mac 上的内容直接带到 visionOS。探索如何通过跨两个平台进行实时同步和双向编辑来构建动态工作流程。了解 SpatialPreview API、设备发现、2D 和 3D 会话集成,以及新的快速查看功能,为你的 Mac App 提升空间体验。
为 Apple 沉浸视频构建实时制作工具:深入了解 Apple 沉浸视频实时制作的幕后过程。探索如何打包沉浸视频、空间音频和场景元数据,以便使用 SMPTE 2110 标准通过 IP 网络传输内容。借助 Apple 推出的 Immersive Media Support、Video Toolbox 和 AVFoundation 框架,实现 Apple 沉浸视频的实时制作流程。为了充分从这个讲座中获益,建议你观看 WWDC25 视频“了解 Apple 沉浸视频技术”。
使用 Reality Composer Pro 3 设计无代码游戏:探索如何在 Reality Composer Pro 3 中使用 ScriptGraph 为你的 App 和游戏开发无代码 3D 内容。了解如何利用可视化节点来构建动画、创建互动时刻,并整合 SwiftUI 元素,为你的体验添加对话气泡和其他 UI。
为 visionOS App 和空间网络设计沉浸式环境:了解如何为你的 App、网站和同播共享体验创建栩栩如生的 visionOS 环境。探索相关设计原则,看看如何为环境带来真正的沉浸感;并了解如何创建或采集参考材料、准备高保真 CG 素材,以及制作实时效果 (例如动态和光效)。
探索 visionOS 中的沉浸式网站环境:借助 JavaScript 中新推出的 Immersive API,将你的网站访客带入 Apple Vision Pro 中的虚拟环境。探索如何从内联模型元素请求沉浸式过渡,利用视频对接等功能打造引人入胜的沉浸式体验,并优化性能以实现按真实比例复刻的丰富体验——只需在你的网站上运行几行代码即可。
探索 RealityKit 的新进展:了解 RealityKit 的最新进展,让 App 和游戏的沉浸感和真实感更胜以往。探索一众强大的新功能,包括交互式布料模拟、NavMesh 寻路、混合现实光照,以及让空间音频更出彩的自定混响网格。借助改进的阴影效果、角色渲染增强功能以及对高斯泼溅技术的支持,提升视觉保真度。
在 visionOS 中协作处理结构化 3D 模型:了解如何在 visionOS 中生动呈现结构化 3D 模型。我们将介绍 USDZ 的准备工作,演示如何在分层装配中操作单个实体,并利用剖切面检查模型的内部组件。创建令人惊叹的分解视图动画,打造基于 Apple Vision Pro 的设计审查和协作体验。
利用 visionOS 27 打造新一代体验:借助 visionOS 27 的新功能,打造新一代 App、游戏和空间体验。探索在 visionOS 上构建体验的多种途径,比如使用原生 Apple 工具和框架、从 Mac 或 PC 流式传输沉浸式内容、利用第三方引擎,或移植现有的 iOS App。了解如何利用 3D 内容创建、沉浸式媒体和对象追踪方面的最新进展,让你的空间计算项目更上一层楼。
更多WWDC26开发者讲座视频请访问这个页面。

