雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

伴随PICO 4 Ultra上市,PICO发布一系列OS系统大更新

查看引用/信息源请点击:映维网Nweon

首次OTA版本更新

映维网Nweon 2024年09月04日PICO 4 Ultra已经发售,而这款全新的头显日前迎来了首次OTA版本更新。

以下是PICO 4 Ultra伴生版本V5.10.1.U,以及首次OTA版本更新V5.11.0.U的亮点功能介绍:

一. PICO 4 Ultra伴生版本:V5.10.1.U

显示

  1. 默认渲染分辨率提升为 1920*1920 ,较 PICO 4 提升 62.96%;

  2. 默认刷新率提升为 90Hz ,提升整个系统的流畅度体验;

  3. 最大亮度较 PICO 4 提升 25% ,为您提供更优的基础视觉体验。

透视

  1. 搭载双目每目 800 万像素高清彩色透视,较 PICO 4 每目清晰度提升 100%,提供裸眼 4.5-4.6 视力表级别的清晰度表现,有较为真实的色彩亮度还原;

  2. 全新的算法让深度更准确,亦能保证边缘低畸变低粘连;

  3. 支持动态调整曝光时长,在运动时低拖影,在静止时更清晰。

交互

  1. 手柄追踪

    • 追踪采用 Centaur 多模态追踪算法,保障在手柄更小的情况下仍有高精度低延迟的追踪体验;

    • 手柄模型增加了手部姿态的显示,更加直观。

  2. 手势追踪

    • 更低的追踪延迟,运动时更加跟手;

    • 提高点击成功率并降低误触,操作更精确;

    • 提升追踪稳定性,手部有遮挡时,抖动与丢失减少;高速移动时追踪稳定、不丢失;

    • 提高暗光下的追踪稳定性和精度,在暗环境下也能正常使用;

    • 优化了系统快捷手势,使用更便捷,误触更少。

  3. 蓝牙游戏手柄:

    • 支持使用蓝牙游戏手柄(传统游戏手柄)玩手游及云游戏。

  4. 输入法

  • 全新输入法布局,支持 8 种类型上千个 Emoji 表情、8 种类型上百种符号,对齐手机输入习惯;

  • 覆盖全球 27 种语言的通用文本输入和 15 种语言的语音输入,多语言使用和切换更方便快捷;

  • 新增数字键盘、网址键盘、邮箱键盘,不同场景下输入更顺畅;

  • 增加输入时的预览屏幕,可进行复制、剪贴、粘贴等编辑操作,提升输入和预览体验;

  • 针对 VR 内容进行了输入联想引擎和语音识别模型的优化,输入结果更准确。

主控室与全景屏工作台

  1. 全景屏工作台

    • 新增桌面级的多窗口能力,超越 PC 的多任务空间,可以同时使用最大 20 款窗口应用;

    • 强大的窗口管理能力和自由度,支持窗口在 5.5 米高的 360° 环形视野内自由摆放、随心组合;

    • 支持自由调节窗口大小,最大可达 280 寸;

    • 支持调节全景屏工作台的远近距离。

  2. 控制中心

    • 新增「虚拟场景」、「用户中心」和「通知」功能入口。

  3. 资源库

    • 全新的 UI 设计,界面更加简洁;

    • 新增「窗口」Tab,可快速启动支持多窗口使用的应用。

  4. 导航栏

  • 新增自定义添加常用应用到导航栏功能,支持自由排列顺序,可固定最多 20 个常用应用;

  • 支持显示正在运行的全部应用,方便快速切换和控制应用窗口;

  • 新增沉浸/透视切换按钮。

虚拟场景

  1. 新增「春」「夏」「秋」高精度场景,在美丽、超现实的虚拟世界中感受四季的变幻与魅力;

  2. 新增生成式 AI 虚拟场景,支持通过设定风格、景物、氛围、地点,AI 生成丰富多样的场景,目前支持写实自然风格和动漫自然风格,生成质量为超高清 8K 分辨率。

安全防护

  1. 新增「主控室安全」模式,主控室无需设置边界即可进入;

  2. 新增「MR 安全」,在使用支持此功能的 MR 应用时,当你靠近现实环境中的物体或墙面时,会将遮挡的内容透出,提醒你已经接近障碍物;

  3. 新增「VR 安全」快速设置模式,设置更简单,同时也保留了自定义安全设置,依然可以精细化的设置安全区。支持原地边界和自定义边界自动切换,优化安全区找回逻辑;

  4. 新增「体感追踪器安全」,在使用体感追踪器的情况下,VR 安全或 MR 安全可支持膝盖节点和脚部节点的安全提醒。在独立追踪模式下,VR 安全或 MR 安全可支持独立追踪器节点位置的安全提醒。

房间标定

  1. 升级为全自动标定,无需用户进行任何主动操作,目光所及之处皆可标定成形,可根据用户实时扫描范围和墙面信息提供最小的最佳体验范围进度;

  2. 新增流水线引导特效和语音引导提示;

  3. 新增可自动检出语义类别:墙、门、窗、开口、沙发、椅子、桌子;

  4. 新增完成标定时创建封闭空间,为开发者提供一个完整且安全的封闭空间进行内容创作;

  5. 新增房间管理界面,用户可自主对已创建的房间进行手动管理,单独删除任意房间或清空所有;

  6. 优化标定流程,用户可自由选择是否需要进入手动标定进行补充。

环境感知

  1. 利用 PICO 4 Ultra 新增 iTOF 深度传感器, 提升系统对于环境感知能力的支持;

  2. 新增空间网格实时扫描能力,建立真实环境表面信息,更好的理解物理环境信息;

  3. 新增共享锚点能力,支持多人同空间的虚拟互动体验;

  4. 为 MR 游戏体验提供更多语义识别能力,新增:地板(Floor)、天花板(Ceilling)、墙(Wall)、门(Door)、窗户(Window)、开口(Opening)、桌子(Table)、沙发(Sofa)、椅子(Chair)、人(Human)。

互联

  1. 支持 Wi-Fi 7,对比 Wi-Fi 6 标准设备(如 PICO 4)吞吐量提升至 3 倍以上(3000Mbps 以上),有 10%-30% 以上的延时收益,无线串流传输延时低至约 5 毫秒,对于干扰导致的卡顿有显著改善;

  2. 支持新版体感追踪器和开发者版体感追踪器,可串流全身动捕游玩 VRChat;

  3. 支持系统桌面一键连接电脑桌面,无需在 PC 端和 XR 端分别打开软件,减少多步繁琐操作;

  4. 支持 AV1 编解码能力,比 HEVC 编码压缩率提升 27%。

PICO 体感追踪器

  1. 仅需佩戴 2 个腿部追踪器,依托于 PICO 多模态 AI 算法能力,可获取高精度、低延迟的全身动捕体验;

  2. 上手简单快捷,打开「体感追踪器」App,根据引导轻松完成配对和校准;

  3. 长时间使用稳定少漂移,25 小时+ 超长续航;

  4. 支持 20+ 全身动捕游戏,跳舞机、社交、运动等应用前往应用商店「全身动捕」专区查看。

空间视频

  1. 新增相机 App

-支持拍摄 MV-HEVC 格式的空间视频;

-最高规格为每目 2048 * 1536 @ 60fps;

-支持 6DoF 空间防抖 + 防果冻;

-支持 Ambisonics 空间音频录制;

-画质侧可逐帧自适应环境光动态调节参数;

-支持手柄手势快捷键等拍摄方式;

-支持设置不熄屏拍摄,开启后摘下头戴设备,相机功能依然可以正常运行,可以手持头戴设备完成拍照、录制等操作。

  1. 新增相册App

  • 支持浏览查阅与删除空间视频、照片等文件;

  • 沉浸状态下空间视频支持时空追溯播放效果;

  • 窗口播放状态下空间视频支持视差立体纵深感;

  • 可播放苹果设备拍摄的 MV-HEVC 编码的空间视频。

PICO视频

  1. 新增 MR 观影模式,用户可在开启 MR 透视模式的情况下,观看平面视频、VR 直播、全景视频;

  2. 支持空间视频的拍摄和观看:

    • 支持拍摄空间视频,用户可以在 PICO 视频里直接拍摄空间视频,支持特效、配乐等后期编辑,支持发布到抖音;

    • 支持观看空间视频,用户可以看到其他人分享的空间视频,进行点赞、评论等互动。

  3. 版权视频增加了漫反射观影效果,提升观影沉浸感;专门制作了模拟真实的品质观影房,满足高品质观影人群的需求;

  4. 观影房的最大人数上限从 12 人提升到 20 人,让你可以与更多朋友一起分享好内容;

  5. 观影房支持三方 Avatar,可以在房间里看到其他玩家的各式各样风格的 Avatar;

  6. 支持裸手交互,用户可以通过手势操作,来使用 PICO 视频;

  7. 支持在 MR 模式下,将观影的平面屏幕固定在场景的某个位置,让用户娱乐与生活可以同步进行。

系统设置

针对各模块对应的功能和使用频率,新设置重新进行了分类、分组和排序优化,用户检索更方便。

使用指南

  1. 通过动画和图文的形式介绍产品的各项功能,帮助用户快速上手;

  2. 新增「体验 PICO 乐趣」入口,可以观看奇幻之旅沉浸视频,体验愤怒的小鸟、桌面战争游戏。

开发者

  1. 开发能力升级:PICO Integration SDK 3.0 更新了 Sense Pack (MR) ,集成了空间音频模块;Avatar SDK 2.0 更新;

  2. 交互能力升级:

    • 新增支持体感追踪器 2.0 追踪能力: 包含物体追踪、独立外设;

    • 手势交互提升: 手模优化(手势模型适配 OpenXR 标准骨骼点),手模自适应,手势高频追踪。

  3. 赋能 MR 开发:Sense Pack 3.0 更新了「空间网格」,「场景标定」,「空间锚点」及「共享空间锚点」等 MR 接口,以及「手势追踪」,「人体追踪」等交互功能;

  4. 开发者示例:为 MR,交互,空间音频,ARFoundation 等功能分别提供了 Unity 示例工程;

  5. 支持 Unity, Unreal, Web, Native 多平台开发,支持 Unity 和 Unreal 官方 OpenXR Plugin,兼容 OpenXR 1.1,支持 WebXR 和 Web App;

  6. Unity 引擎支持:

    • 支持 Unity 2023;

    • 新增支持 Unity 通用 AR Foundation 开发框架;

    • 新增独立维护的对于 Unity URP fork的优化,包含 Bloom, Shadow 的优化,以及 Shader Graph, Adaptive Resolution 等修复。

  7. Unreal 引擎支持:

    • 支持源码版 Unreal 5.3;

    • 支持官方 Unreal 5.3;

    • 支持额外主机端高阶功能(Decal, Deferred Shading)。

  8. PICO 模拟器(Beta):

    • PICO 面向开发者推出的业内 Android 平台首款 XR 设备模拟器。允许在 Mac、Windows 双系统平台运行 PICO OS 并调试 XR 应用;

    • 支持使用键鼠操作、截屏、视频录制、堆栈调试等多个创新功能(本工具处于 Beta 阶段,可能会存在性能及应用兼容性问题,欢迎反馈)。

二. 首次OTC版本更新:V5.11.0.U

主控室

  1. 主控室的渲染分辨率提升为 2400*2400,并开启了固定注视点渲染,清晰度进一步提升;

  2. 新增主控室性能偏好选择功能,【显示效果优先】保证在主控室沉浸模式下采用 90Hz 高刷新率,在透视时采用屏幕帧对齐技术获得更流畅的透视画面体验,【多窗口优先】保证开启多个应用窗口时的使用体验,可以在控制中心或者设置中切换;

  3. 使用引导新增导航栏远近距离、窗口缩放教学。

系统设置

优化家长控制的策略,更严格的应用访问权限管理,为孩子健康使用 XR 保驾护航。

虚拟场景

  1. 新增精选场景「冬」,欣赏冰山的壮丽景色;控制中心新增虚拟场景入口,方便切换;

  2. 优化 AI 场景沉浸预览效果,新增站立台开关、全景图视角旋转拉杆;新增随机词池一键创作功能。

手势交互

手势追踪算法更新,优化在点击的成功率及复杂场景下追踪的稳定性。

相机

提升空间视频拍摄时的防抖效果,降低使用手势控制相机时的误触概率。

相册

  1. 支持分享空间视频到 PICO 视频并发布到抖音;

  2. 支持观看 iPhone 和 Vision Pro 拍摄的空间照片;

  3. 支持观看全景照片;

  4. 可以通过 PICO 手机应用导入任意照片、视频文件(不仅限于空间视频和照片)。

浏览器

  1. 支持窗口尺寸自由拖拽,网页内容自适应布局,横竖大小由你定;

  2. 升级到最新的 Chromium 125 内核,更好的性能和兼容性;

  3. 支持 MR、手势等能力,顺畅体验使用了相关能力的网页

Avatar

官方 Avatar 形象更新,最新技术美术带来更加逼真自然的形象表现力。

互联

优化 Wi-Fi 7 的多通道策略,有更好的无线性能和抗干扰能力。

PICO 体感追踪器

体感追踪器支持与手势识别共用,无需手柄即可获得全身动捕能力。

混合现实录制

  1. 采用新的第三视角相机校准方案,更好的兼容性和操作便捷性;

  2. 支持 MR 游戏的混合现实录制(目前仅 iOS 版本)。

轻世界

支持 PICO 体感追踪器,畅玩全身动捕。

PICO OS 部分新功能 OTA 规划

以下新功能的OTA规划仅为目前拟定方案,并非最终确定版本,可能因未来各种因素发生变化:

本文链接https://news.nweon.com/124222
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯