苹果Vision Pro辅助功能升级:开放摄像头API+意念操控
苹果表示将向辅助功能开发者提供一个访问头显主摄像头的API
(映维网Nweon 2025年05月14日)苹果日前预告了一项全新的Apple Vision Pro辅助功能。其中,头显的主摄像头可以放大视图中的任何元素,并可以启用实时机器学习环境描述。例如在厨房烹饪菜肴时,设备可以放大食谱中的图文元素。
另外,苹果表示将向辅助功能开发者提供一个访问头显主摄像头的API。
这项全新的放大功能既适用于虚拟对象,又能支持现实世界物体。苹果表示,对于存在视障问题的用户,visionOS可以通过Apple Vision Pro先进的摄像系统扩展视觉辅助功能。随着Zoom功能的强大升级,用户可以使用主摄像头放大视场中的一切,包括周围环境。
对于VoiceOver用户,visionOS中的实时识别使用设备的机器学习来描述周围环境,查找对象,阅读文档等。对于辅助功能开发者来说,一个全新的API将允许获批的应用程序访问主摄像头,从而提供实时的、人对人的视觉解释帮助。
值得一提的是,苹果宣布将在visionOS、iOS和iPadOS添加一个新协议,通过“切换控制”Switch 辅助功能来支持脑机接口BCI。根据《华尔街日报》,这个协议是苹果与Synchron合作开发,而后者将率先支持所述协议,并届时用户将能通过意念控制Apple Vision Pro等苹果设备。