苹果专利提出AR、VR的应用场景自由切换

查看引用/信息源请点击:映维网

从纯数字环境现实转换到半数字现实环境,再到纯物理环境

Vision Pro QQ群交流653565822

映维网 2021年11月17日)同时支持AR+VR的设备正在成为一种趋势,而早前有消息称苹果同样在研发一种同时支持所述两种功能的头戴式设备。 在名为“Transitioning between imagery and sounds of a virtual environment and a real environment”的专利申请中,苹果就描述了一种从纯数字环境现实转换到半数字现实环境,再到纯物理环境或反之亦然的技术和系统。

根据一个实施例,专利描述的方法包括:提供第一类型的第一环境的视图;提供与第一环境相关联的第一环境音频;检测现实转换事件;响应于检测现实转换事件:提供第一环境的组合视图和第二类型的第二环境,组合视图包括第一可见性值的第一环境的图像和第二可见性值的第二环境的图像;以及提供所述第一环境音频和与所述第二环境相关联的第二环境音频的组合,其中所述第一环境音频或所述第二环境音频中的至少一个包括多个音频对象,所述多个音频对象的音量水平与所述第一可见性值或所述第二可见性值中的至少一个相关联。

在一个实施例中,第一类型的第一环境是虚拟环境,第二类型的第二环境是真实环境表示。在一个实施例中,第一类型的第一环境是真实环境的表示,第二类型的第二环境是虚拟环境。 在一个实施例中,组合视图包括将第一环境的图像与第二环境的图像合成。在一个实施例中,视图合成使用与第一环境和第二环境相关联的alpha通道。在一个实施例中,组合视图包括将第一环境的用户透视图与第二环境的用户透视图对齐。

在一个实施例中,第一环境音频包括多个音频对象,其中组合混音包括根据多个音频对象的各自音量水平将多个音频对象与第二环境音频交叉淡入。在一个实施例中,多个音频对象中的一个或多个第一音频对象的音量水平进一步与第一音频环境中的一个或多个第一音频对象的突出度相关联。

在一个实施例中,所述方法同时包括,检测第二现实转换事件;响应于检测到第二转换事件:停止提供第一环境与第二环境的组合视图,以及第一环境音频与第二环境音频的组合混音;提供第二环境的视图,以及提供第二环境音频。

在一个实施例中,所述方法包括,检测第二转换事件;响应于检测到第二转换事件:修改第一和第二可见性值;以及修改第一环境音频与第二环境音频的组合混音。

在一个实施例中,所述方法包括检测第二转换事件;响应于检测到第二转换事件:停止提供第一环境与第二环境的组合视图,以及第一环境音频与第二环境音频的组合混音;提供第一环境的视图;以及提供第一环境音频。

在下面的系列专利示意图中,系统可以根据需要在VR环境,AR环境或纯物理环境中过渡转换,并且相应地调整真实声源或虚拟声源,以匹配目标转换情景。

专利图2是一个包含物理对象的真实环境图例,其中所述真实环境是一个包含墙壁202-c,电脑桌202-a和电脑202-b的房间200。

专利图3则是位于房间200的VR头显用户所看到的完整虚拟视图。根据需要,系统可以逐渐过渡至成AR环境或纯物理环境,依次显示下面的顺序视图,并且相应地调整声音,以实现最为匹配的声画体验。

值得一提的是,这样的系统同时可以作为苹果头显的防护系统。

例如,在一个简单的例子中,当运行VR环境时,随着用户越来越接近物理对象,视图可以逐渐过渡至半数字环境或纯物理环境。这时,物理对象的的不透明度将越来越高,亦即越发醒目。当用户达到即将与物理对象发生碰撞的危险位置时,不再呈现虚拟视图,而是呈现基于摄像头的完整真实世界影像。

根据一个实施例,头显系统通过一个或多个显示器呈现虚拟环境;头显系统检测头显设备与物理对象的接近度。

在一个实施例中,响应于检测到头显设备到物理对象的接近度小于第一阈值距离,将所述物理对象的图像从真实环境图像中分割出来。然后,在与物理对象位置相对应的虚拟视图位置插入物理对象的分割图像。同时,以与物理对象与头显设备的接近度相关联的第一可见性值呈现包含物理对象分割图像的虚拟环境。

在一个实施例中,响应于检测到头显设备到物理对象的接近度小于第二阈值距离,修改物理对象的图像的第一可见性值,并以第二可见性值呈现包含物理对象分割图像的虚拟环境。

在一个实施例中,响应于检测到头显设备到物理对象的接近度小于第三阈值距离,停止呈现虚拟环境,并提供真实环境的完整视图。 在另一个实施例中,响应于检测到头显设备与物理对象的接近度大于第一阈值距离,不呈现包含物理对象的插入图像的虚拟环境。

相关专利Apple Patent | Transitioning between imagery and sounds of a virtual environment and a real environment

名为“Transitioning between imagery and sounds of a virtual environment and a real environment”的苹果专利最初在2019年9月提交,并在日前由美国专利商标局公布。

本文链接https://news.nweon.com/91637
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

更多阅读推荐......

资讯