2020年06月27日美国专利局新申请AR/VR专利报告
文章相关引用及参考：映维网
一共更新了27篇专利。
（映维网 2020年06月27日）近期美国专利及商标局公布了一批全新的AR/VR专利，以下是映维网的整理（详情请点击专利标题），一共27篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索，也可加入映维网AR/VR专利交流微信群。
1. 《Apple Patent | Controlling External Devices Using Reality Interfaces（苹果专利：通过现实界面控制外部设备）》
在一些实施例中，真实环境为用户与物理环境交互提供直观的界面。例如，利用显示用户物理环境表示的现实界面，用户可以控制物理环境中的一个或多个外部设备。具体地说，利用现实界面，用户能够获得关于一个或多个外部设备的信息（如操作状态），或者控制一个或多个外部设备的功能。
2. 《Apple Patent | Modular System For Head-Mounted Device（苹果专利：用于头戴式设备的模块化系统）》
头戴式设备可以形成模块化系统并提供各种不同的组件和功能，从而实现用户所期望的结果。模块化配置允许用户使用一个或多个镜臂模块轻松定制头戴式设备。镜臂模块可以方便地相互交换，在不同的时间提供不同的组件和功能。因此，头戴式装置的框架模块不需要包括永久性组件。相反，通过使用一个或多个镜臂模块，头戴式设备可以具有扩展和可定制的功能。
专利描述了一种允许用户将手持便携式电子设备与单独的头戴式设备耦合和分离的系统和方法。便携式电子设备可以物理耦合至头显设备。便携式电子设备和头显设备可以彼此通信和操作。可以允许每个设备将其功能和/或服务扩展到另一个设备，以便增强，增加和/或消除头显设备和便携式电子设备之间的冗余功能。
专利描述了一种剔除3D重建体三维的一部分的方法。所述方法使得各种移动XR应用可以获得最新的，准确的和全面的3D重建数据。所述方法包括针对深度图剔除3D重建体三维的一部分。深度图具有多个像素。在一些实施例中，所述方法包括相对于平截头体剔除3D重建体三维的一部分。平截头体来自图像传感器的视场，根据所述视场传感器可获得用于创建3D重建的图像数据。
5. 《Magic Leap Patent | Deep Learning System For Cuboid Detection（Magic Leap专利：用于立方体检测的深度学习系统）》
专利描述了用于立方体检测和关键点定位的系统和方法。在一个方面，可以使用深立方体检测器来同时执行单眼图像中的立方体检测和关键点定位。深度立方体检测器可以包括经过训练卷积神经网络的卷积层和非卷积层，并用于从输入图像中确定卷积特征图。深度立方体检测器的区域求解网络可以使用卷积特征图来确定立方体周围的边界框。深度立方体检测器的池化层和回归层可以实现迭代特征池化，并确定一个细化的分界框和一个参数化的立方体表示。
专利描述的用户识别系统包括图像识别网络，其用于分析图像数据并根据图像数据生成形状数据。所述系统同时包括通用网络，其用于分析形状数据并根据形状数据生成通用类别数据。所述系统同时包括专门网络，其用于将通用类别数据与特征进行比较并生成窄类别数据。
一种固定距离显示系统包括配置为产生光束的光源。所述系统同时包括光引导光学元件，光学元件配置为通过内全反射传播光束的至少一部分。所述系统进一步包括第一惯性测量单元，所述惯性测量单元配置成测量用于计算用户头部姿态的第一值。所述系统同时包括配置成捕获图像的摄像头。显示系统配置为仅在单个预定光平面的公差范围内显示虚拟图像。
专利描述了用于在光学系统中减轻伪影的技术。与世界对象相关联的光线由光学系统接收。与虚拟图像相关联的光线投射到光学系统的目镜，使得与虚拟图像相关联的光线的一部分向用户侧传播，而与伪影图像相关联的光线则向世界侧传播。调整位于世界侧和目镜之间的光学系统的调光器，以减小与伪影图像相关联的光线的强度和与世界对象相关联的光线的强度。
虚拟现实或增强现实头显包括位于头显内的多个图像捕获组件。来自一个图像捕获组件的图像包括用户的眼睛，而来自另一图像捕获组件的其他图像包括用户的另一只眼睛。所述图像和其他图像提供给控制组件，后者将经过训练的模型应用于图像和其他图像，并生成识别用户头部位置和用户眼睛位置，以及眼睛注视的向量。另外，图像和其他图像包含照明元照亮用户面部部分。当用户佩戴头显时，这可以防止图像和其他图像过分饱和。
10. 《Facebook Patent | Eye Tracking Based On Polarization Volume Grating（Facebook专利：基于偏振体三维光栅的眼动追踪）》
根据一些实施例，用于确定眼睛瞳孔位置的方法包括接收在第一方向上从眼睛反射的第一光，将光谱范围内的第一光的第一部分重定向，并将第一圆偏振作为第二方向上的第二光，使得第二光与第一方向形成钝角。所述方法还包括将第一光的第二部分作为第三光在第一方向上发射。第三光包括光谱范围之外的光和具有与第一圆偏振相反的第二圆偏振的光。所述方法同时包括使用第二光形成眼睛图像和基于所述图像确定眼睛瞳孔的位置。
头显包括显示模块和光学模块。所显示模块包括波导管，所述波导管配置成从光源组件接收光，多个提取特征在所述波导管的一个或多个表面上具有空间分布，其中所述多个提取特征从所述波导管耦出光，空间分布使得耦出光具有第一非均匀亮度分布。显示模块同时具有配置成调制耦出光以形成图像光的显示面板，其中，图像光具有部分根据第一非均匀亮度分布的亮度分布。光学模块包括配置成将图像光引导至眼球的光学元件，并且光学模块添加由第一非均匀亮度分布偏移的第二非均匀亮度分布，使得引导至眼球的图像光具有目标亮度分布。
12. 《Microsoft Patent | Voice Command Execution From Auxiliary Input（微软专利：从辅助输入执行语音命令）》
专利描述的计算系统包括配置成执行一个或多个程序的处理器。处理器配置成从用户接收语音命令、来自第一传感器的第一辅助输入和来自第二传感器的第二辅助输入。处理器配置成对于用户视场中的多个对象中的每一个，确定关于第一辅助输入的第一组概率因子和关于第二辅助输入的第二组概率因子。第一组和第二组中的每个概率因子表示各自的辅助输入指向多个对象中的一个的可能性。处理器配置成基于概率因子确定目标对象，并对目标对象执行命令。
专利描述了智能管理与在通信会话中显示的对象相关联的内容。可以生成与三维对象关联的内容对象。内容对象可以是3D虚拟对象的形式，如指向表格的箭头、注释的文本框等。内容对象同时可以包括收集和显示信息投票代理的功能特性。系统可以生成将对象与内容对象关联的数据结构。数据结构使系统能够在对任一对象应用各种操作时保持对象和内容对象之间的关联。因此，如果远程计算机发送对内容对象的请求，则关联对象将与内容对象一起传递。
14. 《Microsoft Patent | Calibrating A Machine Vision Camera（微软专利：校准机器视觉摄像头）》
一个示例提供可执行的指令，并用于接收由图像传感器获得的图像数据，所述图像数据捕获包括多个校准特征的校准图案。对于多个校准校准特征中的每一个，确定校准特征的对象空间位置，以及确定对象空间位置与camera模型之间的距离。camera模型定义多条光线，每一条光线表示图像传感器上的图像空间位置与对象空间的关系。所述指令同时可执行以基于距离确定代价函数的值，调整camera模型直到代价函数满足目标条件，并且在机器视觉应用中使用camera模型。
15. 《Microsoft Patent | Mode-Changeable Augmented Reality Interface（微软专利：模式可变增强现实界面）》
通过在手掌显示输入区域来促进到计算系统的输入，并允许使用手势轻松更改输入模式。计算机视觉用于检测手掌。增强现实用于在手掌显示输入区域。然后，计算机视觉可用于检测另一只手何时与输入区域交互。输入区域有多个输入模式，每个模式都定义了计算系统如何解释来自输入手的输入。响应于计算机视觉检测到输入模式改变手势，计算系统改变输入区域的输入模式，从而改变计算系统如何解释输入手提供的输入。
专利描述了与可追踪设备上动态控制光源的示例。一个示例描述了一种近眼显示设备，近眼显示设备包括图像传感器、通信子系统、逻辑子系统和存储子系统。存储子系统存储可由逻辑子系统执行的指令，并通过从图像传感器接收图像数据来控制包括多个光源的外设，在图像数据中识别由外设的光源子集形成的光源星座，并根据识别出的光源星座，经由通信子系统向外设发送与识别光源星座相关的星座信息。
17. 《Google Patent | Placement Of Objects In An Augmented Reality Environment（谷歌专利：在增强现实环境中放置对象）》
专利描述的系统和方法可以包括接收定义增强现实环境的数据，识别增强现实环境中多个场景元素之间的关系，以及根据多个场景元素之间的一个或多个关系，获得用于在增强现实环境中排列多个场景元素的UI布局模式集。所述系统和方法可针对所述至少一个场景元素识别对应于所述至少一个UI布局模式的至少一个关系，使用不同于所识别的至少一个关系的关系为所述至少一个场景元素生成经修改的UI布局模式，并触发修改后的UI布局模式。
18. 《Sony Patent | Point Cloud Coding Structure（索尼专利：点云编码结构）》
点云编码结构定义了一个“关键”点云帧，用于预测点云面片的所有引用都限制在当前点云帧内。描述一种点云面片缓冲区，其中存储了点云帧中的参考面片列表及其各自的边界框，以用于预测另一帧中的面片。如果允许点云帧的编码顺序不同于表示顺序，并且使用双向预测，则参考面片列表可以包含过去的面片和将来的面片。类似的参考缓冲区列表概念可以应用于点云的图层。
19. 《Sony Patent | Imagining Apparatus（索尼专利：成像装置）》
成像装置包括大成像部分、多个小成像部分和图像处理部分。多个小成像部分的光学尺寸小于大成像部分。大成像部分捕获成像设备外部的对象的图像。多个小成像部分设置在大成像部分周围的位置。图像处理部分基于由大成像部分捕获的图像和由多个小成像部分捕获的图像生成要输出的数据。
20. 《Sony Patent | Image Processing Device And System（索尼专利：图像处理设备和系统）》
专利描述的一种用于提供具有多个视点的视频内容的视频提供设备，所述设备包括用于存储视频内容中多个视点的每个视点的多个版本视频的视频存储单元；用于确定视频内容中请求的视点的视点确定单元；用于从与所请求视点相对应的多个版本中选择视频的视频选择单元；用于将所选择的视频发送到视频接收设备的视频发送单元；以及用于切换到对于所确定视点而言最高分辨率视频的视频切换单元。
21. 《Sony Patent | Information Processing Apparatus And Image Display Method（索尼专利：信息处理装置和图像显示方法）》
视线方向检测部分检测头显用户的视线方向。主图像生成部分生成用户选择要在头显显示的项目主内容的第一图像。显示控制部分使得头显显示与主要内容不同的内容的第二图像，以促进对给定事物或服务的识别。显示控制部分控制根据用户视线的方向将第二图像显示在头显之上的方式。
专利描述了一种根据扫视检测渲染计算机图形的方法。所述方法的一个实施例包括渲染用于向用户显示的计算机模拟场景，检测用户的扫视运动，以及在扫视期间减少用于渲染图像的帧的计算资源。
专利描述的一种信息处理装置包括显示控制单元，其配置成在真实空间中显示具有与真实空间的颜色信息相对应的视觉显著性且具有与真实空间中的真实对象基本相同的形状的第一虚拟对象。
24. 《Sony Patent | Information Processor, Control Method, And Program（索尼专利：信息处理器，控制方法及程序）》
信息处理器获取关于目标对象在真实空间中的位置和外观的信息，将多个虚拟元素放置在虚拟空间中，并生成虚拟空间将目标对象表示为虚拟元素群集的信息。信息处理器检测表示虚拟元素的至少一部分移动的时间变化信息，并且根据时间变化信息估计虚拟元素在持续时间之后的位置。
25. 《Sony Patent | Information Processing Apparatus（索尼专利：信息处理装置）》
专利描述的信息处理装置通过获取通过在不同时间观察现实空间而获得的多个图像来构造虚拟空间，以及在根据在每个图像捕获对象确定的位置排列多个单位体三维元素。
在一些实施例中，三维显示系统包括显示屏，两个微透镜阵列，一个用于追踪用户一只或多只眼睛并提供眼睛位置信息的眼动追踪器。显示系统同时包括渲染处理器，用于渲染或捕获颜色+深度图像（如RGB-D图像）或光场图像。显示系统同时包括光场处理器，光场处理器可利用眼睛位置信息来转换渲染的颜色+深度图像或光场图像。
27. 《Intel Patent | Metasurface Devices For Display And Photonics Devices（英特尔专利：用于显示和光子学设备的超表面组件）》》
专利描述了利用超表面的显示器和光子组件，以及一种包括光学部件和光传输介质的光学装置。波导耦合光学部件和光学传输介质。超表面布置在波导的端部并且布置为增加波导与光传输介质之间的光耦合。另外，显示器包括多个发光元件和用于每个发光元件的超表面。
