2021年02月26日美国专利局新申请AR/VR专利摘选
文章相关引用及参考：映维网
一共更新了31篇专利。
（映维网 2021年02月26日）近期美国专利及商标局公布了一批全新的AR/VR专利，以下是映维网的整理（详情请点击专利标题），一共31篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索，你同时可以加入映维网AR/VR专利交流微信群（详见文末）。
1. 《Magic Leap Patent | Methods And Systems For Audio Signal Filtering（用于音频信号滤波的方法和系统）》
专利描述了用于渲染音频信号的系统和方法。在一些实施例中，一种方法可以接收包括第一部分和第二部分的输入信号。将包括第一滤波器的第一处理阶段应用于第一部分，以生成第一滤波信号。将包括第二滤波器的第二处理级应用于第一部分，以生成第二滤波信号。将包括第三滤波器的第三处理级应用于第二部分，以生成第三滤波信号。将包括第四滤波器的第四处理级应用于第二部分，以生成第四滤波信号。根据第一滤波信号和第三滤波信号之和来确定第一输出信号。根据第二滤波信号和第四滤波信号之和来确定第二输出信号。第一输出信号呈现给用户的第一只耳朵，第二输出信号呈现给用户的第二只耳朵。输入信号的第一部分对应于虚拟环境中的第一位置，输入信号的第二部分对应于虚拟环境中的第二位置。
2. 《Magic Leap Patent | Transmodal Input Fusion For A Wearable System（可穿戴系统的跨模态输入融合）》
可穿戴系统可以使用多个输入来确定应执行命令和三维环境中的对象，如手势，头部姿态，眼睛注视点，声音和/或环境因素。所述可穿戴系统可以检测不同的输入何时会聚合在一起，如何时用户会使用诸如眼睛注视，头部姿态，手势等多个输入来选择虚拟对象。在检测到输入聚合后，可穿戴系统可以执行跨模态滤波方案，后者利用聚合后的输入来帮助正确解释用户提供的命令或目标对象。
3. 《Magic Leap Patent | Multi-Stage Block Mesh Simplification（多级块图网格简化）》
专利描述了一种生成环境模型的方法。所述方法允许系统以低延迟地将3D网格实时更新到客户端应用程序，从而支持动态环境变化。所述方法提供适用于各种客户端应用程序所请求的不同简化级别的3D网格。所述方法包括将3D网格分割成网格块图。所述方法同时包括对所选网格块图执行多级简化。多级简化包括预简化操作，平面化操作和后简化操作。
4. 《Magic Leap Patent | Flat Spectral Response Gratings Using High Index Materials（采用高折射率材料的平坦光谱响应光栅）》
示例性头戴式显示设备包括多个光学元件。光学元件配置成在佩戴头戴式显示设备的用户视场中投影图像。第一光学元件配置成从第二光学元件接收光。第一光学元件沿第一光学元件的外围限定光栅。光栅包括从第一光学元件的基部延伸的多个突起。所述突起包括第一材料，所述第一材料具有用于可见光波长的第一光学色散剖面。光栅同时包括位于多个突起中的至少一些突起之间的第二材料。第二材料具有用于可见光波长的第二光学色散剖面。
5. 《Facebook Patent | Flicker detector（闪烁探测器）》
在一个实施例中，计算系统接收指示由一个或多个摄像头捕获的光强度的一个或多个信号。以第一帧速率在多个帧中捕获所述信号。计算系统根据捕获的一个或多个信号来计算多个帧中的每个帧的光强度度量。计算系统根据光强度度量来检测一个或多个峰值。在预定时间段内捕获一个或多个帧。计算系统根据检测到的一个或多个峰值来确定可感知闪烁的可能性。响应于可感知闪烁的可能性超过预定阈值的确定，计算系统生成指示可感知闪烁的可能性通知。
6. 《Facebook Patent | Refractive index modulation modification in a holographic grating（全息光栅中的折射率调制修正）》
专利的技术涉及修改全息光学元件（例如全息光栅）中的折射率调制。根据一个实施例，全息光学元件或切趾光栅包括聚合物层，聚合物层包括具有第一折射率的第一区域和具有第二折射率的第二区域。全息光学元件或切趾光栅包括分散在聚合物层中的多个纳米颗粒。纳米颗粒在第一区域或第二区域具有更高的浓度。在一个实施例中，纳米颗粒可配置为增加折射率调制。在一给实施例中，纳米颗粒可配置成通过减小光栅侧面附近的折射率调制来切趾光栅。折射率可藉由在全息图制造之前或之后将单体储层缓冲层施加于聚合物层来实现调制。
7. 《Facebook Patent | Transparent phase change actuator（透明相变致动器）》
透明光学元件可以包括设置在透明电极之间的电活性陶瓷层，使得每个电极的取向垂直于陶瓷层的非极性方向。光学元件的光学特性（包括透射率、雾度和清晰度）可以通过向电活性陶瓷施加电压和相关的相变来改善。
专利描述的波导显示器包括波导和光栅耦合器，所述光栅耦合器配置成将显示光耦入到波导中或耦出所述波导。所述光栅耦合器至少包括设置在堆叠中的第一光栅层和第二光栅层。第一光栅层具有第一厚度，并且包括第一透射体布拉格光栅（VBG），所述第一透射VBG配置成从第一视场衍射第一波长的显示光。第二光栅层的第二厚度大于第一厚度，并且包括第二透射VBG，所述第二透射VBG配置成从大于第一视场的第二视场衍射第一波长的显示光。
专利描述的波导显示器包括对可见光透明的波导、位于波导上且具有第一折射率调制的第一体积布拉格光栅（VBG）、位于波导上且包括具有不同的各自折射率调制的多个区域的第二反射VBG。第一反射VBG配置成衍射第一波长范围和第一视场（FOV）范围中的显示光，使得第一波长范围和第一FOV范围中的显示光通过全内反射在波导中传播到第二反射VBG的多个区域。第二反射VBG的多个区域配置成在第一波长范围和第一视场范围内对不同的相应波长范围的显示光进行衍射。
10. 《Facebook Patent | Field-of-view stitched waveguide display（视场拼合波导显示器）》
专利描述的波导显示器包括对可见光透明的基板和配置成产生用于图像的显示光的投影仪，其中显示光包括用于图像的第一视场（FOV）的显示光和用于图像的第二视场的显示光。所述波导显示器同时包括第一耦入器，所述第一耦入器配置成将所述第一视场的显示光耦合到所述基板中；第一组光栅配置成在基板的第一二维阵列处将用于第一视场的显示光耦出基板之外；第二耦入器配置成将第二FOV的显示光耦合到基板中；第二组光栅配置成在基板的第二二维阵列处将用于第二FOV的显示光耦出到基板之外。
11. 《Facebook Patent | Multiple projector field-of-view stitched waveguide display（多投影仪视场拼合波导显示器）》
在波导显示器中，第一投影仪配置为产生用于显示图像的第一视场（FOV）的显示光。第一耦入器配置成将用于第一视场的显示光耦合到可见透明基板中。第一组光栅配置成在基板的第一二维阵列处将用于第一FOV的显示光耦出基板。第二投影仪配置成为产生用于第二FOV的显示光。第二耦入器配置成将用于第二视场的显示光耦合到基板中。第二组光栅配置成在基板的第二二维阵列处将用于第二FOV的显示光耦出基板。
专利描述的波导显示器包括对可见光透明的基板、配置成将显示光耦合到基板的耦合器、以及耦合到基板的第一体布拉格光栅（VBG）和第二VBG。耦合器包括衍射耦合器、折射耦合器或反射耦合器。第一VBG配置成在第一VBG的第一区域处将基板中的显示光衍射到第一方向，并且在第一VBG的两个或多个区域处沿着第一方向将显示光从第一区域衍射到朝向第二VBG的第二方向。第二VBG配置成将来自第一VBG的两个或多个区域中的每一个的显示光沿着第二方向从第二VBG的两个或多个区域处耦出基板。
13. 《Facebook Patent | Outward coupling suppression in waveguide display（波导显示中的外耦抑制）》
用于投影仪显示器的光瞳复制波导包括透明材料板，其用于通过全内反射在基板中传播显示光。衍射光栅由平板支撑。衍射光栅在基板中包括多个锥形倾斜条纹，其用于通过衍射将来自平板的显示光输出耦合成闪耀衍射顺序。显示光的较大部分外耦成闪耀衍射阶，显示光的较小部分外耦成非闪耀衍射阶。锥形条纹导致衍射光栅的占空比沿衍射光栅的厚度方向变化，以便于抑制耦合到非闪耀衍射阶的显示光部分。
14. 《Facebook Patent | Atomic force microscopy tips for interconnection（原子力显微镜互联技巧）》
专利描述的电子设备设计能够防止第一体和第二体之间的横向运动。电子设备包括第一体，第一体包括从第一体的第一表面突出的一个或多个原子力显微镜（Atomic force microscopy；AFM）尖端。所述设备同时包括第二体，第二体包括在第二体的第二表面上的一个或多个电触点。第二表面面对第一个表面。一个或多个电触点被第一表面的AFM尖端刺穿以防止第一体和第二体之间的横向运动。
15. 《Microsoft Patent | Bidirectional propagation of sound（声音的双向传播）》
专利描述了与渲染定向声音的技术。一种实现包括接收对应于场景的定向脉冲响应。定向脉冲响应可以对应于场景中的多个声源位置和一个用户位置。所述实现同时可以包括对方向脉冲响应进行编码，以获得用于单个声源位置的编码离向参数。所述实现同时可以包括输出编码离方参数，从而提供来自各个声源位置的声音离向，以便渲染声音。
16. 《Apple Patent | Finger-mounted device with sensors and haptics（包含传感器和触觉反馈的指戴式设备）》
指戴式设备可包括指戴组件。每个指戴组件可以包含一个机体，并用作诸如力传感器，加速度计和其他传感器，以及触觉输出设备等部件的支撑结构。机体可由诸如金属这样的可变形材料形成，或者是采用可调节结构，如使用磁吸引力，弹簧或其他结构实现彼此连接的滑动机体部分。 每个指戴组件的机体可以包含U形横截面轮廓，当机体附接至用户手指的指尖时，所述U形横截面轮廓可暴露每个手指的指垫。控制电路可以利用传感器采集手指按压输入，横向手指移动输入和手指敲击输入，并且可以通过触觉输出设备提供触觉输出。
17. 《Apple Patent | Particle control for head-mountable device（头戴式设备的粒子控制）》
头戴式设备可提供从光学路径移除和捕获粒子的光学模块，以使得它们不再干扰用户对光学元件的观察。所述光学模块可以包括粒子保持元件，所述粒子保持元件安全地保持粒子，使得所述粒子保持在光学路径之外。这种粒子去除和保持可以改进和保持用户的视觉体验质量。
18. 《Apple Patent | Audio-based feedback for head-mountable device（头戴式设备的音频反馈）》
头戴式设备可包括用于定向音频检测的多个麦克风。头戴式设备同时可以包括用于音频输出的扬声器和/或用于视频输出的显示器。头戴式设备可配置为通过基于声源的位置在显示器显示指示器，从而提供基于音频输入的视觉输出。通过根据检测到的声音和目标特性来修改扬声器的音频输出，可以将头戴式设备配置为基于音频输入进行音频输出。另外，可以根据眼动传感器检测用户的注视方向。
在一个实现中，一种方法包括：获取表征对象的位置数据和用户周围的体三维区域的相对空间信息；基于位置数据合成体三维区域的网格映射；基于网格映射选择合成现实（SR）内容，其中SR内容满足空间信息相对于网格映射的一个或多个部分的方差阈值；将SR内容的至少一部分与网格映射合成以生成复合SR内容；以及将复合SR内容呈现给用户，以遮挡体积区域的视觉呈现的至少一部分。在一个实现中，SR内容随着用户位置的改变或用户与SR内容交互而更新。
20. 《Google Patent | Puppeteering remote avatar by facial expressions（通过面部表情操纵远程化身）》
一种方法包括接收第一面部框架和面部的第一捕获图像。第一面部框架对应于第一帧处的面部，并且包括面部信息的第一面部网格。所述方法同时包括将第一捕获图像投影到第一面部框架，并基于投影的第一捕获图像确定与面部相对应的面部纹理。所述方法同时包括，在含有面部信息的第二面部网格的第二帧处接收第二面部框架，并基于接收到的第二面部框架更新面部纹理。所述方法包括将更新的面部纹理显示为三维化身。三维化身对应于面部的虚拟表示。
21. 《Google Patent | Methods, systems, and media for presenting media content previews（展示媒体内容预览的方法、系统和媒体）》
在一个实施例中，所述方法包括：使多个缩略图图像呈现在由用户设备渲染的页面上，其中每个缩略图图像表示可在用户设备渲染的媒体内容项，并且其中用户设备与头显显示器相关联；确定所述头显显示器的视点指向所述多个缩略图图像中的一个缩略图图像；响应于确定所述头显显示器的视点指向所述一个缩略图图像，使与所述缩略图图像之一相对应的内容预览的第一视图呈现在头显显示器，其中所述内容预览包括与第一视图不同且不包括第一视图的第二视图；检测到头显显示器的视点在朝向所述内容预览的第二视图的方向已经改变；响应于所述确定，使内容预览的第二视图呈现在头显显示器；确定头显显示器的视点不再指向内容预览；并且响应于所述确定，禁止内容预览的第二视图的呈预览，并且使得多个缩略图图像的呈现恢复到头显显示器。
22. 《Google Patent | Pose prediction with recurrent neural networks（基于递归神经网络的姿势预测）》
专利描述了系统用于接收针对增强现实体验的头部姿势预测的请求、识别与增强现实体验相关联的至少一个位置指示符和至少一个旋转指示符，以及将所述至少一个位置指示符和所述至少一个旋转指示符提供给包括多个单元的递归神经网络（RNN）。RNN可以包括多个循环步骤。RNN可用于为至少一个即将到来的时间段的增强现实体验生成对应于头部姿势变化的至少一个姿势预测，提供至少一个姿势预测并基于至少一个姿势预测触发增强现实内容的显示。
专利描述了用于深度机器学习的方法和装置。一些实现针对几何网络和机器人抓取结果预测网络的训练和利用。训练后的几何网络可用于根据二维或二维半维图像生成几何输出，所述输出属于几何感知，并且表示由图像捕获的三维特征。在一些实现中，几何输出至少包括编码神经网络生成的编码。训练后的抓取结果预测网络可用于生成候选抓取姿势的抓取结果预测。
24. 《Sony Patent | Information processor, information processing method, and program（信息处理器，信息处理方法和程序）》
专利描述的信息处理器包括：获取关于用户的运动的信息的获取单元；以及基于关于用户的运动信息进行控制的控制单元。控制单元配置为，在对应于由用户操作的第一摄像的第一显示区域和对应于由用户以外的被摄体操作的第二摄像的第二显示区域之间切换。
25. 《Sony Patent | Camera system（摄像头系统）》
摄像头系统包括多个摄像头，所述多个摄像头配置成在不同方向上捕获图像。摄像头系统以预定方向旋转多个摄像头。多个摄像头配置成使得，即使在旋转期间，其中一个摄像头都捕获预设特定区域的图像。摄像头系统基于特定区域的多个拍摄图像来获取关于特定区域中存在的对象的视差信息。
视频数据发送单元将由视频数据生成单元生成的数据发送到头显。感测数据接收单元接收从头显发送的数据，所述数据包括指示头显成功接收的数据大小的大小数据。所需时间指定单元指定中继设备和头显之间的往返通信所花费的时间。生成控制单元基于指定的时间、在大小数据中指示的大小和关于往返通信的给定目标时间，以每单位时间控制由视频数据生成单元生成的数据大小。
所需的时间指定单元指定往返通信所用的时间。比特率确定单元基于关于往返通信的指定时间和给定目标时间，确定与视频数据生成单元每单位时间生成的数据的大小相对应的值。搜索发生估计单元估计是否正在发生与头显的通信路径搜索处理。比特率确定单元改变所确定的值，使得值的变化幅度对应于估计的结果。
本发明的显示装置包括设置在像素形成表面上的多个凹陷部分，以及布置在多个凹陷部分中的每个凹陷部分中的像素，其中像素的发光单元形成在多个凹陷部分中的每个凹陷部分的侧壁和底面上。
专利描述的信息处理装置包括：显示控制单元，所述显示控制单元配置成执行第一处理。基于在所述真实空间中检测到的真实对象，所述第一处理显示叠加在所述真实空间上的虚拟对象。
信息处理设备从拍摄图像中提取标记的图像，并获得标记的代表点在三维空间中的位置。同时，基于包括在目标对象中的传感器的输出值，估计与拍摄图像的时间相对应的位置和姿态。在所述估计的基础上，通过使用目标对象模型来确定给定给每个标记的位置信息的权重，并且计算目标对象的位置信息。另外，通过以预定比率合成估计的位置信息来获得最终位置信息，并且输出并反馈最终位置信息以用于下一次估计。
本发明涉及信息处理设备和方法、电子设备和计算机可读介质。根据一个实施例，一种信息处理设备包括处理电路，所述处理电路配置成将由用户设备获取的环境数据与参考数据进行比较；基于所述比较确定对环境数据的获取方式的调整；以及执行控制以通知用户设备指示与调整相关的信息。
