2023年03月24日美国专利局新申请AR/VR专利摘选
文章相关引用及参考：映维网Nweon
一共更新了37篇专利。
（映维网Nweon 2023年03月24日）近期美国专利及商标局公布了一批全新的AR/VR专利，以下是映维网的整理（详情请点击专利标题），一共37篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索，你同时可以加入映维网AR/VR专利交流微信群（详见文末）。
1. 《Meta Patent | Audio system for spatializing virtual sound sources（Meta专利：用于空间化虚拟声源的音频系统）》
在一个实施例中，专利描述了一种用于将虚拟声源空间化的音频系统。音频系统的麦克风阵列配置为监测局部区域中的声音。音频系统的控制器使用麦克风阵列监测到的声音来识别局部区域内的声源，并确定它们的位置。音频系统的控制器基于一个或多个约束来生成虚拟声源的目标位置。一个或多个约束包括目标位置与所确定位置中的每一个相距至少阈值距离。控制器部分基于目标位置生成一个或多个声音滤波器，以空间化虚拟声源。音频系统的换能器阵列部分地基于一个或多个声音滤波器来呈现包括虚拟声源内容的空间化音频。
2. 《Meta Patent | Digital pixel sensor（Meta专利：数字像素传感器）》
在一个实施例中，专利描述的设备包括第一光电二极管、第二光电二极管、第一浮动扩散节点、第二浮动扩散节点、量化器和控制器。控制器可以致使第一光电二极管和第二光电二极管在曝光周期内产生并累积光电荷，并且使用量化器量化第一浮动扩散节点处和第二浮动扩散节点处的复位电压，以产生第一数字复位值和第二数字复位值。在曝光周期结束后，控制器可以将光电荷从第一光电二极管和第二光电二极管分别转移到第一浮动扩散区和第二浮动扩散区，以产生第一信号电压和第二信号电压，并使用量化器将信号电压量化为数字信号值。然后，可以基于数字复位值和数字信号值来生成数字表示。
3. 《Meta Patent | Content linking for artificial reality environments（Meta专利：用于人造现实环境的内容链接）》
在一个实施例中，专利描述的技术用于将人造现实内容链接到共享人造现实环境。所述方法包括，从用户设备接收对用户表示和虚拟区域的选择；提供用于在虚拟区域中显示的用户表示；从多个人造现实应用中确定所选择的人造现实应用以供虚拟区域中的用户表示使用；将来自所选择的人造现实应用的视觉内容嵌入到虚拟区域中。其中，虚拟区域可以与到所选择的人造现实应用的深度链接相关联；在虚拟区域之间转换用户表示，同时向用户设备提供指示与另一虚拟区域相关联的其他用户设备的音频元素。
4. 《Meta Patent | Artificial reality input models（Meta专利：人造现实输入模式）》
在一个实施例中，专利描述的方法用于在XR环境中将命令与用户选择的真实对象或虚拟对象相关联。当用户发出希望与特定对象相关联的命令时，用户可以通过通过注视点或指向所述对象的手势来选择特定对象。在其他实施例中，用户可以通过语音命令来指示与特定对象相关联。
5. 《Meta Patent | Adaptive feedback cancelation and entrainment mitigation（Meta专利：自适应反馈取消和杂音缓解）》
在一个实施例中，用于人造现实系统的音频系统配置为减少反馈并减轻呈现给用户的音频内容中的杂音。音频系统利用自适应反馈消除过程来减少反馈。音频系统在时域和频域的混合中处理参考信号。音频系统可以预白化参考信号和扬声器信号，并使用滤波器组将预白化信号分离到频带中。音频系统使用状态空间算法在每个频带中生成自适应滤波器。自适应滤波器可以应用于扬声器信号以产生反馈消除信号，所述反馈消除信号可以从参考信号中减去以减少反馈。
6. 《Meta Patent | Digital garment generation（Meta专利：数字服饰生成）》
在一个实施例中，专利描述的方法包括基于服装的一个或多个图像生成服装的前面板，生成服装的后面板，在三维空间中对齐前面板和后面板，使得前面板在三维物体的前面，而后面板在三维体体的后面。然后，识别所述前面板和所述后面板的一对或多对边界段，其中所述前面板和所述后面板的每对边界段附接在一起。接下来，通过使用物理模拟模型通过多次迭代模拟将识别出的前面板和后面板的一对或多对边界段中的每一对连接起来，从而生成数字服装。
7. 《Meta Patent | Visual navigation elements for artificial reality environments（Meta专利：用于人造现实环境的视觉导航元素）》
在一个实施例中，专利描述的方法可以包括接收生成用于人造现实应用的视觉导航元素的请求，所述人造现实应用被配置为例如经由用户表示在共享人造现实环境中操作；生成视觉导航元素和生成音频元素；接收对视觉导航元件的激活的指示，以及在激活时并且在提供音频元件的同时加载用于用户表示的人造现实应用；提供指令以在加载完成时在人造现实应用中显示用户表示。
在一个实施例中，专利描述了一种用于辅助增强现实头显用户的方法。所述方法包括向增强现实设备的用户提供多媒体内容；基于第一用户选择为用户调整多媒体内容的视觉部分；为用户调整多媒体内容的音频部分；以及接收来自用户的查询的手势输入。专利同时描述了一种用于在增强现实应用中包括角色Avatar的方法。所述方法包括确定用户对在线内容中的角色的兴趣程度；在用户和在线内容中角色的Avatar之间生成虚拟交互事件，以及经由增强现实设备向用户提供与在线内容中人物的Avatar的虚拟交互事件。
9. 《Meta Patent | Wavefront sensing from retina-reflected light（Meta专利：视网膜反射光的波前传感）》
在一个实施例中，专利描述的技术用于波前感测的设备，并旨在捕获通过眼睛晶状体传播的红外光的波前图像。通过确定波前的会聚或发散属性，可以确定眼睛的调节状态。例如，尽管大约45岁以下的个体可以自由适应，但老年个体的适应反应可能有限。由于所述原因，测量眼睛的调节状态将能为老年个体提供相关支持。
在一个实施例中，专利描述了用于识别目标对象的一个或多个特征的可穿戴光谱系统和方法。光谱系统可包括配置成在辐照视场中发射光的光源，以及配置成接收来自目标对象的反射光的电磁辐射检测器。系统的一个或多个处理器可以基于目标对象的光吸收水平来识别目标对象的特征。所述系统和方法可包括对散射光和/或环境光的一个或多个校正，例如应用环境光校正。
在一个实施例中，专利描述了在混合现实环境中显示虚拟角色的系统和方法。在一个实施例中，虚拟角色的视图基于包含主关节和辅助关节的动画rig。动画rig可以是由主关节和辅助关节之间的空间关系所定义的姿态。虚拟角色可以在混合现实环境中移动。在一个实施例中，虚拟角色可以根据与混合现实环境中的元素相关联的兴趣值比较而移动。与运动相关的空间关系变换可以用运动信息来表示。在一个实施例中，从神经网络接收运动信息。
在一个实施例中，专利描述了一种增强现实显示设备。所述增强现实显示设备包括投影系统、位于投影系统之后的光学补偿器和柔性波导。柔性波导可以改变其曲率，并且包括输入衍射光栅和输出衍射光栅。光学补偿器配置为向图像引入预畸变，并对从投影系统接收的图像进行光学变焦，图像中的预畸变和图像的光学变焦与柔性波导根据柔性波导的选定半径向未失真图像引入的预畸变相反。柔性衍射光栅使预先畸变的图像畸变。输出衍射光栅将未失真的图像输出到用户的眼睛。
13. 《Samsung Patent | Augmented reality providing device（三星专利：增强现实提供设备）》
在一个实施例中，专利描述的一种增强现实提供设备包括具有第一表面的右眼透镜；具有第一表面的左眼透镜；与右眼透镜的第一表面重叠，并且配置为改变穿过右眼透镜的光的照度的右眼滤光器；与左眼透镜的第一表面相重叠，并且配置为改变穿过左眼透镜的光的照度的左眼滤光器；配置为向所述右眼透镜提供第一图像，并且配置成向所述左眼透镜提供第二图像的显示单元；配置成控制所述右眼滤光器的透射率的右眼驱动器，并且配置成控制左眼滤波器的透射率的左眼驱动器。
14. 《Samsung Patent | Method and apparatus with virtual object rendering（三星专利：具有虚拟对象渲染的方法和装置）》
在一个实施例中，专利描述了一种由处理器实现的虚拟对象渲染方法。所述方法包括：基于通过分层强化学习训练的high-level模型，根据高斯随机路径确定第一对象的多个预测轨迹；基于通过分层强化学习训练的low-level模型，根据与预测轨迹相对应的子目标来确定第二对象的方向信息；基于所述第一对象的实际轨迹，根据与所述预测轨迹之一对应的子目标来确定所述第二对象的方向信息；以及基于所确定的方向信息来渲染作为虚拟对象的第二对象。
在一个实施例中，专利描述的一种方法包括从图像传感器获得真实世界场景的图像数据；从深度传感器获得真实世界场景的稀疏深度数据；以及将图像数据传递到第一神经网络以获得一个或多个感兴趣对象区域（ROI）和一个或更多个特征图ROI。每个对象ROI包括至少一个检测到的对象。所述方法同时包括将图像数据和稀疏深度数据传递到第二神经网络，以获得一个或多个密集深度图ROI；对齐所述一个或多个对象ROI、一个或更多个特征图ROI和一个或更多个密集深度图ROI；以及将对准的ROI传递到全卷积网络以获得真实世界场景的分割。分割包含真实世界场景中一个或多个对象的一个或更多像素预测。
在一个实施例中，专利描述了一种包括电致变色设备的电子设备和控制所述电子设备的方法。所述方法包括：使用电子设备的摄像头获取第一图像帧，基于开启的红外照明关闭电子设备的红外照明；在所述IR照明关闭时使用所述摄像头获取第二图像帧；以及基于在IR照明打开的情况下获取的第一图像帧，基于第二图像帧的亮度来控制电致变色器件的透射率。
在一个实施例中，专利描述的方法通过平面和表面重建、场景解析、通过来自不同来源的深度融合进行深度重建的3D重建。所述系统包括显示器和处理器，而所述方法包括将图像帧的场景划分为一个或多个平面区域和一个或更多个表面区域；通过基于一个或多个平面区域执行平面重建来生成重建平面；通过基于一个或多个表面区域执行表面重建来生成重建的表面；通过对重建的平面和重建的表面进行积分来创建3D场景重建。
18. 《Apple Patent | Methods and systems for composing and executing a scene（苹果专利：用于构成和执行场景的方法和系统）》
在一个实施例中，扫描第一物理环境以检测第一物理环境中的第一物理对象和第一物理环境下的第二物理对象，其中第一物理对象满足至少一个第一对象标准，第二物理物体满足至少一种第二对象标准。所述方法包括与第一物理环境相关联地显示沿着从第一物理对象到第二物理对象的第一路径移动的虚拟对象。所述方法进一步包括扫描第二物理环境，以检测第二物理空间中的第三物理对象和第二物理区域中的第四物理对象，其中第三物理对象满足至少一个第一对象标准，第四物理对象满足该至少一个第二对象标准。所述方法进一步包括与第二物理环境相关联地显示沿着第二路径从第三物理对象移动到第四物理对象的虚拟对象。
在一个实施例中，central office可以控制相对于无线连接发生的感测，以计算各种通信参数。所述感测可以用于确定链路质量，并执行针对接入点和UE用户设备的定向传输/接收的波束管理。central office可以通过在多个波束发送参考信号来周期性地控制接入点，从而执行波束扫描操作。UE可以测量多个波束，并将测量结果发送到central office。测量数据可以以原始形式发送到central office，以避免UE必须处理测量。central office然后可以使用测量数据来确定要在接入点和UE使用的期望波束。
20. 《Apple Patent | Methods for moving objects in a three-dimensional environment（苹果专利：在三维环境中移动对象的方法）》
在一个实施例中，电子设备使用不同的算法来在三维环境中移动对象。随着对象与用户的视点之间的距离改变，电子设备在三维环境中修改对象的大小。当对象在三维环境中与另一对象接触时，电子设备选择性地阻止对象的移动。基于另一对象是否是所述对象的有效下落目标，电子设备选择性地将对象添加到三维环境中的另一对象。
21. 《Apple Patent | Priority-based video encoding and transmission（苹果专利：基于优先级的视频编码和传输）》
在一个实施例中，专利描述了一种视频编码系统。其中，像素数据在编码之前可以分解成频带。频带组织成块，块提供给基于块的编码器。编码器对块进行编码并将编码的块传递到无线接口，无线接口对块进行分组以通过无线连接进行传输。编码器可以将编码的频带分类为多个优先级，并且可以用指示在块中表示的频带、频带的优先级和定时信息的元数据来标记每个频率块。无线接口然后可以根据分组中编码的频率块的优先级，和/或根据分组中频率块的定时信息来发送或丢弃分组。
在一个实施例中，专利描述的计算机系统检测用户是否满足关于在三维环境的第一视图中显示的第一用户界面对象的注意力标准。响应于检测到不满足标准，计算机系统显示具有修改的外观的第一用户界面对象。计算机系统检测用户的视点相对于物理环境的第一移动，并检测用户满足关于第一用户界面对象的注意力标准。作为响应，计算机系统在三维环境的第二视图中显示第一用户界面对象，这包括显示具有更强调第一用户界面对象的外观的第一用户界面对象。
在一个实施例中，central office可以控制相对于无线连接发生的感测，以计算各种通信参数。所述感测可以用于确定链路质量，并执行针对接入点和UE用户设备的定向传输/接收的波束管理。central office可以通过在多个波束发送参考信号来周期性地控制接入点，从而执行波束扫描操作。UE可以测量多个波束，并将测量结果发送到central office。测量数据可以以原始形式发送到central office，以避免UE必须处理测量。central office然后可以使用测量数据来确定要在接入点和UE使用的期望波束。
24. 《Microsoft Patent | Rf retroreflector based controller tracking for vr headsets（微软专利：基于Rf回射器的控制器追踪）》
在一个实施例中，专利描述了使用有源传感器系统来追踪无源控制器系统的方法。无源控制器系统包括配置为握在用户手中的主体，以及多个回射器。所述回射器共同提供至少180度的反射表面，并用于当所述无源控制器系统定位在距所述雷达信号源预定距离内，反射雷达信号。传输到无源控制器，并从无源控制器反射回来的信号用于计算无源控制器系统相对于有源传感器系统的位置和方向。
25. 《Snap Patent | Augmented reality experience based on physical items（Snap专利：基于物理项目的增强现实体验）》
在一个实施例中，专利描述的操作包括：通过消息收发应用程序检测用户对物理物品的购买或占有；识别与所述物理物品相关的增强现实体验；响应于检测到对所述物理物品的购买或占有，向所述消息收发应用授予所述增强现实体验；通过客户端设备摄像头捕获描绘物理项目的图像；以及将与增强现实体验相关联的一个或多个增强现实元素应用于物理物品的图像。
26. 《Snap Patent | Augmented reality guidance interface（Snap专利：增强现实引导界面）》
在一个实施例中，专利描述的操作包括：在地理围栏区域内的位置处检测客户端设备；在所述地理围栏区域内的位置确定到所述感兴趣目的地的路线；使得在所述客户端设备处的AR界面内显示环境的呈现；检测真实世界标志的显示；响应于检测到的显示，生成媒体项目，其中所述媒体项目基于到所述感兴趣的目的地的路线；以及基于所述标志在所述环境的呈现内的位置，使所述媒体项目在所述AR界面内显示。
27. 《Snap Patent | Rendering 3d captions within real-world environments（Snap专利：在真实世界环境中渲染三维字幕）》
在一个实施例中，编辑界面显示在客户端设备之上。编辑界面包括与摄像头馈送的视图一起显示的输入组件。接收包括一个或多个文本字符的第一输入。响应于接收到第一输入，显示一个或多个文本字符的2D表示。响应于检测到第二输入，显示预览界面。在预览界面内，在摄像头馈送内捕获的3D空间中的位置处渲染基于一个或多个文本字符的3D字幕。生成消息，所述消息包括渲染的3D字幕。
28. 《Snap Patent | Body pose estimation（Snap专利：身体姿势估计）》
在一个实施例中，专利描述的包括接收单眼图像，所述单眼图像包括对用户身体的描绘；检测在单眼图像中描绘的身体的多个骨骼关节；以及基于检测到的身体的多个骨骼关节来确定由单眼图像中描绘的身体表示的姿势。
29. 《Snap Patent | Deforming real-world object using an external mesh（Snap专利：使用外部网格来变形现实世界对象）》
在一个实施例中，专利描述的操作包括：接收包括对真实世界对象的视频；生成与所述真实世界对象相关联的3D身体网格；确定视频中描绘的真实世界对象的UV位置，以获得与UV位置相关联的像素值；基于与所述UV位置相关联的像素值，生成表示所述真实世界对象的外部网格和相关联的AR元素；基于对所述3D身体网格的改变和变形参数来致使外部网格变形；以及基于变形的外部网格修改视频，从而用AR元素替换真实世界对象。
30. 《Snap Patent | Augmented reality items based on scan（Snap专利：基于扫描的增强现实项目）》
在一个实施例中，专利描述的操作包括：经由消息收发应用接收扫描由设备摄像头捕获的图像的请求；确定所述图像中描绘的对象的属性；从多个增强现实项目中识别与对象的属性相关联的增强现实项目；将所识别的增强现实项目与由所述摄像头捕获的图像进行组合；以及经由所述消息收发应用显示结合的图像。
31. 《Google Patent | Attention tracking to augment focus transitions（谷歌专利：追踪注意力以增强焦点转换）》
在一个实施例中，专利描述的方法涉及追踪用户对呈现在虚拟屏幕的内容的注视。所述方法包括检测与内容的第一区域相关联的散焦事件，以及确定与内容的第二区域相关的下一焦点事件。所述确定可以至少部分地基于散焦事件和所追踪的用户注意力。所述方法可以进一步包括：基于所确定的下一焦点事件，生成用于将内容的第二区域与内容的剩余部分区分开来的标记；并且响应于检测到与虚拟屏幕相关联的重新聚焦事件，触发与内容的第二区域相关联的标记的执行。
在一个实施例中，专利描述的技术用于数据asset获取和模糊处理，以帮助从第三方检索增强现实渲染数据资产。发送软件开发工具包并接收回数据asset可以确保数据asset与用户界面中的增强现实渲染体验兼容。具有模糊处理的数据采集系统同时可以确保第三方生成的代码被去除语义并降低可读性。
33. 《Google Patent | Geographic augmented reality design for low accuracy scenarios（谷歌专利：低精度场景的地理增强现实设计）》
为了在不定位用户的情况下呈现增强现实特征，客户端设备接收在用户计算设备的摄像头视图中呈现增强现实功能的请求。在定位用户之前，客户端设备获得指示用户姿势的传感器数据，并且基于具有超过指示低精度状态的置信阈值的置信水平的传感器数据来确定用户的姿势。然后，客户端设备在处于低精度状态时根据所确定的用户姿势在摄像头视图中呈现一个或多个增强现实特征。
在一个实施例中，专利描述的一种信息处理设备包括指定单元，指定单元从能够以阶梯方式表达三维对象的对象光的多个层数据中指定由于另一层次的层数据的前景图像而丢失的遮挡区域。信息处理设备同时包括修改单元，修改单元修改在与指定的遮挡区域的边界的层数据中的幅度或相位中的至少一个，从而抑制对象光向遮挡区域外部的泄漏。
在一个实施例中，专利描述了一种能够容易地调整图像捕获环境的图像处理设备。所述图像处理设备包括调整单元。调整单元基于在不同时刻拍摄的图像的参考图像，和通过在当前环境中拍摄同一被摄体图像所获得的拍摄图像之间的比较结果来调整摄像头参数。
36. 《Lumus Patent | Compact head-mounted display system having uniform image（Lumus专利：具有均匀图像的紧凑型头戴式显示系统）》
在一个实施例中，专利描述的设备包括具有输入孔径、输出孔径、至少两个主表面和边缘的透光基板、用于通过全内反射将光波耦合到基板中的光学元件。所述设备同时具有位于所述光透射基板的两个主表面之间的至少一个部分反射表面，并用于将光波部分反射出所述基板。所述设备同时具有第一透明板，以及分束涂层。所述分束涂层施加在所述基板和所述透明板之间的界面处。
37. 《Valve Patent | Head-mounted display system with compact optics（V社专利：具有紧凑光学器件的头戴式显示系统）》
在一个实施例中，专利描述了一种包括透镜组件的头戴式显示器。所述透镜组件包括第一透镜元件和第二透镜元件，所述第一透镜元件与第二透镜单元通过合适的光学透明粘合剂直接或间接地耦合在一起。透镜组件可以包括设置在第一透镜元件和第二透镜元件之间的四分之一波片。第一透镜元件可以包括其上具有抗反射涂层的表面，并且第二透镜元件可以包含其上具有部分反射涂层的面。光学系统可以包括反射型偏振器，反射型偏转器与透镜组件一起将来自显示系统的光聚焦到头显用户的眼睛。
