2023年09月16日美国专利局新申请AR/VR专利摘选
文章相关引用及参考：映维网Nweon
一共更新了44篇专利。
（映维网Nweon 2023年09月16日）近期美国专利及商标局公布了一批全新的AR/VR专利，以下是映维网的整理（详情请点击专利标题），一共44篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索，你同时可以加入映维网AR/VR专利交流微信群（详见文末）。
在一个实施例中，专利描述的方法包括接收训练数据，所述训练数据包括来自第一源的多个训练图像和来自第二源的图像；从训练数据中获得一组训练图像；对于训练图像集中的每个训练图像，将对比度均衡应用于训练图像以生成修改的图像；使用神经网络对修改后的图像进行处理，以生成修改后图像的对象识别输出；对于集合中的每个训练图像，基于从训练图像生成的修改图像的对象识别输出与训练图像的基本事实注释之间的误差来确定损失；基于所确定的损失来更新神经网络的参数。
在一个实施例中，跨现实系统包括经由网络组件连接到多个便携式电子设备的计算设备、可由计算设备和多个便携式电子设备访问的存储库、以及密集映射合并组件。所述跨现实系统至少部分地基于从多个便携式设备接收的一组密集映射来确定三维环境的多个部分的表示。其中，至少部分地基于属于密集映射集的姿势数据或密集映射集中的曲面信息，将密集映射集分组为多个子组。跨现实系统将表示存储为共享持久密集映射的至少一部分。
3. 《Magic Leap Patent | Contextual-Based Rendering Of Virtual Avatars（Magic Leap专利：基于情景的虚拟化身渲染）》
在一个实施例中，专利描述了用于在混合现实环境中渲染虚拟化身的系统和方法。所述系统和方法可以配置为根据用户的确定意图，兴趣，环境刺激或用户扫视点来自动缩放虚拟化身或渲染虚拟化身。所述系统和方法可以在人类用户和虚拟化身之间提供更真实的交互。
在一个实施例中，专利描述了生成空间计算系统用户周围场景或环境的三维重建系统和方法，所述方法仅使用包括RGB图像的多视图图像，不使用深度传感器或来自传感器的深度数据。可以从RGB图像的帧序列中提取特征，并使用已知camera intrinsics和extrinsics来将其反向投影到三维体素体中，其中体素体的每个像素映射到体素体中的光线。反向投影的特征融合到三维体素体中。三维体素体通过三维卷积神经网络来细化和回归。
在一个实施例中，专利描述了配置为由用户头戴的设备。所述设备包括：配置为向用户呈现图形的屏幕；配置为查看所述用户所处的环境的摄像头系统；以及耦合到所述摄像头系统的处理单元。所述处理单元配置为：获得所述环境的图像的特征的位置，其中所述特征的位置由神经网络识别；确定所述图像中的特征之一的感兴趣区域，所述感兴趣区域的大小小于所述图像的大小；并且使用角检测算法执行角检测以识别感兴趣区域中的角。
6. 《Meta Patent | Offloading visual frames to a gateway device（Meta专利：将可视帧卸载到网关设备）》
在一个实施例中，专利描述的方法可以将视觉帧从客户端设备卸载到网关或边缘设备以进行处理。客户端设备可以接收流式视觉帧和使用数据服务处理视觉帧的请求。客户端设备可以将视觉帧卸载到预装有与所请求的数据服务相对应的资源的网关或边缘设备。在网关或边缘设备使用资源处理视觉帧之后，处理后的视觉帧可以返回到客户端设备。卸载设备和客户端设备位于网络中，使得用于卸载通信的延迟支持实时视频显示。网关设备管理器可以定位连接到客户端设备的网关，并且可以部署资源，使得设备可以为客户端设备执行网关服务和边缘处理服务。
7. 《Meta Patent | Dynamic mixed reality content in virtual reality（Meta专利：虚拟现实中的动态混合现实内容）》
在一个实施例中，专利描述的方法包括在真实世界环境中捕捉佩戴VR显示设备的第一用户的图像；接收VR环境的VR渲染；在VR环境中生成第一用户的第一MR渲染；在第一MR渲染中接收用户与VR环境的一个或多个元素交互的指示；响应于用户与一个或多个元素交互的指示实时生成VR环境中的第一用户的第二MR呈现；根据交互来修改一个或多个元素。
8. 《Meta Patent | Digital garment generation（Meta专利：数字服饰生成）》
在一个实施例中，专利描述的方法包括基于包括服饰的一个或多个图像生成服饰的前面板，生成服饰的后面板；在三维空间中对齐前面板和后面板，使得前面板在三维物体的前面，而后面板在三维体体的后面；识别所述前面板和所述背板的一对或多对边界段，其中所述前板和所述后面板的每对边界段附接在一起；以及通过使用物理模拟模型通过多次迭代模拟来连接所识别的前面板和后面板的一对或多对边界段中的每一对，然后来生成数字服饰。
用于头戴式显示器的波导的输出光栅被配置为抑制输出光栅的（1，1）衍射级。光栅具有两种或多种具有不同折射率的材料的设计。该设计在第一维度中周期性地重复并且在第二维度中周期地重复，以形成二维图案。二维图案的折射率通过二维傅立叶级数来近似，该二维傅立叶级数包括第一阶系数（1，0）、第二阶系数（0，1）和第三阶系数（1,2）。第三系数小于第一系数的一半并且小于第二系数的一半，使得来自光栅的（1，1）衍射级的光被抑制。
10. 《Meta Patent | Systems and methods of using supplemental uplink（Meta专利：使用补充上行链路的系统和方法）》
在一个实施例中，专利描述了用于基于用户设备（UE）的补充上行链路配置的方法。UE可以根据用于无线通信的UE的特性来识别用于经由补充上行链路进行通信的频带。UE可以经由收发器向基站发送第一消息，其中第一消息包括频带的标识和接入频带以经由补充上行链路进行通信的请求。UE可以响应于第一消息经由收发器从基站接收第二消息，其中第二消息包括与频带相对应的补充上行链路的配置。根据配置，UE可以经由收发器在频带中经由补充上行链路来通信traffic。
在一个实施例中，用于SPAD图像中的暗电流补偿的系统可配置为利用SPAD阵列捕获图像帧，并通过使用图像帧和至少一个先前图像帧执行时间滤波操作来生成时间滤波图像。SPAD阵列在时间上在与图像帧相关联的时间点之前的时间点捕获至少一个先前图像帧。系统同时可配置为获得暗电流图像帧。暗电流图像帧包括指示在没有检测到对应光子的情况下检测雪崩事件的多个SPAD像素中的一个或更多SPAD像素的数据。系统可配置为通过基于暗电流图像帧对经时间滤波的图像或图像帧执行减法运算来生成暗电流补偿图像。
在一个实施例中，专利描述的系统可配置为在帧捕获时间段内选择性地激活照明器以交替地从照明器发射光，并且抑制从照明器发光。系统可配置为在帧捕获时间段内执行多个顺序快门操作，以配置图像传感器阵列的每个图像传感器像素，从而实现光子检测。对于图像传感器阵列的每个图像传感器像素，所述多个顺序快门操作生成多个二进制计数，所述二进制计数指示在所述多条顺序快门操作中的期间是否检测到光子。系统可配置为基于多个二进制计数中的第一组二进制计数生成环境光图像。系统可配置为基于多个二进制计数中的第二组二进制计数来生成照明图像。
在一个实施例中，专利描述的方法包括基于由虚拟光源的识别部分提供的光来生成物理环境的一部分。例如，示例过程可以包括获得传感器数据，基于传感器数据生成三维重建，相对于3D重建定位虚拟光源，基于物理环境的一部分和虚拟光源之间的无障碍路径识别虚拟光源的一部分，将虚拟光源的该部分与物理环境的该部分相关联，并且生成视图。
14. 《Apple Patent | Interactions during a video experience（苹果专利：视频体验中的交互）》
在一个实施例中，专利描述的方法包括在沉浸式体验期间调整内容。例如，示例过程可以包括使用来自位于物理环境中的传感器的内容来呈现物理环境的表示；使用传感器检测物理环境中对象；呈现视频，其中所呈现的视频遮挡了所呈现的物理环境表示的一部分；呈现所检测对象的表示；并且根据确定所检测对象满足一组标准；调整所呈现视频对所呈现的所检测对象表示的遮挡水平，其中所检测对象代表至少指示传感器和所检测对象之间的位置的估计；并且至少部分地被所呈现的视频遮挡。
15. 《Apple Patent | Content playback and modifications in a 3d environment（苹果专利：3D环境下的内容播放和修改）》
在一个实施例中，专利描述的示例性过程呈现第一组视图，第一组视图包括由应用程序在3D环境内提供的应用程序内容；基于记录程序状态信息和基于用户交互确定的对应用程序内容的改变来记录应用程序的执行；并且基于记录来呈现包括3D环境内的应用程序内容回放的第二视图集合。从不同于第一组视点的第二组视点提供第二组视图。
16. 《Apple Patent | 3d representation of physical environment objects（苹果专利：物理环境对象的三维表示）》
在一个实施例中，专利描述的方法提供对象的3D表示。这种表示可以基于3D点云和/或基于传感器数据获得的2D图像输入。3D点云输入可以用于部件分割和/或确定对象部件的位置和/或方向，例如生成表示对象部件的大小、位置和方向的3D边界框。2D图像输入可用于部件属性识别，例如，确定椅子腿部件是否具有特定类型，例如星形、直下形、交叉形等。部件属性可用于产生相应区域内每个部件的形状的相对简单且相对准确的表示。
17. 《Apple Patent | Attention-driven rendering for computer-generated objects（苹果专利：计算机生成对象的注意力驱动渲染）》
在一个实施例中，专利描述的方法包括能够调整计算机生成对象的外观。所述方法包括在头显的光学透明显示器显示第一计算机生成对象和第二计算机生成对象；基于用户的注意力引导到第一计算机生成对象的预测来识别第一计算机生成对象，并且调整第二计算机生成对象的外观，以从第一状态改变到第二状态。
18. 《Apple Patent | Adjusting image content to improve user experience（苹果专利：调整图像内容以提升用户体验）》
在一个实施例中，专利描述的方法包括调整图像内容以减少体验期间的晕动症。例如，示例过程可以包括确定显示器的第一区域和第二区域，生成三维3D环境的图像，识别与显示器的第二区域相对应的每个图像的图像内容，以及减小与显示器的第二区域相对应的每个图像的图像内容的对比度或空间频率中的至少一个。
19. 《Apple Patent | Head-mounted device with impact mitigation（苹果专利：具有减震功能的头戴式设备）》
在一个实施例中，专利描述了具有减震功能的头戴式设备。所述设备包括设备外壳、面部接口、支撑结构、内容显示组件和冲击减轻结构。其中，所述冲击减轻结构配置为减轻与外部结构的冲击。
20. 《Apple Patent | Sensor emulation（苹果专利：传感器仿真）》
在一个实施例中，专利描述的方法包括在具有第一图像传感器配置中的第一图像传感器的头戴式设备中执行应用程序。应用程序配置为在包括第二图像传感器的设备执行，第二图像传感器的配置不同于第一图像传感器配置。从正在执行的应用程序接收对来自第二图像传感器的图像数据的请求。响应于头显的请求，确定虚拟图像传感器的姿势，基于虚拟图像传感器姿势生成图像数据，并且将生成的图像数据提供给执行应用。
21. 《Apple Patent | Head-mounted display unit and head support therefor（苹果专利：头戴式显示器组件和头部支架）》
在一个实施例中，专利描述的头戴式显示器包括显示组件和头部支架。头部支架包括耦合到头戴式显示器的第一侧面的第一铰链部分和耦合到头戴式显示器的第二侧面的第二铰链部分。所述头部支架同时包括与所述第一铰链部分耦合的第一伸长部分和与所述第二铰链部分耦合的第二伸长部分，所述第一铰链部分和所述第二铰链部分分别在第一和第二状态之间具有刚性和可动性。带部分是柔性的、有弹性的，并且在第一细长部分和第二细长部分之间延伸。当处于第二状态时，第一延长部分和第二延长部分沿显示组件的后侧相互延伸且不重叠。
在一个实施例中，专利描述的计算机生成环境可以包括计算机角色。在所述方法中，系统可以估计真实世界环境的特征，并且计算机角色与真实世界环境之间的交互可以基于所估计的特征。
在一个实施例中，专利描述的方法包括以下步骤：提供真实环境的至少一个视图和用于混合虚拟信息以在视图至少一部分中与真实环境叠加的至少一种视图；确定所述系统设置的至少一部分相对于所述真实环境的至少一个组件的位置和方向；将所述真实的环境的视图的至少部分细分为包括第一区域和第二区域的多个区域；第一区域内的真实环境的对象比第二区域内的实际环境的对象更靠近系统设置；在真实环境的视图的至少一部分中在显示设备上混合至少一个虚拟信息项目。
24. 《Apple Patent | Coherent occlusion of objects（苹果专利：对象的相干遮挡）》
在一种实现方式中，在包括光学透视显示器、一个或多个处理器和非瞬态存储器的设备处执行显示重叠对象的方法。所述方法包括获得在第二对象前面显示第一对象的请求；在与第一对象和第二对象之间的重叠相对应的区域中修改第一对象的透明度；在第二对象前面显示第一对象，同时基于修改的透明度通过第一对象和第二对象之间的重叠保持第二对象的可见性。
在一个实施例中，专利描述的方法逐步捕获表示用户的实际外观的数据，以创建用户的3D Avatar。用户电子设备的图像传感器可以随着时间的推移捕获用户身体的不同部分的图像，或其他传感器数据。最初或在给定时间捕获的图像和其他传感器数据可能不代表用户的全部身体。因此，随着时间的推移，逐渐捕获的数据提供用户的3D Avatar的附加部分的表示。
在一个实施例中，专利描述的可穿戴电子设备包括透镜、位于透镜周围的感应线圈、存储设备和收发器。感应线圈对可穿戴电子设备进行无线充电，并提供用于发送和接收无线数据信号的数据接口。存储设备存储可穿戴电子设备的设置和控制可穿戴电子装置的软件。收发器发送可佩戴电子设备的标识符并接收用于可佩戴电子装置的软件更新。
在一个实施例中，专利描述的方法包括获得渲染图像数据，渲染图像数据包括用于使用透视显示器进行显示的对象的表示。透视显示器允许来自物理环境的环境光穿过透视显示器。所述方法进一步包括感测与量化环境光的环境光相关联的多个光叠加特性值；基于多个光叠加特性值和对象的表示的预定显示特性来确定与电子设备相关联的多个显示校正值；根据多个显示校正值从渲染的图像数据生成透视显示器的显示数据，以便在性能阈值内满足对象的表示的预定显示特性。
28. 《Apple Patent | Ambient augmented language tutoring（苹果专利：环境增强语言辅导）》
在一个实施例中，专利描述了促进在扩展现实环境中学习语言方法。这可以涉及识别环境中的对象或活动；识别与用户或环境相关联的情景；以及基于对象、活动或上下文提供语言教学内容。在一个示例中，语言教学内容提供与对象、活动或情景相对应的单个单词、短语或句子。在另一示例中，语言教学内容请求与对象、活动或情景相对应的用户交互，例如，通过问答问题或教育游戏。语境可以用于确定是否或者如何提供语言教学内容。例如，基于用户当前的语言学习课程，可以在环境中识别相应的对象或活动，从而用于提供语言教学内容。
29. 《Apple Patent | Representation of users based on current user appearance（苹果专利：基于当前用户外观的用户表示）》
在一个实施例中，专利描述的方法包括生成并显示用户面部的表示的一部分。例如，示例过程可以包括在用户使用电子设备时；在多个配置中获得与用户面部特征相对应的第一组数据；从一个或多个图像传感器获得与面部的一个或更多局部视图相对应的第二组数据；基于所述第一组数据和所述第二组数据生成所述用户的面部的表示，其中所述表示的部分对应于不同的置信值；并且基于所述对应的置信值显示所述表示中的所述部分。
30. 《Google Patent | Tracking repetitions by head-mounted device based on distance（谷歌专利：基于距离的头戴式设备追踪重复）》
在一个实施例中，专利描述的方法包括，通过头戴式设备，基于从头戴式设备所包括的深度传感设备接收的第一数据，确定头戴式设备与地标的第一距离在完成范围之外；基于确定，输出尚未完成的指示；根据从深度感测设备接收到的第二数据，确定头戴式装置与地标的第二距离在完成范围内；基于确定，增加重复计数器并输出重复已经完成的指示。
31. 《Sony Patent | Information processing apparatus（索尼专利：信息处理装置）》
在一个实施例中，专利描述的信息处理设备包括：将可见光投影到真实空间中的表面上的投影单元；检测投影到真实空间中的表面上的可见光的位置的传感器；具有光学透明性的显示单元；以及控制所述投影单元、所述传感器和所述显示单元的控制单元。其中，所述投影单位、所述感测器和所述显示器的相对位置固定，并且所述控制单位在所述显示单元上显示用于校正与所述可见光的位置的偏差的目标图像。发明可以应用于头显。
在一个实施例中，专利描述的显示处理设备包括：用于将移动终端的第一运动信息发送到外部设备的发送单元；在第一时间接收由所述外部设备基于所述第一运动信息绘制的虚拟对象的第一显示区域的数据，并且在比所述第一时间晚的第二时间接收由外部设备基于第一运动信息画出的与所述虚拟对象的所述第一显示区域相邻的第二显示区域的信息的接收单元；以及显示控制单元。所述显示控制单元在显示所接收的所述第一显示区域的数据之后，执行控制以在所述移动终端的显示设备显示所述第二显示区域的所述数据和所述第一显示器区域的所所述数据。
在一个实施例中，专利描述的信息处理设备包括呈现控制单元，所述呈现控制单元配置为控制呈现单元向用户呈现提示改变第一部分或第二部分中的至少任何一个的方向的通知信息。
在一个实施例中，专利描述的图像生成设备通过使用场景数据，直接绘制通过对RGB的原色进行公共扭曲而生成的失真图像，并按照绘制的像素序列的顺序将失真图像发送到头戴式显示器。头戴式显示器从对于RGB中的每一个不同的位置获取颜色信息，并且取决于存储在线缓冲器中的失真图像的部分数据中的目镜的色差。以这种方式，图像生成设备分别针对RGB生成各自具有不同失真的部分数据，并立即将生成的部分数据输出到显示面板。
在一个实施例中，专利描述的方法包括在XR环境中为XR显示设备的显示器呈现第一图像帧序列，；接收与虚拟内容组织器的第一操纵相关联的一个或多个第一姿势输入；呈现图像帧的第二序列；以第二姿势从用户可交互元素的第二子集接收对特定用户可交互元件的选择，并且执行所述特定操作。
36. 《Samsung Patent | Electronic apparatus and method for controlling thereof（三星专利：电子设备及其控制方法）》
在一个实施例中，专利描述的电子设备包括用户接口、摄像头、存储器和处理器。电子设备接收第一用户命令的输入；摄像头捕获特定区域和至少一个设备以获得图像；系统基于所述图像获得与所述特定区域的大小和形状相关联的信息、通过识别包括在所述图像中的所述至少一个设备来获得所述至少个设备的识别信息和布置信息，并且基于关于特定区域的大小和形状的信息以及用于至少一个设备的标识信息和布置信息来生成用于特定区域的地图。
37. 《Snap Patent | Eyewear device hinge assembly（Snap专利：眼镜装置铰链组件）》
在一个实施例中，专利描述了一种铰链组件，铰链组件包括延伸穿过外壳壁中的安装孔的金属铰链基座，铰链基座以热传递关系连接到外壳壁内侧的金属锚板。锚板另外用作壳体内部的发热电子器件的安装基座，发热电子器件与锚板成热传递关系，使得所述锚板和所述铰链基座一起形成热传递路径的一部分。所述热传递路径将热量从所述壳体的内部传导到所提供的外部散热器和外部设备部件。
38. 《Snap Patent | 3d user interface depth forgiveness（Snap专利：3D用户界面深度容错）》
在一个实施例中，专利描述的头显包括一个或多个摄像头、一个或更多个显示设备和一个或更少个处理器。系统同时包括存储指令的存储器，当存储器由一个或多个处理器执行时，存储器将系统配置为生成虚拟对象、为虚拟对象生成虚拟对象碰撞器、确定虚拟对象的圆锥碰撞器、将虚拟对象提供给用户、在真实世界中检测用户手上的landmark、生成用于landmark的lanmark碰撞器，并且基于检测到lanmark碰撞器与圆锥碰撞器和虚拟对象碰撞器之间的碰撞来确定用户对第一虚拟对象的选择。
39. 《Snap Patent | Augmented reality anthropomorphization system（Snap专利：增强现实拟人化系统）》
在一个实施例中，专利描述的方法用于通过添加补充的第二媒体项目来增强第一媒体项目。用户可以提供增强所选媒体项目的请求，作为响应，增强系统检索并向用户呈现要添加到媒体的补充内容的策划集合。用户可以例如通过提供滚动浏览内容集合的触觉输入来查看补充内容集合。
40. 《Snap Patent | High dynamic range for dual pixel sensors（Snap专利：双像素传感器的高动态范围）》
在一个实施例中，专利描述了一种用于增加双像素图像传感器的动态范围的方法。所述方法包括从光学传感器的多个像素检测全像素的强度水平，多个像素中的一个或多个全像素包括至少两个子像素；检测一个或更多个子像素的强度级别；检测光学传感器的全像素的强度级别已经达到全像素的饱和级别；以及响应于检测到光学传感器的全像素的强度水平已经达到全像素的饱和水平，基于一个或多个子像素的强度级别来计算全像素的外推强度水平。
41. 《Qualcomm Patent | Display of a live scene and auxiliary object（高通专利：实时场景和辅助对象的显示）》
在一个实施例中，专利描述的移动设备包括一个或多个处理器、显示器和配置为捕获现场场景的图像的摄像头。所述一个或多个处理器配置为确定移动设备的位置并基于所捕获的图像显示增强图像。增强图像包括现场场景的图像的至少一部分和包括所确定的移动设备的位置的指示的地图。一个或多个处理器同时配置为在显示器的第一部分中显示现场场景的图像的至少一部分，并且在显示器的第二部分中显示地图。随着移动设备的移动，增强图像更新，并且随着增强图像的更新，地图停靠到显示器的第二部分。
42. 《Qualcomm Patent | Wireless communication including xr traffic awareness（高通专利：包括XR流量感知的无线通信）》
在一个实施例中，专利描述了允许基站与应用服务器同步，以使基站能够将UE的上行链路传输与UE的下行链路接收周期对准的配置。基站使用周期性上行链路traffic burst和周期性下行链路traffic burst与UE通信。基站选择到上行链路traffic或下行链路traffic中的至少一个的时间偏移，以增加上行链路traffic burst和下行链路traffic burst之间的重叠。基站向AF发送时间偏移。
在一个实施例中，专利描述的颜色校正系统可以包括光源、检测器和波导。波导包括用于将来自光源的照明光输入到波导中的输入光栅；用于将照明光朝向眼睛偏转的照明光栅；用于将从眼睛反射的照明光输入到波导中的检测器光栅；以及用于将反射的照明光从波导输出到检测器中的输出光栅。
在一个实施例中，专利描述了一种应用于视频透视系统的真实世界视图显示方法。所述视频透视系统包括至少一个灰度摄像头、彩色摄像头和至少一个处理器。真实世界视图显示方法包括：通过所述至少一个灰度摄像头捕获物理环境的至少一个灰度图像，以生成与所述物理环境相对应的灰度透视视图；由所述彩色照摄像头捕获所述物理环境的至少一个彩色图像；以及由所述至少一个处理器根据所述至少一面彩色图像处理所述灰度透视视图，以在沉浸式内容中呈现彩色透视视图。
