2021年11月13日美国专利局新申请AR/VR专利摘选
2021年11月13日美国专利局新申请AR/VR专利摘选
文章相关引用及参考：映维网
一共更新了38篇专利。
（映维网 2021年11月13日）近期美国专利及商标局公布了一批全新的AR/VR专利，以下是映维网的整理（详情请点击专利标题），一共38篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索，你同时可以加入映维网AR/VR专利交流微信群（详见文末）。
1. 《Magic Leap Patent | 3d object rendering using detected features（使用检测到的特征进行3D对象渲染）》
增强现实显示系统配置为使用基准标记将3D内容与真实对象对齐。增强现实显示系统可以可选地包括配置为检测真实对象位置的深度传感器。增强现实显示系统同时可以包括配置成用不可见光照亮对象至少一部分的光源，以及配置成使用不可见光的反射部分形成图像的光传感器。显示系统的处理电路可以基于发射光和反射光之间的差来识别位置标记，并且基于真实对象的位置和位置标记的位置来确定真实对象的方向。
在一个实施例中，光学系统接收与世界对象相关联的光。虚像光投射到光学系统的目镜之上。根据光学系统检测到的信息，确定光学系统的系统视场中至少要部分变暗的一部分。可以根据检测到的信息来确定用于多个空间分辨率的调光值。检测到的信息可以包括光信息，注视信息和/或图像信息。可以调节光学系统的调光器，根据多个调光值来减小与世界对象相关的光的强度。
专利描述了在混合现实协作环境中促进虚拟对象的视听存在转换的系统和方法示例。所述系统和方法可配置为产生不同的视听存在转换，例如虚拟化身的出现、消失和再现。虚拟化身视听转换可由虚拟化身的各种视觉和声音效果进一步指示。
4. 《Magic Leap Patent | Convolution-based camera and display calibration（基于卷积的camera和显示器校准）》
专利描述了用于校准camera和显示器的技术。使用camera拍摄目标的图像。目标包括具有重复tile结构的细分。目标同时包括叠加在tessellation上的独特图案。矩阵基于捕获图像中的像素强度形成。每个矩阵包括每个对应于其中一个tile内的像素强度的值。矩阵与内核进行卷积以生成强度贴图。每个内核都是基于唯一图案的对应唯一图案生成。在每个强度tile中确定一个极值。基于每个强度贴图的极值确定图像中每个唯一图案的位置。使用每个唯一图案的位置执行设备校准。
5. 《Magic Leap Patent | Deep neural network pose estimation system（深度神经网络位姿估计系统）》
深度神经网络通过将两个自定义深度神经网络与姿势估计算法相结合以提供实时姿势估计。可使用另一深度神经网络将位置进一步细化为亚像素坐标。可以使用目标标记的自动标记视频、合成亚像素角点数据和/或极数据增强的组合来训练网络。深度神经网络提供改进的姿势估计，特别是在低光、高运动和/或高模糊等场景。
专利描述了用于在两个不同环境（例如虚拟环境和真实环境）之间转换图像和声音的技术。提供第一环境的视图和与第一环境相关联的音频。响应于检测转换事件，提供第一环境与第二环境组合的视图。组合视图包括具有第一可见性值的第一环境图像和具有第二可见性值的第二环境图像。另外，响应于检测转换事件，第一环境音频与与第二环境相关联的音频混合。
7. 《Apple Patent | Items with magnetic straps and cables（带有磁带和线缆的物品）》
线缆通过磁力附接到束带和其他物品（如电子设备）中的磁铁。线缆可能包含传输电源和/或数据的信号线。被磁场吸引的磁性材料可并入信号线和/或电缆中的其他结构中。束带可能有柔性磁铁和/或沿其长度延伸的其他磁铁。束带的磁铁产生吸引电缆的磁场。电子设备可以具有包含磁铁的外壳来吸引线缆。利用磁力吸引，线缆可以在电子设备运行期间可拆卸地连接到束带和其他物品上，从而有助于防止线缆缠绕。
8. 《Apple Patent | Display device sharing and interactivity in simulated reality (sr)（模拟现实中的显示设备共享和交互）》
在一个实现中，在包括一个或多个处理器和非瞬态存储器的第一电子设备处，执行在模拟现实中提供显示设备共享和交互的方法。所述方法包括从第一用户获得与第一电子设备通信的第一显示设备的手势输入，其中第一显示设备包括第一显示器。所述方法同时包括，响应于获得手势输入，将第一显示器的表示发送到第二电子设备。所述方法同时包括从第二电子设备接收定向到第一显示设备的输入消息，其中输入消息包括由第二电子设备从第二用户获得的输入指令。所述方法同时包括将输入消息发送到第一显示设备以供第一显示设备执行。
9. 《Apple Patent | Head-mounted electronic display device with lens position sensing（带透镜位置传感的头戴式电子显示设备）》
头戴式设备可具有包含为用户显示内容的第一和第二像素阵列的显示器。头戴式设备中的头戴式支撑结构支撑像素阵列。左定位器可用于定位包括左透镜和第一像素阵列的左透镜模块。右定位器可用于定位包括右透镜和第二像素阵列的右透镜模块。当用户佩戴头戴式支撑结构时，诸如接近感测电路之类的感测电路可用于检测左右透镜模块和用户鼻子的相对位置。控制电路可以使用用户的瞳孔间距离信息和来自感测电路的信息来调整左右透镜模块的位置。
10. 《Facebook Patent | Switching between different communication protocols（在不同通信协议之间切换）》
专利描述了一种用于在不同通信协议之间切换的系统、方法和装置。头戴式显示器可以在第一会话间隔期间向主机发送第一请求，以从使用第一通信协议的第一链路切换到使用第二通信协议的第二链路。第一请求可以包括第一链路的至少一个特征。头戴式显示器可从主机接收对第一请求的第一响应，以执行从第一链路到第二链路的切换。第一响应可以指示唤醒时间和执行切换的第二会话间隔。头戴式显示器可在第二个会话间隔和唤醒时间后从第一个链路切换到第二个链路。
专利描述的设备可以压缩视频帧的多个片段中的第一片段以获得压缩后的第一片段的大小。所述设备可以根据压缩后的第一片段的大小来估计压缩后的视频帧的大小。所述设备可以生成发送请求（RTS）以保留传输信道，传输持续时间与压缩后的视频帧的大小相对应。设备可以向一个或多个其他设备广播RTS。
12. 《Facebook Patent | Eye tracking system（眼动追踪系统）》
专利描述了一种眼动追踪系统。示例性眼动追踪光学组件包括用于照明眼睛的光源、第一衍射型偏振分束器（DT-PBS）和第二DT-PBS，其中第一DT-PBS配置为基于偏振将来自第二DT-PBS的第一部分光定向到眼动追踪检测器。
13. 《Facebook Patent | Illumination system（照明系统）》
专利描述了一种眼照明系统。示例性光学组件包括显示器、用于照明显示器的光源和第一衍射型偏振分束器（DT-PBS），第一衍射型偏振分束器（DT-PBS）配置为引导来自第一导光器的光，其中第一DT-PBS是偏振敏感型，并配置为基于偏振进行引导第一部分光朝向显示器。
专利描述了一种表面浮雕结构和用于制造所述表面浮雕结构的技术。表面浮雕结构包括衬底、衬底上的多个脊以及两个相邻脊之间的多个凹槽。多个脊相对于衬底倾斜，并且包括折射率至少为2.3的材料。多个凹槽底部的衬底区域包括浓度至少为10.sup.10/cm.sup.3的氢或氮中的至少一种。
专利描述了与脉冲历史效应相关的技术。结合考虑脉冲历史效应，确定要传输到脉冲激光器的第一电流脉冲和第二电流脉冲之间的时间量。基于这样的时间量，确定是否将porch脉冲预加到第二电流脉冲。当porch脉冲将预加到第二电流脉冲时，基于时间量计算porch脉冲的幅度和持续时间。所述porch脉冲在紧接着所述第二电流脉冲之后被传输到所述脉冲激光器，其中所述porch脉冲对所述脉冲激光器预充电，以基于所述第二电流脉冲发射光脉冲。
16. 《Microsoft Patent | Connecting Spatial Anchors For Augmented Reality（连接增强现实空间锚）》
专利描述的计算设备配置成通过摄像头捕捉成像第一物理世界位置的第一图像数据；根据第一图像数据创建第一物理世界位置的第一空间表示；接收定义第一虚拟空间锚定点的姿态的用户输入；追踪用户移动到第二物理世界位置；捕获成像第二物理世界位置的第二图像数据；接收定义第二虚拟空间锚定点的姿态的用户输入；发送到远程计算设备；表示第一空间表示、第一空间锚定点的姿态、第二空间表示、第二空间锚定点的姿态，以及第一和第二空间锚定点之间的位置关系数据。
17. 《Microsoft Patent | Shared Augmented Reality Game Within A Shared Coordinate Space（在共享坐标空间内共享增强现实游戏）》
专利描述了一种在共享坐标空间内共享AR游戏的系统和方法。一旦创建了共享的坐标空间，AR游戏可以提供第一种模式。在这种模式中，用户根据预先建立的游戏规则进行游戏操作，并产生后果。AR游戏可以提供第二种模式（沙盒模式）。在这种模式中，用户将进行非破坏性的游玩操作，不会产生后果。专利进一步描述了在AR会话中使用地理位置信息的系统和方法，其中用户可以发起虚拟动作，使得相应的虚拟动作显示在与另一用户的用户游戏设备中的虚拟环境中。
所述方法包括：在沉浸式环境中显示多个视频对象；经由第一输入检测第一视频对象已被虚拟地定位在第二视频对象之上；响应于检测到第一视频对象已经虚拟地定位在第二视频对象上，生成包括第一视频对象和第二视频对象的组视频对象，其中，所述组视频对象包括用于与所述组视频对象交互的手柄接口元素和表示所述第一视频对象和所述第二视频对象的可选指示符；在沉浸式环境中显示组视频对象以及手柄接口元素和可选指示符，以及一个或多个剩余视频对象，其中组视频对象替换沉浸式环境中的第一视频对象和第二视频对象；以及，响应于检测可选择指示符的选择，显示用于与组视频对象交互的用户界面。
19. 《Intel Patent | Optimizing Head Mounted Displays For Augmented Reality（为增强现实优化头显）》
许多增强现实系统提供了“透视性”透明显示器或半透明显示器，而许多虚拟现实系统则采用不透明的封闭屏幕。实际上，消除用户对现实世界的感知，这可能是一些成功虚拟现实体验的组成部分。因此，专门为虚拟现实体验设计的头显可能难以用于占领增强现实市场。对于专利描述的实施例，其有助于将虚拟现实设备用于增强现实用例。特别地，通过预测用户头部运动，实施例可以促进渲染场景更好地匹配用户预期。在一些实施例中，系统可以使用过程映射方法来生成环境的虚拟模型。然后，系统可以使用所述模型来补充预期渲染。
20. 《Intel Patent | Predictive Viewport Renderer And Foveated Color Compressor（预测性视口渲染器和注视点颜色压缩器）》
专利描述的图形设备的实施例可以包括：用于识别聚焦区域的聚焦标识符；以及根据所识别出的聚焦区域来选择性地压缩颜色数据的颜色压缩器。图形设备的另一实施例可以包括：用于检测真实对象运动的运动检测器；用于预测真实对象运动的运动预测器；以及用于根据预测运动来放置虚拟对象的对象放置器。图形设备的另一实施例可以包括：将帧划分为视口的帧划分器；对视口进行优先级排序的视口优先化器；按照视口优先级来依次渲染视口的渲染器；以及用于发送一个完整渲染视口的视点发送器。
21. 《Nvidia Patent | Highlight determination using one or more neural networks（使用一个或多个神经网络突出显示确定）》
专利描述了用于选择内容片段的装置、系统和技术。在至少一个实施例中，一个或多个神经网络用于至少部分地基于在一个或多个视频片段呈现期间，一个或多个观众的一个或多个情绪指示，从一个或多个视频文件中选择一个或多个视频片段。
在各种示例中，可将车辆的至少部分控制转移到远离车辆的控制系统。可以从车辆的传感器接收传感器数据，并且可以对传感器数据进行编码以生成编码的传感器数据。编码后的传感器数据可传输至控制系统，以便在控制系统的虚拟现实头显中显示。控制数据可由车辆和控制系统接收，而控制数据可代表来自控制系统的控制输入，并且可根据控制输入引起车辆驱动部件的驱动。
在各种示例中，可将车辆的至少部分控制转移到远离车辆的控制系统。可以从车辆的传感器接收传感器数据，并且可以对传感器数据进行编码以生成编码的传感器数据。编码后的传感器数据可传输至控制系统，以便在控制系统的虚拟现实头显中显示。控制数据可由车辆和控制系统接收，而控制数据可代表来自控制系统的控制输入，并且可根据控制输入引起车辆驱动部件的驱动。
24. 《Sony Patent | Signal processing apparatus and method, and program（信号处理设备和方法以及程序）》
专利描述的信号处理设备基于指示音频对象的信号是否为静音信号的音频对象静音信息，执行音频对象的对象信号的解码处理或呈现处理中的至少一个。专利描述的技术可应用于信号处理设备。
在一个实施例中，播放增强现实（AR）计算机模拟的空间由多个camera映射。AR游戏玩家可以在空间中选择一个位置，而AR玩家希望从所述位置查看空间，包括他自己。使用空间的映射生成合成视频，就像从位于玩家选择的位置的camera生成一样。
26. 《Sony Patent | Simulating real-life social dynamics in a large group video chat（在大型群组视频聊天中模拟现实社交动态）》
视频聊天系统通过提供屏幕映射来模拟现实生活中的社交动态，所述映射显示了代表聊天中可能有大量人群的图标，同时允许较小的用户组在观看视频和聆听来自较小用户组成员的音频时进行对话。用户可以通过移动映射上的图标在群组之间移动，因为在现实生活中，人们可能会在一个大房间里走动。
27. 《Sony Patent | Light-emitting element, display device, and electronic equipment（发光元件、显示设备和电子设备）》
专利描述的发光元件包括阳极电极部分，阳极电极部分具有沿有机EL像素的外围边缘部分形成的凸出形状的侧壁部分，配置成覆盖所述阳极电极部分的外边缘部分的绝缘膜层，以便以预定膜厚度覆盖所述有机EL像素的发光单元侧上的所述侧壁部分的侧壁，层叠以覆盖绝缘膜层和阳极电极部分的上表面的有机EL层，以及层叠在有机EL层的上表面上的阴极电极部分。
28. 《Sony Patent | Semiconductor apparatus, display apparatus, and electronic equipment（半导体设备、显示设备和电子设备）》
专利描述了一种包括分层结构的半导体装置。在一个示例中，具有发光元件的第一基板和在外围上具有遮光构件的第二基板彼此层叠。所述分层结构包括第一树脂，第一树脂包括在像素区域中密封第一基板和第二基板之间的部分的光固化树脂。第二树脂在边缘处的遮光区域中密封第一基板和第二基板之间的部分。突出结构布置在像素区域和遮光区域之间的边界区域中的第一基板和第二基板之间，并且包括透射光的透明或半透明材料。
29. 《Sony Patent | Image processing device and image processing method（图像处理设备和图像处理方法）》
运动检测部分检测在头戴式显示器显示的广角图像中是否超过允许极限的运动。视场限制处理部分在广角图像中检测到超过允许限制的运动的情况下，限制用于观察广角图像的视场。图像提供部分为头戴式显示器提供视场受到限制的广角图像。
专利描述的信息处理设备包括显示控制单元，显示控制单元在第一状态下使用第一显示参数来控制显示器，并致使由显示器显示的虚拟对象被从显示器的第一用户观看的至少一个真实对象隐藏；显示控制单元同时可以在第二状态中使用与第一显示参数不同的第二显示参数来显示虚拟对象，并致使虚拟对象被真实对象隐藏的程度大于从第一用户观看时在第一状态中隐藏的程度。
31. 《Sony Patent | Dynamic vision sensor for visual audio processing（用于视听处理的动态视觉传感器）》
专利描述了用于视听处理的动态视觉传感器。为了在讲话过程中追踪某些困难的面部特征，如嘴角和牙齿，摄像头传感器系统生成RGB/IR图像。系统同时可以使用事件驱动传感器（EDS）发出的光强变化信号以及语音分析。
32. 《Sony Patent | Point cloud global tetris packing（点云全球tetris打包）》
专利描述了一种将3D点云数据映射到2D曲面，以进一步高效地进行时间编码的方法。点云全球tetris打包利用3D曲面patch表示点云，并将3D patch曲面数据临时一致地全局映射到2D画布图像中。
专利描述的信息处理设备包括：运动历史获取部分，其基于绝对坐标获取注视显示区域的第一用户的注视点的运动历史，其中绝对坐标在显示区域中显示的三维空间中；以及配置成控制显示单元的显示控制器，所述显示单元将显示区域显示为向第二用户可视化注视点的移动历史。这允许第一用户的注视点与第二用户共享。
专利描述的图像显示装置包括：发射图像显示光的光学引擎；以及将图像显示光引导至眼睛的导光光学系统。在所述图像显示装置中，所述导光光学系统包括：用于调节图像显示光的光调节单元；以及至少一个导光板，其致使调整后的图像显示光在至少一个导光板中行进，并将图像显示光引导至眼睛。所述至少一个导光板包括：使调整后的图像显示光进入所述导光板的入口部分；以及使在导光板中行进的图像显示光离开导光板并到达眼睛的出口部分。
camera shell可以仅包括camera的控制器和镜头，而不包括成像器，并且可以由佩戴虚拟现实头显的用户进行操作。camera shell被成像，shell的图像与虚拟camera视图端口一起显示在头显。用户可以操纵控件，shell发送信号以响应头显，头显在视图端口中呈现一幅虚拟图像，就像用真实camera拍摄的一样。
36. 《Sony Patent | Highly interactive display environment for gaming（用于游戏的高度交互式显示环境）》
一种组件包括可移动激光投影仪，所述可移动激光投影仪配置成投射图像，并且充当映射设备，例如配置成生成表示空间的三维映射的数据结构的激光雷达设备。头戴式装置包括摄像头，用于产生表示佩戴者注视方向的信号。激光投影仪根据信号移动，以使用映射设备生成的数据结构在空间中投影图像。
专利描述的信息处理装置包括：获取单元，其配置成获取用户的身体信息；以及输出控制单元。当显示单元显示虚拟现实内容时，输出控制单元产生指示用户与第二真实空间的边界区域之间的位置关系的标志，其中用户可以在用户所在的第一真实空间中运动，并基于用户的身体信息确定的边界区域，然后将与叠加在内容上的标志一起显示。
38. 《Sony Patent | Virtual Reality Presentation Of Real World Space（现实世界空间的虚拟现实呈现）》
对于专利描述的方法和系统，其主要是通过头显设备向远程用户呈现现实世界空间的虚拟现实体验。一种方法包括，发送获取现实世界空间的VR体验的请求，并识别由用户做出的座位选择。所述方法包括，将座位选择映射至真实世界捕获系统的操作，用于在对应座位位置捕获视频和音频，并接收真实世界捕获系统的真实世界坐标。另外，所述方法包括访问用户的用户文档，并接收由现实世界捕获系统捕获的现实世界空间视频流。
