2021年04月23日美国专利局新申请AR/VR专利摘选
文章相关引用及参考:映维网
一共更新了28篇专利。
(映维网 2021年04月23日)近期美国专利及商标局公布了一批全新的AR/VR专利,以下是映维网的整理(详情请点击专利标题),一共28篇。更多专利披露请访问映维网专利板块https://patent.nweon.com/进行检索,你同时可以加入映维网AR/VR专利交流微信群(详见文末)。
1. 《Magic Leap Patent | Calibration of augmented reality device(增强现实设备的校准)》
专利描述的设备使用第一传感器和第二传感器捕获数据。设备保持包括平移参数和旋转参数的校准profile,以建模第一传感器和第二传感器之间的空间关系。专利描述的技术包括在第一时间确定与校准profile相关联的校准水平。专利描述的技术包括基于校准水平确定执行校准过程。专利描述的技术包括,通过生成经校准的平移参数和经校准的旋转参数中的一个或两个来在第一时间执行校准过程,并且用经校准的平移参数和经校准的旋转参数中的一个或两个来替换平移参数和旋转参数中的一个或两个。
专利描述了用于在可穿戴设备呈现虚拟内容的系统和方法。在一个实施例中,根据与重投影误差相关联的减轻重量来最小化总误差以确定可穿戴设备的状态。通过可穿戴设备的显示器呈现反映确定状态的视图。在一个实施例中,可穿戴设备基于经由传感器接收的图像数据和第一IMU和第二IMU接收的惯性数据来计算第一预积分项和第二预积分项。可穿戴设备基于第一和第二预积分项估计设备的位置,并且基于设备的位置呈现虚拟内容。
第一应用程序实现第一rigging控制协议,它可以提供与请求来自虚拟角色的rigging行为相关联的输入。输入可以转换为与第二rigging控制协议兼容。一个或多个控制系统可以根据输入进行评估,以确定输出,并提供来自虚拟角色rigging的请求行为。一个或多个控制系统可以根据第二rigging控制协议来定义。输出可以转换为与第一rigging控制协议兼容,并提供给第一应用程序,以根据所请求的行为操作虚拟角色。
4. 《Magic Leap Patent | Systems and methods for augmented reality(增强现实系统和方法)》
专利描述了用于向用户呈现虚拟现实和增强现实体验的配置。增强现实显示系统包括容纳电磁场发射器的手持部件、发射已知磁场的电磁场发射器、耦合到一个或多个电磁传感器的头戴式部件。电磁传感器检测容电磁场发射器发射的磁场。控制组件接收磁场数据,并从所述头戴式部件接收传感器数据,其中所述控制组件至少部分地基于磁场数据和传感器数据来确定手势。
5. 《Magic Leap Patent | Visual Tracking Of Peripheral Devices(外设的视觉追踪)》
专利描述了用于相对于可穿戴设备定位手持式设备的技术。至少一个安装到手持式设备的传感器可以获取说明手持式设备相对于世界移动的数据。安装到手持式设备或可穿戴设备的成像组件可以捕获包含多个基准的基准图像。系统确定图像中包含的基准数量。根据基准的数量,图像和手持式数据来更新手持式设备相对于可穿戴设备的位置和方向。
6. 《Magic Leap Patent | Attenuation of light transmission artifacts in wearable displays(可穿戴显示器中的透光伪影衰减)》
专利描述的可穿戴显示系统包括具有世界侧和与用户侧的目镜堆栈。可穿戴显示系统同时包括角度选择膜。所述角度选择膜包括设置在一对线性偏振器之间的偏振调整膜。所述线性偏振器和偏振调整膜显著降低以大入射角入射在角选择膜的可见光透射。
7. 《Magic Leap Patent | Beam Angle Sensor In Virtual/Augmented Reality System(虚拟现实/增强现实系统的光束角度传感器)》
专利描述的虚拟图像生成系统包括:配置为生成准直光束的投影子系统;配置为响应准直光束发射光线并向最终用户显示图像帧像素的显示器的显示器。所述虚拟图像生成系统同时包括:配置为感测光线发射角度的传感组件;配置为生成定义像素位置的图像数据,并根据像素的定义位置和感测到的参数控制光束发射角度的控制子系统。
8. 《Magic Leap Patent | Projector with spatial light modulation(空间光调制投影仪)》
专利描述了一种基于飞行时间的深度检测系统,其包括配置成顺序发射多个互补照明图案的投影仪。深度检测系统的传感器配置成捕捉来自从传感器视场内的对象反射的照明图案光。传感器捕获的数据可用于在返回传感器之前过滤由多个表面反射的光引起的错误读数。
9. 《Apple Patent | Hierarchical Point Cloud Compression(分层点云压缩)》
专利描述的系统包括:配置为压缩点云的属性信息的编码器,和/或配置为解压缩点云的压缩属性信息的解码器。为了压缩属性信息,根据点的顺序来生成多个细节级别,并预测属性值。在将点分配给不同细节级别时,可以同时预测属性值。解码器根据细节级别遵循类似的预测过程。同时,可以确定属性校正值以校正预测的属性值,并且可以由解码器使用属性校正值来解压点云。
用户界面使得用户能够根据真实世界环境校准三维模型。可以利用设备的传感器来确定设备的位置和取向。设备环境的视频图像显示在设备显示屏上。所述设备在视频图像叠加来自虚拟现实模型。模型叠加的位置取决于设备的位置和取向。根据用户输入,设备调整相对于视频图像的叠加表示。
11. 《Apple Patent | Point cloud compression(点云压缩)》
专利描述的系统包括:配置为压缩点云的属性信息的编码器,和/或配置为解压缩点云的压缩属性信息的解码器。至少一个点的属性值包括在压缩属性信息文件中,用于校正预测属性值的属性校正值包括在压缩属性信息文件中。至少部分地根据相邻点的属性值和正在为其预测属性值的特定点与相邻点之间的距离来预测属性值。在压缩之前,将预测的属性值与点云的属性值进行比较,以确定属性校正值。解码器遵循与编码器类似的预测处理,并且使用包括在压缩属性信息文件中的属性校正值来校正预测值。
12. 《Apple Patent | Error Concealment For A Head-Mountable Device(头戴式设备的错误隐藏)》
在各种实施例中,一种方法包括获得第一帧,所述第一帧具有与第一存储器分配相关联的第一分辨率。在一些实施例中,所述方法包括将第一帧从第一分辨率下转换为低于第一帧分辨率的第二分辨率,从而产生参考帧。在一些实施例中,第二分辨率与第二存储器分配相关联。在一些实施例中,所述方法包括将参考帧存储在非暂时性存储器中。在一些实施例中,所述方法包括获取以第一分辨率为特征的第二帧。在一些实施例中,所述方法包括根据存储在非暂时性存储器中的参考帧,对第二帧执行纠错操作。
第一对象的至少一部分具有与第二对象的至少一部分不同的温度。所述方法包括提供所述第二对象的一部分的至少一个热图像,在所述至少一个热图像的至少一部分中确定指示温度的特定值,或范围或温度变化的特定值或范围的图案,以及使用所确定的图案来检测所述第一对象的所述至少一部分和所述第二对象的所述至少一部分之间的接触。
14. 《Facebook Patent | Distributed sensor module for tracking(用于追踪的分布式传感器模块)》
在一个实施例中,用于追踪的方法包括使用第一摄像头捕获环境的第一帧,在第一帧中识别与第一特征相对应的第一patch ,访问第一摄像头的第一局部存储器,存储器存储由第一摄像头捕获的一个或多个先前帧中标识的参考patch,并且确定存储在第一局部存储器中的参考patch中没有一个对应于第一特征。所述方法同时包括通过连接第二摄像头和第一摄像头的数据链路,以从第二摄像头接收对应于第一特征的参考patch。参考patch在由第二摄像头捕获的前一帧中识别。然后,所述方法可以确定第一patch和参考patch之间的对应数据,并基于确定的对应数据追踪环境中的第一特征。
15. 《Facebook Patent | Liquid crystal mixtures for pitch variable optical elements(用于变螺距光学元件的液晶混合物)》
专利描述了一种用于变螺距光学元件的液晶混合物。所述液晶混合物包括主液晶和在主液晶中溶解为客体的一个或多个液晶二聚体。主体液晶和一个或多个液晶二聚体在向列相位中具有相反符号的各自介电各向异性。液晶混合物的净介电各向异性基本上为中性。
16. 《Facebook Patent | Optical device including faraday rotator(包括法拉第旋转器的光学组件)》
专利描述的光学组件包括第一偏振敏感反射器、第二偏振敏感反射器和法拉第旋转器。第一偏振敏感反射器定位为发射具有第一偏振的光,并且反射具有与第一偏振正交的第二偏振的光。第二偏振敏感反射器定位为反射具有不同于第一偏振和第二偏振的第三偏振的光,并且发射具有正交于第三偏振的第四偏振的光。法拉第旋转器设置在第一偏振敏感反射器和第二偏振敏感反射器之间,从而允许法拉第旋转器将:具有第一偏振的光转换为具有第三偏振的光;将具有第三偏振的光转换为具有第二偏振的光;以及将具有第二偏振的光转换为具有第四偏振的光。
移动操作系统和智能手机应用程序从智能手机硬件中剥离出来,作为虚拟智能手机实例存储在主机服务器上。虚拟智能手机实例仍然可以通过电话号码进行寻址。专用便携式接口设备(如智能眼镜设备、智能手表或经适配的智能手机设备)通过蜂窝或互联网连接远程访问虚拟智能手机实例,并利用智能手机应用程序部署智能手机服务,包括通过电话号码发信息和打电话。所述系统、设备和方法被扩展以包括蜂窝电信内容递送网络。
18. 《Google Patent | Machine learning inference on gravity aligned imagery(重力对齐图像的机器学习推理)》
专利描述的方法包括在处理器处从计算机设备的图像捕获组件获取第一图像,使用处理器和至少一个传感器检测与第一图像捕获相关联的计算设备的设备方向。基于设备方向和与计算设备相关联的跟踪堆栈,确定旋转第一图像的旋转角度。将第一图像旋转到旋转角度以生成第二图像。生成与第一图像和第二图像相关联的神经网络估计。
19. 《Google Patent | Determining structure and motion in images using neural networks(使用神经网络确定图像的结构和运动)》
专利描述的系统包括编码器神经网络、场景结构解码器神经网络和运动解码器神经网络。所述编码器神经网络配置为:接收第一图像和第二图像;并且处理所述第一图像和所述第二图像,以生成所述第一图像和所述第二图像的编码表示。场景结构解码器神经网络配置成处理编码表示,以生成表征第一图像描绘的场景结构的结构输出。所述运动解码器神经网络配置成处理所述编码表示,以生成表征所述第一图像和所述第二图像之间的运动的运动输出。
用于生成立体光场全景图的示例系统包括:用于接收多个同步图像的接收器;校准器和投影仪,其用于校准同步图像,不扭曲同步图像,并将未扭曲图像投影到球体,以生成非扭曲直线图像。所述系统同时包括视差估计器,用于估计未扭曲直线图像的相邻视图之间的视差,以确定未扭曲直线图像之间的光流。所述系统包括视图内插器,用于根据光流对未扭曲直线图像执行视图内插。所述系统同时包括光场全景生成器,利用同心视圆为来多个视角生成立体光场全景。
21. 《Intel Patent | Suggested Viewport Indication For Panoramic Video(全景视频的建议视口指示)》
生成建议的视口指示,并将其发送以用于全景视频。在一个示例中,一种方法包括:接收包括视口元数据的编码视频;解码视频;提取视口元数据;根据视口元数据生成解码视频的视口;以及缓冲所生成的视口并进行显示。
22. 《Intel Patent | Optimized display image rendering(优化显示图像渲染)》
在一个示例中,头戴式显示系统包括至少一个存储器;和至少一个执行指令的处理器。根据由加速计、至少一个摄像头或陀螺仪中的至少一个在第一时间点生成的传感器数据,处理器检测用户头部的第一位置和第一视点;确定与使图像呈现在显示器的时间相关延迟;基于延迟确定在第二时间点用户头部的预测位置和预测观看方向;根据用户头部的预测位置和预测的观看方向,在第二时间点之前渲染图像,并且致使显示器显示渲染图像。
23. 《Sony Patent | Navigation system and method(导航系统和方法)》
专利描述了一种用于生成用于导航环境的路径的系统。所述系统包括BVH生成单元,其可操作以生成BVH。所述生成单元包括表示环境中的一个或多个对象的多个边界体积。所述系统同时包括一种BVH分析单元,其用于从BVH识别关于环境的几何形状的信息。所述系统同时包括一种路径规划单元,其根据所识别的几何形状生成穿过环境的路径。
专利描述了一种用于估计3D映射和多个姿势的方法。所述方法包括基于2D图像序列的多个第一2D图像非递归地执行3D映射和多个姿势的各个姿势的初始化,以及基于递归地更新系列2D图像的多个第二2D图像的各个3D映射,递归地执行3D映射的顺序更新。
专利描述的控制装置接收关于用户手指运动的信息和关于用户手部形状的信息,根据接收到的手指运动信息生成指示用户手部姿势的第一姿势信息,根据接收到的户手部形状信息生成指示用户手部姿势的第二姿势信息,基于预定条件的准则将生成的第一姿势信息与生成的第二姿势信息组合,并且生成和输出指示用户手势的信息。
信息处理设备估计观看由显示设备显示的视频的用户可能感兴趣的感兴趣位置和/或感兴趣方向,感兴趣位置和感兴趣方向不是用户视线指向的位置。信息处理设备根据估计的结果改变要由显示设备显示的视频的内容。
专利描述的图像呈现装置,配置成向用户呈现虚拟空间图像。图像呈现装置接收在图像呈现期间获取的获取信息,和指示用户已经进入预定条件的通知。图像呈现装置通过机器学习来学习获取信息和通知内容之间的关系。机器学习的结果用于在向用户呈现虚拟空间图像期间的预定处理。
28. 《Sony Patent | Image display apparatus(图像显示装置)》
专利描述的图像显示设备包括:发光单元;要被照射的对象;和反射部分。发光单元沿预定轴发射图像光。将被照射的对象至少部分地围绕预定轴布置。反射部分相对于预定轴朝向发光单元布置,并且具有多个反射区域。所述多个反射区域将发射的图像光分为多个光束并将光束反射到要被照射的对象。