微软AR/VR专利提出基于神经辐射模型的虚拟姿态渲染
基于神经辐射模型的虚拟姿态渲染
（映维网Nweon 2024年08月09日）对于VR头显会用虚拟内容取代用户对现实世界对象的感知。如图1所示，由于用户无法看到现实世界对象，所以在参与VR体验时，用户可能很难与现实世界的对象进行交互。为了解决这个问题，相关物品可以使用特定的虚拟模型来表示。这种虚拟模型在虚拟环境中与真实物品相对于用户的位置相同，并可以作为其在虚拟环境中的虚拟表示。然而，你依然很难与真实物品进行交互，除非虚拟表示具有与真实物品非常相似的外观和姿势。另外，生成一个与对应现实世界对象的外观紧密匹配的虚拟对象模型通常非常困难和耗时。
微软在一份专利申请中提出，可以利用神经辐射模型来渲染具有与相应现实世界对象真实姿态一致的虚拟姿态的虚拟对象。在一个实施例中，捕获真实世界对象的数字图像并用于渲染相应虚拟对象的视图。至少部分地基于由神经辐射模型编码的真实世界对象的3D空间数据。在渲染视图中，虚拟对象具有与真实世界对象的图像姿态一致的虚拟姿态。
然后，虚拟对象视图可以作为虚拟环境的一部分显示，使得虚拟对象能够在VR体验中作为真实对象的逼真表示。
神经辐射模型来源于先前捕获的真实世界对象的多个图像。在一个示例中，真实世界对象是一个单一的、特定的真实世界对象。例如，神经辐射模型是为用户的特定键盘生成，而不是为一般键盘或特定型号的所有键盘生成。
......（全文 3184 字，剩余 2649 字）
