微软专利探索提升HoloLens 2协作远程用户的沉浸式体验
支持远程混合现实设备用户结合3D表面重建（SR）网格数据和实时视频数据来查看本地MR设备环境
（映维网Nweon 2023年09月12日）诸如微软HoloLens 2这样的混合现实可以为远程用户提供沉浸式第一视角，并通过语音和图像叠加等方式来提供协作支持。这种系统可用于医疗，教学和维修维护等场景。随着技术的发展，有必要进一步提高远程用户的沉浸感，营造一种允许远程用户仿佛置身于本地环境中的氛围，从而进一步提高协作体验。
在名为”Mixed reality environment display using surface reconstruction mesh and live video overlay“的专利申请中，微软介绍了一种用于支持远程混合现实设备用户结合3D表面重建（SR）网格数据和实时视频数据来查看本地MR设备环境的方法。远程用户同时能够向本地MR设备的用户提供反馈，包括基于音频的反馈。
在一个实施例中，可以结合使用SR网格数据和摄影测量技术来生成与本地环境密切匹配的3D空间，然后将本地环境的实时视频馈电叠加在生成的3D空间。这种混合虚拟现实体验可以允许远程用户完全沉浸在相同的环境之中。
另外，实时视频馈送提供3D数据，使得实时视频馈送能够紧密贴合虚拟环境的3D SR网格，而不仅仅是显示二维视频。
......（全文 3556 字，剩余 3131 字）
