微软研发非对称多模态图像融合技术提升混合现实环境感知
非对称多模态图像融合
（映维网Nweon 2025年06月30日）为了增强用户在各种环境中的感知，混合现实系统可以配置不同模式的摄像头。例如，配置了长波热成像摄像头的混合现实系统可以在烟雾、雾霾、雾和/或灰尘中提高能见度。同样，低照度成像摄像头可在环境光线低于人类视觉所需水平的黑暗环境中提高能见度。
尽管低光图像和热图像可以融合并向用户提供来自多个摄像头模态的可视化。然而，融合不同模态图像的传统技术面临着各种挑战。所以在一份专利申请中，微软就提出了一种相关的非对称多模态图像融合解决方案。
在一个实施例中，首选图像模式引入输入模式的非对称处理。可见光信息用作主要图像源，当可见光信号电平变得足够低时，热信息用作备用或辅助图像源。所述非对称融合技术可以在可见光摄像头信号变弱时，逐步用热信息丰富、替代或补充可见光图像数据。
例如，可包括将可见光和热图像分解成各自的高频和低频分量。输出或融合图像可以使用可见光图像的低频分量和通过结合可见光和热图像的高频分量获得的高频信息来构建。将可见光和热图像的高频分量组合以获得用于输出或融合图像的高频信息，可以基于与可见光图像相关联的信号电平测量。
......（全文 2387 字，剩余 1925 字）
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限
