研究：XR场景下非视觉引导优于视觉提示，或为受限显示交互提供新思路
为受限显示交互提供新思路
（映维网Nweon 2026年09月07日）美国加州大学圣塔芭芭拉分校研究团队日前发表的一项实验研究表明，在模拟假体视觉这类极端受限的显示条件下，听觉和触觉引导在物体搜索任务中的表现显著优于传统视觉引导。这一成果对扩展现实环境下的注意力引导设计具有参考价值。
在虚拟现实和增强现实应用中，引导用户寻找视野外的目标是一个经典问题。常见的做法是在当前视野中叠加视觉指示器，例如箭头、光点或边缘闪烁提示。所述方法在显示视野充足时行之有效，但当头戴式显示器本身视场受限，或者视觉画面已被大量信息占据时，视觉引导的有效性就会打折扣。
视觉神经假体（如视网膜植入物）代表了一种极端情况。这类设备将摄像头输入转化为电刺激，为盲人恢复部分光感，但产生的视觉感知分辨率极低、视野狭窄（约30°×30°），用户必须不断转动头部才能搜索目标。在此类场景中，视觉引导线索需要与场景画面争夺本就有限的显示资源，其效果存疑。
研究团队招募了19名视力正常的参与者，在VR环境中模拟了两类假体视觉条件（10×10和20×20电极阵列，前者分辨率更粗、光幻视扩散更严重）。参与者需要在半圆形桌面场景中搜索指定物体，目标通常位于假体视野之外，必须转动头部才能找到。
四种引导条件被纳入对比：无引导、视觉引导（画面边缘闪烁光点）、听觉引导（立体声蜂鸣）和触觉引导（手柄振动）。所有引导线索编码完全相同的水平方向信息——只告诉目标在左还是在右、距离对准还有多远，但不提供目标高度信息，也不告知目标是什么。参与者仍需要利用模拟假体视觉来识别物体并判断高度。
实验数据显示，三种引导方式均显著改善了搜索表现。在20×20分辨率下，视觉、触觉和听觉引导分别将搜索时间缩短了24%、45%和42%；在更粗糙的10×10条件下，降幅分别为35%、50%和52%。
将听觉和触觉数据合并后，非视觉引导的整体搜索速度比视觉引导快约25%。在目标获取阶段——即目标首次进入视野所需的时间——听觉和触觉引导比视觉引导快11%至13%。
轨迹分析进一步揭示，三种引导方式都能帮助参与者以更直接的路径接近目标，多余的头部的旋转动作大幅减少。然而在目标进入视野后的识别阶段，听觉和触觉引导仍能持续提供帮助，而视觉引导的效果则不再显著。研究人员据此将搜索过程拆分为“获取”和“获取后识别”两个阶段，指出非视觉引导在两个阶段均有贡献，视觉引导的优势主要体现在第一阶段。
另一个值得注意的发现是，在10×10的低分辨率条件下，所有引导方式虽然不提供高度信息，却意外地改善了参与者的垂直定位精度，误差降低了45%至58%。研究团队推测，这是因为水平方向的不确定性被消除后，参与者得以将有限的视觉资源集中于垂直搜索。
研究对XR交互设计的启示在于：当用户的视觉通道已经承担了密集的识别和搜索任务时，继续向视觉层面叠加引导信息可能并非最优解。将方向信息以声音或振动方式呈现，反而能更高效地帮助用户完成搜索。
这一发现与近年来XR领域中对“视觉减负”的讨论相呼应。在工业AR维修、医疗手术导航、军事态势感知等场景中，操作者往往需要同时处理大量视觉数据，若能将部分指引功能转移到触觉背心或空间音频上，有望降低认知负荷、提升反应速度。
另外，研究结果表明“粗糙的引导可能已经足够”，亦即仅提供水平方向信息，用户便能自行解决垂直定位问题。这对XR引导系统的设计意味着，未必需要追求信息量最大化的全景式指引，提供“最小可行信号”或许更为务实。
相关论文：Cross-Modal Guidance for Out-of-View Object Search in SimulatedProsthetic Vision
研究团队指出，实验使用的是视力正常的受试者，而非真实假体使用者；引导线索在各模态间的物理参数未做完全匹配，所以结果应理解为对具体实现方式的比较，而非感官模态本身的优劣排序。后续研究计划测试在目标获取后动态调整或减弱引导的策略，并在更复杂的现实场景和真实用户群体中进一步验证。
