腕带传感器让VR“摸”到桌面：TapID尝试把触摸交互带入虚拟现实

编辑：广东客 | 分类：论文 | 2026年11月9日

TapID尝试把触摸交互带入虚拟现实

（映维网Nweon 2026年11月09日）在虚拟现实里打字、浏览网页或编辑文档，长期依赖手柄或空中手势并不轻松。苏黎世联邦理工学院计算机科学系的研究人员提出一种名为TapID的腕戴式设备，试图把手机、平板上常见的表面触摸交互带入VR：用户佩戴内置惯性传感器的腕带，在桌面等被动表面上敲击，系统检测敲击事件并识别敲击手指，再结合VR头显追踪到的手部姿态触发输入。

腕带传感器让VR“摸”到桌面：TapID尝试把触摸交互带入虚拟现实

团队指出，当前VR系统多依赖摄像头捕捉手柄输入或自由手空中交互。对于需要长时间持续操作的生产力场景，空中输入容易疲劳，精度和效率也受限。TapID的思路是把直接交互转移到桌面、身体等被动表面上，让手臂在交互间隙有支撑，同时借助表面提供触觉反馈和空间参照。

TapID的核心是一对嵌入柔性硅胶腕带的加速度计，分别位于腕部两侧。敲击发生时，机械振动会通过手部传播，不同手指产生的振动传播路径略有差异。系统采集这些信号，用机器学习管道判断是否发生敲击，并识别是哪根手指敲击。

与此同时，VR头显负责追踪手部和指尖的3D位置。TapID检测到敲击并识别手指后，系统检索对应指尖位置；如果指尖靠近桌面或用户身体等有效表面，就在相应位置触发输入事件；如果不在表面附近，则将事件视为无意输入并拒绝。实验中30毫米被用作可靠检测和拒绝的最大表面距离。

在信号处理上，TapID通过变化率分数检测敲击，并设置200毫秒退避期，避免一次敲击触发多个事件；手指识别使用一维卷积神经网络，输入为敲击事件周围128个样本的窗口，约95毫秒。从物理敲击到Unity中显示效果的总延迟约为130毫秒。

研究人员在坐姿桌面场景中开展了18名参与者的技术评估。结果显示，TapID的敲击事件检测F1分数为0.997。手指识别方面，跨会话F1分数为0.93；跨用户无精化时为0.87，每指使用10次敲击进行精化后升至0.91。团队同时比较了类似Fitbit的双传感器板载配置和仅单个板载加速度计的智能手表配置，这些配置在敲击检测上表现相当，但手指识别整体低于TapID配置。

拇指和小指的识别最可靠，中指与无名指之间的区分更具挑战性；使用少量用户个人数据精化后，各手指识别表现有所改善。

研究人员认为，TapID的意义在于补充现有VR头显的手部追踪能力，补上快速表面接触检测和手指区分这两个环节，使触摸输入有可能迁移到空间VR界面中，尤其面向需要持续、精确、非疲劳输入的生产力场景。

当然，所述方法当前存在限制：实现可靠精度仍需一定用户特定精化；目前只检测单指敲击事件，尚未评估多点触控；系统假设使用桌面或用户身体作为被动输入表面，尚未定量评估办公桌以外的表面和不同敲击力度；评估在固定坐姿场景中完成，未考虑移动中的身体运动；产生输入的手必须处于头显追踪范围内，用户目前需要看着交互内容，尚不支持无眼操作；推理管道依赖中等性能GPU，暂不适合嵌入式处理。