苹果专利分享Vision Pro捏合手势的识别和拒绝
捏合手势的识别和拒绝
(映维网Nweon 2024年10月15日)Apple Vision Pro的主要输入方式包括手势,所以手势识别非常重要。例如,在一份专利申请中,苹果就介绍捏合手势的识别和拒绝。
图1显示检测输入手势的技术的流程图。
流程图100从传感器数据102开始。传感器数据可以包括从用户的手或多只手捕获的图像数据和/或深度数据。传感器数据可以从电子设备的传感器捕获,例如头戴式设备的摄像头。
在一个实施例中,传感器数据102可应用于手部追踪网络104。手部追踪网络可以是经过训练以估计手或多只手的物理状态的网络。手部追踪网络104预测手部姿势106。
手部追踪网络104可以进一步配置为提供触碰数据。触碰数据可以包括关于对于给定的一帧或多帧,是否在手上的两个区域之间发生触碰的预测。例如,可以训练机器学习模型来预测拇指和食指是否接触。
......(全文 3832 字,剩余 3519 字)