微软演示Mise-Unseen眼动技术,实时改变VR视觉细节
以减少视场并缓解晕动症
(映维网 2019年10月23日)在创建全新的沉浸式环境并用以支持用户探索新空间方面,社区近来取得了多个显著的进步。对于微软来说,其研究人员同样在积极地扩展和提升空间计算世界。本周,他们将在美国新奥尔良举行的2019 ACM用户界面软件与技术研讨会中展示最新的成果。其中一个项目是Mise-Unseen,一种利用眼动跟踪功能来实时改变视觉细节的技术。
在“Mise-Unseen: Using Eye-Tracking to Hide Virtual Reality Scene Changes in Plain Sight”这个项目中,波茨坦大学博士生、时任微软研究院实习生Sebastian Marwecki,研究员Andy Wilson,Eyal Ofek,Mar Gonzalez Franco和Christian Holz开发了一种在用户注意力分散时应用虚拟环境变更的技术。他们将其称为Mise-Unseen。这一词组源自法文mise en scène,亦即电影拍摄中的“场面调度”。在电影和戏剧中,导演控制着观众的视线,所以你看到的一般是导演希望你看到的内容。
Mise-Unseen利用眼动追踪技术来隐藏用户视场内发生的改动。具体方法是在用户的注意力转移到其他位置时应用相应的更改。在这个示例中,当用户将注意力集中在猫咪时,系统将会改变周遭的虚拟场景。
但在VR中,用户可以控制自己的视线,所以你需要在外围视场范围内谨慎地进行场景更改。Mise-Unseen主要利用眼动追踪来识别用户的注意力,然后采用感知模型来建议不引起用户注意的环境变更位置。例如,当用户正在查看美术馆的其他地方时,不在注视点区域的绘画可以改变成更符合其艺术欣赏角度的作品。高级研究员Mar Gonzalez Franco表示:“这项(技术)主要基于注视点和注意力相关联的概念;你注视的地方将引起你的注意,这意味着你不会注意其他位置。”
相关论文:Mise-Unseen: Using Eye-Tracking to Hide Virtual Reality Scene Changes in Plain Sight
这项技术的另一个用例是评估用户意图。在开玩游戏时,用户可能需要解决一个谜题才能获得继续前进的密码。但有时候,用户可以在没有解开谜题的情况下猜出密码。借助这项技术,如果玩家在输入密码之前没有注意其他区域,则可以实时更改密码和谜题,这样玩家就需要返回并尝试解开谜题。
Mise-Unseen的其他用例包括对无缘触觉的支持,个性化内容(如上面的绘画示例)和适应性困难。这项技术令人感到兴奋的另一点是,它能够以减少视场并缓解晕动症的影响。最后,这项技术能够帮助节省宝贵的资源,支持系统更合理地分散计算能力。