七鑫易维为HTC Vive 增加眼动追踪技术
本文相关引用及参考:roadtovr
aGlass眼动追踪开发套件附件将会在5月登陆中国市场,售价为人民币1500元
(映维网 2017年4月28日)七鑫易维是最新加入Vive X加速器计划的企业之一,这家公司正在为Vive头显推出了眼动追踪附件。产品使用了一系列的红外LED和近眼式摄像头来实时跟追踪玩家的眼睛,这为VR提供了大量潜在的优势。据映维网了解,七鑫易维将在5月向中国市场推出开发套件。
我(Ben Lang)今天在旧金山参观了Vive X加速器办公室,并有幸亲身体验了aGlass眼动追踪开发套件。这款设备十分紧凑,可轻易插入Vive的镜片上。aGlass会分别通过一个红外线LED环来照亮眼睛,而一个小型摄像头会记录眼睛运动并将数据发回计算机进行处理。产品通过隐藏在线缆固定器的Vive额外USB端口进行智能供电。
中央注视点渲染及更多
眼动追踪可提供一系列的用途,或许最重要的应用之一就是中央注视点渲染。这项技术会减少分布在外围视觉的分辨率,而专注于渲染视线中央的完整分辨率。这可以显着降低渲染高质量、高帧率VR场景所需的处理能力。对虚拟现实行业来说,基于眼动追踪的移动渲染在很大程度上被认为是一种必要的技术,通过减少在超高像素密度显示器上渲染所需的处理能力,头显将能够实现理想的视网膜分辨率。
aGlass开发者套件已经可以为Vive头显带来中央注视点渲染。七鑫易维表示,只要计算机配备了英伟达的GPU,他们的技术就可以兼容所有的应用,无需任何修改。该公司还希望将GPU使用范围扩展至AMD显卡。我目前的理解是,其他应用aGlass眼动追踪数据的功能应该是独立于GPU,但考虑到当前的渲染技术,移动渲染可能是一种特殊情况。
除了中央注视点渲染,眼动追踪可用于为虚拟化身的眼睛制作动画,模拟景深效果,以及作为VR应用程序中的有意识和无意识输入等等。
矫正镜片
除了眼动追踪之外,aGlass还为矫正镜片打开了大门,从而给眼镜用户带来了方便。今天高端VR头显缺乏可变的焦距控制,所以眼镜用户难以在头显内部使用眼镜,或者需要摘下眼镜(但影像更模糊)。aGlass的设计使其可轻松支持定制镜片。如果你不需要矫正镜片,这款设备的运作也完全没有问题。
aGlass开发套件上手体验
我今天在Vive X加速器位于旧金山的办公室里尝试了aGlass开发套件。
我经过了几次尝试才完成了校准过程。在我的经验中,这并不是罕见现象,同时说明了设计一款可以处理各种面部和眼睛结构的眼动追踪系统并不容易,更不用说存在眼睛问题的用户了。
在完成系统校准后(你需要注视屏幕中一系列的点,而这只需要数秒的时间),我尝试了应用中央注视点渲染的《VR Funhouse》demo(英伟达出品)。如果眼动追踪的速度和精度足够,中央注视点渲染的效果就会很好,用户甚至不会注意到系统应用了中央注视点渲染。
七鑫易维表示aGlass的时延为5ms,而在正确的渲染设置下,这已经是非常快的速度。我几乎没有注意到系统使用了中央注视点渲染,这非常棒。他们表示实现移动渲染的特定方法是“专有技术”,而效果比我曾经看过的其他方法要更好。对于其他团队的方法,外围视觉总是会有一种模糊的感觉,你很容易就会注意到这一点,而且感觉也很怪。
用于运行demo的特定笔记本电脑缺乏足够的性能,难以被称为“VR-Ready”。另外,当移动渲染被禁用时,由于计算机无法跟上渲染负载量,因此你很容易就会看到抖动。在启用移动渲染后,计算机可以一直维持必要的90FPS。
未来的优化
安装过程看起来很简单,不过目前的开发套件在Vive的镜片周围增加了一点重量,这稍微限制了下端的IPD设置。平均IPD通常在大约64毫米左右,但是安装了aGlass后,我只能将Vive IPD降到65mm。但该公司表示,消费者版本设备将会修复这一点。
对我来说,另一个问题是我需要调节Vive的镜头,留出一定的缺口。这样做意味着减少头显的视场,这当然不是最理想的情况。问题可能跟aGlass表圈上的眼动追踪摄像头的角度有关。该公司表示,他们希望通过增加系统的“最有效点”来提高校准的稳定性,从而可以更好地匹配不同的眼睛和面部结构。
aGlass开发套件上有两个软橡胶刮板,我感觉它们会轻轻地顶着我的眼角。这似乎是为了确保红外线不会干扰到Vive的头部传感器(位于两只眼睛之间)。不会痛,但有点不舒服,因为通常在佩戴头显的情况下,你都不会有任何东西顶住那个部位。七鑫易维表示,消费者版本将不再需要橡胶刮板。
发售日期
七鑫易维表示,aGlass眼动追踪开发套件附件将会在下月登陆中国市场,而据HTC Vive中国区总裁汪丛青介绍,产品的售价为人民币1500元。至于美国市场,产品预计在今年Q3季度发售。目前七鑫易维尚未透露消费者版本的发售时间。