Facebook展示反向透视VR头显,允许看到头显用户的眼部表情

PICO 4 Ultra

查看引用/信息源请点击:映维网

实现社交共在感是Facebook Reality Labs Research的目标

映维网 2021年08月03日)随着AR和VR设备开始成为我们工作和娱乐方式的重要组成一环,我们如何在真实世界和虚拟世界之间保持无缝的社交联系呢?换句话说,AR/VR体验之外和之内的人们如何在一个共享空间中保持“社交共在感”呢?

相关论文Reverse Pass-Through VR

Facebook Reality Labs Research(FRL)在在SIGGRAPH大会就VR头显的共在感提出了一个新概念:“反向透视虚拟现实(Reverse Passthrough VR)”。简单来说,反向透视这个实验性研究演示允许外界看到头显用户的眼睛。这与Quest如今通过PasstThrough+和实验性PasstThrough API可以实现的功能形成对比,后者是利用外置摄像头帮助头显用户轻松看到周遭物理环境。

Facebook展示反向透视VR头显,允许看到头显用户的眼部表情

多年来,Oculus在实现透视功能方面已经取得了长足的进步。这项实验性的反向透视研究由研究科学松田内森(Nathan Matsuda)提出。有一次,他在办公室里体验启用Passthrough功能的Quest头显,并思考如何提高混合现实在社交和职业环境中无缝性。利用透视,他可以清楚地看到周围的同事,但对方却看不到自己的表情变化。所以每次在对话时,别人都会说无法进行眼神交流有多么奇怪。所以,松田提出了一个问题:如果能看到对方的眼睛会如何?这会给社交带来什么变化吗?

当松田在2019年第一次向FRL首席科学家迈克尔·亚伯拉什(Michael Abrash)演示反向透视时,亚伯拉什对这项研究的实用性并不信服。在演示中,松田佩戴了一个前端配备了显示屏的定制Rift S头显。然后,游戏引擎可以粗略渲染松田的浮动面容3D图像,并利用眼动追踪摄像头发出的信号来重新生成眼睛注视。

亚伯拉什回忆道:“我的第一反应是,这是一个愚蠢的想法,最多只能算是新奇玩意。但我不会告诉研究人员应该怎么做,因为如果没有尝试新概念的自由,你就无法获得创新。这是好事,因为现在这显然是一个非常具有前景的独特想法。”

Facebook展示反向透视VR头显,允许看到头显用户的眼部表情

在首次演示过去两年后,3D显示技术和研究原型有了显著的进展,拥有了专门构建的光学、电子、软件和一系列支持技术,能够帮助设备捕获和绘制逼真的3D人脸。这一进展十分具有前景,但研究依然只是实验性质:存在一系列的线缆,远不是一体式设备,而且眼睛和面容渲染不够逼真。然而,这是一个以FRL核心的自由探索理念为精神设计的研究原型。尽管研究离实际的产品路线图尚十分遥远,但它确实提供了关于反向透视如何应用到未来协作空间的一瞥。

左边:没有启用外置显示器的头显原型;中间:采用2D显示器的头显原型;右边:采用FRL团队的3D显示器的头显原型

......(全文 2401 字,剩余 1527 字)

wx_mp

请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/88106
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  AR/VR开发者  |  映维粉丝读者
XR Research Wechat Group/微信群

您可能还喜欢...

资讯