OC6汇总：Quest手部追踪、串流Rift、Half Dome 3……
（映维网 2019年09月26日）在今天举行的Oculus Connect 6大会中，Facebook公布了一系列AR/VR创新、发展成果以及Oculus Quest最新更新和计划。以下是映维网带来的首日内容汇总（蓝色标题是可点击，了解更多信息）。
延伸阅读：OC6卡马克：悼念GearVR，Quest将无线支持PC VR，Rift S表现优于Rift，5G+VR没看头
1. Oculus Quest
在今天举行的OC6大会中，Facebook正式展示了手部追踪技术，而手部追踪计划于2020年初作为面向消费者的实验功能和面向开发人员的SDK登陆Quest。这意味着，VR开发者从明年年初开始就可以构建和发行相关的体验，允许用户无需利用控制器或其他外设即可在VR中利用自己的双手。
这原本是Facebook Reality Labs的实验项目，但通过与产品和设计团队的紧密合作，手部追踪终于成为现实，并为VR输入带来了全新的范式。据介绍，Facebook的计算机视觉团队开发了一种全新的方法。利用深度学习，只需通过Quest搭载的单色摄像头即可理解手指位置，无需有源深度感知摄像头，额外的传感器或处理器。这项技术可以近似用户的手部形状，并创建一组3D点以准确表示你在VR中的手部和手指运动。
1.2 Oculus Quest前向兼容
Facebook表示他们已经在研发下一代Oculus Quest头显，但Facebook希望开发者为当前Quest版本头显开发的每一个内容都能实现前向兼容，即能兼容下一代Oculus Quest头显。未来，Oculus将为当前版本Quest持续发布更多升级软件来帮助开发者实现这一目标，而开发者只需关注发布其内容即可。
用户即将可以通过Quest开玩Rift游戏。令用户感到兴奋的一项功能显然是Oculus Link。这将允许Quest用户通过游戏PC访问Rift内容和体验。从今年11月开始，结合高质量的USB 3数据线，任何拥有Quest和游戏PC的用户都可以通过Oculus Link软件访问Rift游戏。另外，Facebook将于今年下半年发布提供最大吞吐量和舒适人体工学设计的专用数据线。
Rift S的Passthrough+透视功能将于下周开始支持Quest。当你置身于VR环境时，这项功能可以为你提供周围环境的实时立体校正视图。得益于图像处理和3D计算的进步，现在Quest已经能够支持Passthrough+透视功能。届时，你无需摘下头显即可随时查看周围的环境。
用户将可以通过Quest体验Oculus Go的一系列热门应用。对于大多数人来说，Oculus Go是步入VR世界的第一步。自发售以来，这个平台已经迎来了一系列优质的内容，为看电视，玩游戏，与朋友联系等用例提供了全新的方式。从下周开始，超过50款热门的Oculus Go应用将登陆Quest用户。如果你已经通过Oculus Go购买了一款应用，你将能免费获得Quest版本。换句话说，相关应用将提供通用购买支持。
2. Oculus平台及生态
2.1 Oculus商店1亿美元销售额
一个可持续发展的VR生态当然得是大家都有钱赚，这样才能促进生态的良性循环——开发者有动力开发更多优秀的内容，进而吸引更多的消费者参与消费，互相促进实现内容的量变和质变。今天在OC6大会上，Facebook宣布其在这一道路上达到了一个新的里程碑——用户在Oculus Store的消费总额已经超过了1亿美元，其中Oculus Quest占据20%（2000万美元）。之前Facebook曾透露说，Quest上市前两周的消费总额达到了500万美元，迄今Quest已经上市18周。
Facebook正式发布了全新的社交VR世界Facebook Horizon，并定于2020年登陆Oculus Quest和Oculus Rift。Horizon将从一个熙熙攘攘的城镇广场开始，人们将在这里见面和交流，然后再扩展到一个相互联系的世界，并开始探索新的地方，畅玩游戏，建立社区，甚至创造自己的新体验。
在首次进入Horizon之前，你可以自定义属于自己的虚拟角色，这样每个人都能充分表达自己的个性。然后，魔法般的传送门Telepods会将你从公共空间运送至充满冒险和探索的新世界。你同时能够加入通过World Builder构建的一系列Horizon世界。
Facebook Horizon定于2020年上线，而他们将在2019年10月25日关闭Facebook Spaces和Oculus Rooms.。
Facebook今天在OC6大会发布了一系列的新游戏，包括基于《荣誉勋章》系列的《Medal of Honor: Above and Beyond》、星战续集《Vader Immortal: A Star Wars VR Series - Episode II》、瞬息万变的开放世界《Stormland》、承诺30小时的冒险游戏《Asgard’s Wrath》、来自Panic! At The Disco的《Beat Saber》全新音乐包、将登陆Quest的Rift游戏《Echo VR》等。
基于《荣誉勋章》系列的《Medal of Honor: Above and Beyond》基于第二次世界大战的第一人称射击游戏游戏中，你将扮演盟军特工，负责渗透，控制纳粹战机并打击纳粹。当你完成欧洲的任务后，你又会与法国抵抗军合作，努力从敌后破坏纳粹行动。
另外，将有100多款游戏定于今年年底前与大家见面，而2020年将有更多的作品面世。益智游戏《The Room VR: A Dark Matter》将于明年登陆Quest，而逃生冒险游戏《Last Labyrinth》很快就将登陆Quest和Rift。
从3A级游戏到基于好莱坞作品的IP系列，Oculus Store将迎来越来越多的高质量作品。所以，喜欢游戏的玩家可以耐心等待Oculus带给大家的惊喜。
2.4 全新Oculus社交网络
Oculus计划在今年晚些时候推出一个基于Facebook社交网络的全新Oculus平台社交网络。届时，用户需要在Oculus平台登录Facebook账号才能使用Oculus的社交功能（如聚会、加好友、Oculus TV中共同观影），因为这些功能都是来自Facebook技术。聊天功能（Chat）还将允许你在非VR环境下与你的Oculus朋友联系交流。另外，Oculus还计划增加“活动（Events）”功能，届时你就能在朋友间发起组织多人VR竞赛、共同VR观影等。最后，你还可以在VR中组建Facebook Groups群组，分享VR的精彩瞬间。
总之，Oculus的社交网络将与Facebook的社交网络全面打通。映维网猜测，其最终会发展成为Facebook社交网络的一部分。
2.5 标志性场景打卡：Destinations + Rich Presence
开发者将可以在他们的游戏和应用中定义不同的标志性场景地点（Destinations）。一旦设置了标志性场景地点，Rich Presence功能将允许用户分享他们已经打卡的标志性场景，因此他们的朋友可以更快速方便地加入进来。从10月份开始，用户就可以在VR或者Oculus移动端App中看到他们好友的“已打卡标志性场景”。当然这属于隐私范畴，用户可以自主控制是否公开。
接下来的几个月，Oculus将开放广播“标志性场景地点（Destinations）”的功能给开发者，从而允许他们的用户分享。
2.6 Oculus TV + Oculus Media Studio
Facebook宣布推出全新的Oculus TV和Oculus Media Studio。Oculus TV可以帮助用户轻松发现和享受创作者的体验，寻找并观看Oculus Quest和Oculus Go中的媒体内容。全新的媒体内容管理系统Media Studio，可以支持创作者轻松上传、发布和分析沉浸式内容。
全新的Oculus for Business平台将于今年11月启动。Oculus for Business旨在支持各个行业轻松采用和扩展虚拟现实，帮助他们改变工作场所，令大规模部署VR成为可能，同时为不断增长的VR开发者社区扩展市场机会。
全新的Device Setup（首先支持Android）可允许你一次性设置和配置大量的头显，而Device Manager控制中心可以支持管理员更新设置并在多个办公室和位置远程部署应用程序。
Oculus for Business同时提供了一个全新的帮助端口和专门的客户支持，包括实时聊天，电话和电子邮件支持。
RenderDoc是一个支持Android的开源调试器。Oculus帮助优化了RenderDoc，新版本现在只需更少的内存，可以更流畅地支持Quest，并在OpenGL和Vulkan中支持特定于VR的扩展。展望未来，Oculus将致力于支持RenderDoc，从而帮助开发者准确了解GPU的要求。
OVR Metrics Tool是Oculus提供的性能工具，面向Unity，Unreal和原生开发者。平视模式允许你查看VR叠加层中的实时指标，而报告模式则在VR会话结束后提供性能报告。Oculus希望扩展在OVR指标工具中提供的信息，通过将其集成至操作系统中来进一步实现无缝的体验，以及构建允许你利用控制器来打开和关闭它的方法。
4.3 Vulkan支持
Oculus已经在其平台和Unreal Engine中支持了Vulkan多视图和固定注视点渲染，这可以大幅提升运行性能。今年晚些时候，Oculus将扩大Quest对Vulkan的支持，包括更方便Debug调试的Unity和Vulkan校验层。
4.4 Unity GPU
Oculus已经在Quest和Go上支持了Unity的GPU Profiler，不过Oculus还在跟高通合作，以开发更底层的GPU分析API。这将可以提供更加精准丰富的信息来帮助解决性能问题。
4.5 App销售分析
Oculus将为Quest带来新的开发者分析工具指标，以帮助开发者了解其App在商店的销售表现，包括App详细介绍页面的浏览、搜索和参与度指标。
利用最新的Mixed Reality Capture库，开发者现在可以更加轻松的集成到Oculus Quest和Rift平台上的游戏和应用程序中。通过将MRC集成到内容之中，并利用Oculus提供的Mixed Reality Capture Tools，可以制作更加引人入胜的预告片，从而吸引观众的注意力。
4.7 Oculus Link：远程渲染
当Oculus Link软件发布后，开发者也可以利用该功能进行更方便的迭代开发，在PC上运行并直接渲染传输到Quest，而不再需要编译导出APK文件。
5. 360度摄像开源系统FacebookDEP
赋能艺术工作者创造引人入胜的六自由度VR体验是Oculus的目标，而能够在3D中捕获世界的摄像头和软件是创作过程的基础。
但是，设计支持六自由度头部运动视差的完全集成式360度摄像系统异常艰巨，因为你需要从各个摄像头中计算出新的视图。今天Facebook发布了一个开源软件堆栈FacebookDEP，它可以在Oculus Quest和Rift S等VR头显中中重建深度并支持实时播放。代码已经托管至GitHub。FacebookDEP具备通用性，并旨在接收来自各种球形和平面相机阵列的输入，包括RED Digital Cinema的Manifold。Facebook是与RED Digital Cinema合作创建了Manifold，这是一款采用16个独立的RED HELIUM 8K传感器的定制摄像系统。
Facebook表示：“我们已经吸取了上一次开源工作中所获得的经验教训，即Surround360，并结合六自由度头部运动视差进行了全新的设计。结果是一种新颖的设计方法和架构。”Facebook早前已经在名为“An Integrated 6DOF Video Camera and System Design”的Siggraph Asia 2019论文 中进行了介绍。
Facebook的另一个目标是支持技术社区扩展和改进初始软件框架和摄影系统设计。所以，我们提供了适用于软件的多个数据集。他们表示：“我们希望数据集将在深度估计和视图合成领域促进正在进行中的学术研究。”
6. 最新研究成果
6. 1 Shared Spaces
FRL在今年六月展示了最新的现实环境3D模型，并向研究社区发布了18个空间的数据集。这种模拟环境捕获了房间的细微细节，如镜面反射和地毯纹理，而这是令它们与真实物体几乎无法区分的必要条件。Facebook指出：“通过将高精度的深度捕获系统，最新的即时定位和地图构建（SLAM）技术，先进的摄影头，以及密集的重建系统相结合，我们能够在VR中达到前所未有的保真度。”在今年的OC6大会中，FRL演示了相关的3D建模技术。其中，两人可以使用Oculus Avatars共同出现在3D重建空间中，并且一起看欣赏视频或开玩游戏。他们指出：“这是人们第一次在个性化3D环境中共享体验，而这是激动人心的未来一瞥。”
FRL研究团队正在开始构建将为明天的AR体验奠定基础的核心基础架构。利用机器视觉和SLAM技术，LiveMaps可以创建共享的虚拟映射。为了实现这种规模的技术，FRL团队设想LiveMaps将依靠未来智能设备捕获的众包信息。为了填充第一代映射，研究人员正在探索对Facebook的园区进行映射绘制，以及采用包含地理标签的公共图像来生成点云（这是当今导航地图中常用的技术）。
这支团队指出：“我们依然处于研究阶段，但的我们愿意公开这项研究，并且分享我们在AR眼镜开发过程中取得的进展。我们同时会考虑如何在保护隐私的情况下继续推进这项研究，并邀请全球专家提供关于最佳时间，以及人们如何保留自己对信息的控制的反馈。这项技术可能会从根本上改变人类未来的联结方式，而我们很高兴看到它给我们指明的发展方向。”
在OC6大会，亚伯拉什分享了FRL在发明光学未来方面所取得的进展，包括于2018年F8大会首次亮相的Half Dome原型。这款原型头显是多年研究和反复探索的结果。今天，Oculus拉开了下一步的帷幕。最初的Half Dome原型优先考虑视觉沉浸感，而Half Dome 2原型则主要瞄准视觉和物理方面的人体工学和舒适性。Half Dome 2原型将光路折叠成小体积，从而缩小了头显的尺寸，并且将重量减少了200克。总体而言，Facebook已经相较于Half Dome 1大幅改善了形状参数，同时减少了200克的重量。尽管Half Dome 2的视场比Half Dome 1窄，但依然比Oculus Quest宽20％。
Oculus同时展示了Half Dome系列的电子变焦版本。这个原型采用了新型液晶透镜来代替移动式机械零件。所述的新型液晶透镜是由交替堆叠的两个薄款平面光学元件制成：偏振相关透镜和可切换半波板。偏振相关透镜非常特别，因为其焦距会根据偏振态而变化。通过改变施加到可切换板的电压，你可以在两个焦距之间切换。这可能会产生一组优秀的数字双焦点，但不一定能带来舒适的VR体验。通过将一系列偏振相关透镜和可切换半波片堆叠在一起，你可以实现平滑的变焦，并能够舒适，无缝地调整焦点。
Facebook于今年年初分享了关于Codec Avatars的研究。这种栩栩如生的虚拟化身可以实时进行动画制作，从而为VR带来了轻松，实时的无脚本交互。两人能够仿佛身处于同一个物理房间中，并且自然地通过逼真虚拟化身进行交流只是第一步。但是，实现真正的社交临场感不仅仅需要面容表情。肢体语言对于我们的沟通同样重要。所以，今天FRL团队证实介绍了全身式Codec Avatars。尽管短期内你无法在消费类产品中看到这项技术，但我们可以想象这样一个未来：你我将能够通过数个自拍来创建自己的超现实虚拟化身，然后头显能够实时制作动画。显然，未来将迎来全新的全身沉浸式VR浪潮。
