谷歌ARCore 1.24带来Raw Depth API,为开发者开放原始深度图

查看引用/信息源请点击:映维网

Raw Depth API和Recording and Playback API

映维网 2021年05月19日)创建ARCore是为了向开发者提供简单而强大的AR工具来无缝融合数字世界和物理世界。从允许粉丝与自己喜爱的角色互动,到为完美家居放置虚拟电子设备和家具等等,我们在过去的数年里已经看到开发者创建了各种各样的AR内容来娱乐、吸引和帮助人们。

在今年的I/O大会里,谷歌正继续优化和构建用以帮助AR开发者的工具。对于ARCore 1.24,团队带来了Raw Depth API和Recording and Playback API。所述API将能帮助开发者创建新类型的AR体验,并加快相关的开发周期。

1. 通过深度增加真实感和精度

当Depth API于2020年与大家见面时,数以亿计的Android设备获得了实时生成深度图的能力,而且不需要专门的深度传感器。深度图中的数据经过平滑处理,填补了因缺少视觉信息而可能出现的任何空白,从而能够帮助开发者轻松创建诸如遮挡这样的深度效果。

全新的Raw Depth API能够生成包含相应置信度图的“原始”深度图,从而提供场景中对象几何的更详细表示。原始深度图包括非平滑数据点,并且置信度图为原始深度图中的每个像素提供深度估计的置信度。

Raw Depth API中的优化几何图形可以实现更精确的深度测量和空间感知。在ARConnect app中,更精确的测量可以帮助用户更深入地理解周遭的物理环境。AR Doodads app则利用原始深度的空间感知来允许用户构建逼真的虚拟鲁布·戈德堡机械。

PHORIA的ARConnect(左)和Jam3的AR Doodas(右)利用了Raw Depth API中的优化几何图形

Raw Depth API中的置信度图允许开发者实时过滤深度数据。例如,TikTok抖音的最新效果允许用户上传图像,并将其打包到真实世界的对象。图像匹配表面,深度估计具有高置信度。开发者过滤高置信度深度数据的能力对于三维对象和场景重建同样至关重要。你可以在3D Live Scanner app中看到这一点,所述应用程序允许用户扫描空间,并创建、编辑和共享3D模型。

TikTok抖音和3D Live Scanner利用了Raw Depth API的置信度图

谷歌同时引入了一种新型的命中测试,它使用深度图中的几何图形来提供更多的命中测试结果,即使是低纹理和非平面区域都是如此。以前,命中测试只有在具有大量视觉特征的表面才能实现最好的效果。

与先前的Depth API一样,这种升级利用了运动深度,使得它们可以支持数亿台Android设备,而且无需依赖于专门的传感器。当然,尽管不需要诸如飞行时间传感器之类的深度传感器,但拥有它们将能进一步提高体验的质量。

除了所述的应用程序之外,ARCore Depth Lab同时更新了Raw Depth API和深度命中测试的示例。所述内容及更多请访问Depth API文档页面,并从今天开始使用Android和Unity构建属于你的AR内容。

2. 提高开发速度&捕获后AR

AR开发者经常遇到的一个难点是,需要在特定的地方和场景不断地进行测试。开发者可能并不总是能够访问所述位置,而且照明会发生变化,传感器不会在每个实时摄像头会话期间捕捉到完全相同的信息。

全新的Recording and Playback API旨在解决这一问题。现在,开发者不仅可以录制视频片段,同时可以录制IMU和深度传感器数据。在播放时,你可以访问相同的数据,从而能够复制完全相同的场景,并在舒适的工作空间中测试体验。

滴滴使用Recording and Playback API在滴滴配送app中构建和测试AR方向。这能够帮助团队节省25%的研发和测试成本,60%的差旅成本,并将开发周期缩短了6个月的时间。

除了提高开发速度之外,Recording and Playback API同时为新的AR体验提供了可能,如捕获后AR。使用视频可以实现异步AR体验,消除时间和地点限制。例如,当可视化AR家具时,用户不必再呆在家里。取而代之的是,你可以直接调出家的视频,并精确地放置AR asset。以这种方式,你就可以“把AR带到任何地方”。

SK Telecom的Jump AP利用Recording and Playback API将场景从韩国直接传输到用户家中,以增强与文化宣传相关的体三维内容和3D AR内容。

Recording and Playback API允许用户录制视频、插入3D角色和消息,并与家人和朋友共享。更多信息请访问Recording and Playback API文档

3. 今天就开始使用ARCore

谷歌表示:“这些ARCore更新完善了一套强大的开发工具,可帮助你创建引人入胜的逼真AR体验。ARCore拥有超过10亿的总安装量和8.5亿台兼容设备,几乎所有人都可以通过智能手机访问增强现实。我们非常期待你将如何通过ARCore进行创新并接触更多的用户。”有兴趣了解更多详情的用户可以访问ARCore开发者官网

本文链接https://news.nweon.com/85867
转载须知:转载摘编需注明来源映维网并保留本文链接
入行必读:腾讯可以向Facebook学习什么

更多阅读推荐......

资讯