雨果·巴拉:行业北极星Vision Pro过度设计不适合产品市场

体验实践:visionOS 2 用先进 AI 将2D照片转换为栩栩如生3D照片

查看引用/信息源请点击:roadtovr

并不是说苹果在用户转换功能方面有什么突破性的质量优势,而是他们提供的体验足够好,足够简单,以至于人们真的想要使用它。

Vision Pro QQ群交流653565822

映维网Nweon 2024年06月26日)Apple Vision Pro的空间照片为家人和朋友带来了令人难以置信的深度和真实感。利用visionOS 2,用户可以通过直接用图库中的图像来创建空间照片,从而重温过去的记忆。visionOS使用先进的机器学习将2D图像转换为精美的空间照片,并可通过Apple Vision Pro变得栩栩如生。

日前,RoadtoVR的本杰明·朗(Ben Lang)分享了自己对这项功能的看法。

Apple Vision Pro的2D到3D照片转换功能成为了首个有意义的新功能。

当然,苹果不是第一个这么做的公司。近年来,似乎有上百家不同的初创公司承诺提供将2D照片转化为3D的功能,甚至Facebook在数年前都添加了2D到3D的照片转换功能。然而,它们从未真正流行起来,一个原因可能是在智能手机浏览3D照片并没有那么令人兴奋。

当涉及到人们真正想要的功能时,谁先做并不重要,谁做得好很重要。

事实上,Apple Vision Pro确实做得好。2D到3D的转换不仅看起来好,而且这个功能的实现方式超越了之前尝试的新颖性。

苹果表示,这个功能可以根据你现有的2D图像中创建“空间照片”。当然,这只是指立体的“3D”。

即便它“只是立体”,但看到你自己的3D照片确实增加了一层深度。2D照片能勾起我们的回忆,而3D照片则令我们感觉更接近于真正的回忆,。

在visionOS 2.0中,只需进入常用的照片应用,然后打开任意一张照片,在左上角找到一个小立方体图标。点击它,头显会在两到三秒内分析并将其转换成3D图像。再点击一下,你可以回到原来的样子。

结果并不完美,但令人印象深刻。非常遗憾,单纯的图文视频不能向你展示其真正的效果,但这是我个人见过的最好的2D到3D自动照片转换。

速度和准确性令人印象深刻,因为转换是100%在设备端进行。苹果不会把你的照片发送到服务器,用云处理资源制作出3D版本,然后再发送回你的头显。这使得所述功能在默认情况下是安全的(并且可以离线使用),当涉及到个人照片库等个人数据集时,这一点尤为重要。

在普通人的照片库中,你可以找到人、宠物、地方等不同的分类,而转换算法似乎可以很好地处理相关照片。

尽管这个功能最适合现实生活中的摄影,但你同时可以将其用于合成图像,如数字艺术品、人工智能生成的照片、3D渲染等。结果各不相同,但总的来说,我对这项功能的能力印象深刻,它甚至可以从合成图像中创造出合理的3D深度,要知道,合成图像本身根本就没有任何3D深度。

算法最难处理的似乎是高反射和半透明表面。它通常会将反射“画”到反射对象,而不是将它们以正确的深度投射到对象。

目前唯一的主要限制是2D到3D照片的转换似乎不希望在全景图像上工作。尚不清楚为什么会存在这种限制,但很可能是因为全景图的分辨率往往很高,或者苹果的2D到3D算法需要更多的宽视场图像训练。在Apple Vision Pro,全景图可以放大并以一种真实大小的方式包裹在你周围,但它们依然会因为3D化而获得另一层情感影响。

除了上述限制,真正使其成为一种实用功能的是,它是内置的,并能够以你期望的地方和方式工作。

你不仅可以将空间照片发送给其他用户,同时可以启动SharePlay会话一起查看它们。这是与重要之人分享时刻和回忆的一种不可思议的方式。

另外,你很容易把你想要的照片放到头显进行查看。

许多人会将他们的iCloud照片库与头显同步。我个人不使用iCloud照片,但我可以轻松地从iPhone中选择我最喜欢的照片,并通过AirDrop进行同步。

另外,你可以将任何旧照片保存到头显之中(无论是来自Facebook、网站还是其他应用程序),然后使用2D到3D转换功能,从而以一种全新的维度来查看它们。

这就是visionOS 2.0与之前的2D到3D转换软件的不同之处。并不是说苹果在用户转换功能方面有什么突破性的质量优势,而是他们提供的体验足够好,足够简单,以至于人们真的想要使用它。

本文链接https://news.nweon.com/122214
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯