谷歌研究根据静止照片学习生成3D漫游视图
使用仅以静止照片训练的系统产生高分辨率、高质量的Flythroughs飞行漫游视图
(映维网Nweon 2022年11月14日)我们生活的地球拥有雄伟的山脉、壮丽的海洋和宁静的森林。你能想象小鸟飞过这种细节丰富的三维景观时所看到的景色吗?计算机能学会合成这种视觉体验吗?显然,这样的能力可以为游戏和VR体验提供新的内容。
在名为“Infinite Nature”的研究中,谷歌探索了可以根据静止照片来学习生成这种Flythroughs飞行漫游视图。这是前所未有的突破性能力。谷歌将潜在的研究问题称为Perpetual View Generation持续视图生成:给定一个场景的单个输入视图,如何合成一组对应于通过所述场景任意长度的、由用户控制3D路径的逼真输出视图?
Perpetual View Generation持续视图生成非常具有挑战性,因为系统必须在大型地标(例如山脉)的另一侧生成新内容,并以高逼真度和高分辨率渲染新内容。
经过一番努力后,由谷歌、康奈尔大学、加利福尼亚大学伯克利分校组成的团队于ECCV 2022展示的InfiniteNature Zero可以从单个种子图像开始,使用仅以静止照片训练的系统产生高分辨率、高质量的Flythroughs飞行漫游视图。如下面这个视频所示:
......(全文 1911 字,剩余 1510 字)
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限