谷歌利用众包照片为AR/VR提供地标3D建模

查看引用/信息源请点击:venturebeat

令人信服地在3D中复刻相关地标和照明

映维网 2020年08月13日)一直以来,将现实地点转换为3D模型对人类艺术家而言都是巨大的挑战,尤其是需要实现照片级真实感的时候。

谷歌研究人员已经构思出一种替代方案,其可以同时地自动化3D建模过程并改进结果,利用一个包含众包地点照片的神经网络来令人信服地在3D中复刻相关地标和照明。

名为神经辐射场(Nergular Radiance Fields,NeRF)的技术可通过确定光线的终止位置而从2D图像中提取3D深度数据,然后就能够创建看似合理的地标3D纹理模型。

谷歌的NeRF-in-Wild(NeRF-W)系统则更进一步。首先,它使用“in-the-wild photo collections”作为输入,从而扩展计算机从多个角度查看地标的能力。接下来,系统评估图像以寻找结构,分离出摄影图形和环境变化,如图像曝光、场景照明、后处理和天气条件,以及镜头到镜头的对象差异。然后,它将重新创建场景,将静态元素(结构几何和纹理)与提供体三维辐射的瞬态元素混合。

因此,可以从多个角度流畅地查看NeRF-W的3D地标模型,而且看起来不会抖动或出现伪影。同时,照明系统使用检测到的变化来为场景照明和阴影提供辐射指导。

......(全文 802 字,剩余 395 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/77005
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者

您可能还喜欢...

资讯