国防科技大学团队提出一种在NeRF中合成对象和场景的方法
逼真的重照明效果
（映维网Nweon 2024年12月24日）在场景中插入对象和重新照明是AR中的常的应用。以前的方法主要是使用CAD模型插入虚拟对象或从单视图图像插入真实对象，但这使得AR应用场景非常有限。
针对这个问题，国防科技大学的研究人员提出了一种基于NeRF的管道，以用于将对象NeRF插入到场景NeRF中，从而实现新颖的视图合成和逼真的重照明，并支持物理交互。
照明环境是球面谐波和球面高斯的混合表示，很好地表示了高频和低频照明组件，并支持非朗伯表面。具体来说，研究人员利用体渲染的优势，并通过比较camera视图和光源视图之间的深度图来生成生动的柔和阴影，从而引入了一种高效阴影渲染的创新方法。在大量的实验评估中，所述解决方案获得了逼真的重照明效果。
对象插入技术广泛应用于AR/VR等领域。对象插入的目标是将对象无缝地集成到场景中，增强用户的视觉沉浸感。传统的计算机图形学方法通常涉及手动捕获和重建物理世界，包括几何、纹理和其他属性。以前的工业流程一般包括手动组成场景和对象的CAD模型，并使用传统的渲染技术，如光栅化和光追来重新照明或生成新的视图，从而创建定制的视觉体验。
尽管如此，这个过程属于劳动密集型，对初学者而言并不友好。在研究中，国防科技大学团队的目标是一个完全基于图像输入的合成和重照明3D对象和场景的完整管道。
......（全文 1575 字，剩余 1067 字）
请微信扫码通过小程序阅读完整文章或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限
