新方法可从文本或图像生成4K立体360°视频,为沉浸式头显提供内容
从文本或图像生成4K立体360°视频
(映维网Nweon 2026年10月12日)沉浸式显示器能将观看者带入超越物理环境的场景,但为每一种体验制作沉浸式内容成本高昂、难以规模化。拍摄立体360°视频需要复杂的多相机装置和精密的拼接,手动创建虚拟环境则需艺术家逐场景建模。生成式视频模型有望绕过这一瓶颈,但现有模型主要面向传统显示器,无法直接生成沉浸式观看所需的高分辨率立体360°内容。
针对这一空白,来自北卡罗来纳大学教堂山分校和杜比实验室的研究人员提出了一种零样本生成流程,可将现有视频扩散模型扩展为4K立体360°视频。该研究以预印本形式发布。

研究人员指出,现有零样本方法如DissolveStereo和StereoCrafter依赖软条件引导,未显式强制左右眼视图之间的正确几何关系,在双目观看时误差尤为明显。同时,现有度量基于透视图像匹配,无法处理360°球面几何或等距柱状投影图像在两极附近的畸变。
......(全文 918 字,剩余 584 字)


