中外团队研究基于畸变制导的全向图像超分辨率方法GDGT-OSR

查看引用/信息源请点击:映维网Nweon

在全向图像超分辨率方面达到了最先进的性能

映维网Nweon 2025年01月21日)随着虚拟现实和增强现实应用的普及,全向图像(ODI)超分辨率变得越来越重要。与在平面形成的二维平面图像不同,ODI投影到球面。所以,将已建立的图像超分辨率方法应用于ODI需要执行等矩形投影(ERP)以将OID映射到平面。ODI超分辨率需要考虑由ERP引起的几何畸变。

然而,由于没有考虑ERP图像的这种几何畸变,以往基于深度学习的方法只能利用有限的像素范围,很容易错过自相似纹理进行重建。

在一项研究中,香港理工大学、深圳大学、英国诺丁汉大学介绍了一种用于全向图像超分辨率的Geometric Distortion Guided Transformer(GDGT-OSR)。

具体而言,他们提出了一种畸变制导的矩形窗口自注意机制,结合变形自注意,可以更好地感知变形,从而涉及更多的自相似纹理。畸变制导是通过一种新设计的畸变制导发生器来实现,可利用畸变在纬度的可变性来产生制导。另外,团队提出了一种动态特征聚合方案来自适应融合来自不同自关注模块的特征。

......(全文 1403 字,剩余 1027 字)


请微信扫码通过小程序阅读完整文章
或者登入网站阅读完整文章
映维网会员可直接登入网站阅读
PICO员工可联系映维网免费获取权限

本文链接https://news.nweon.com/127240
转载须知:转载摘编需注明来源映维网并保留本文链接
素材版权:除额外说明,文章所用图片、视频均来自文章关联个人、企业实体等提供
QQ交流群苹果Vision  |  Meta Quest  |  微软HoloLens  |  AR/VR开发者  |  映维粉丝读者
资讯