科研之友
微信
新浪微博
Facebook
分享链接
摘要
在遥感图像中，PAN图像具有较高的空间分辨率，而MS图像包含了更多的光谱信息，因此，将它们进行融合得到高分辨率的多光谱图像是一项重要的技术。由于CNN往往无法准确获取远距离的空间特征，因而限制了全色锐化的空间细节。为了充分提取全色图像的空间信息和多光谱图像的光谱信息，文中提出了一种双分支注意力网络用于遥感图像融合任务。与以往利用纯卷积神经网络提取空间和光谱信息的方法不同，该方法在卷积块中引入空间注意力模块和通道注意力模块，分别用于关注空间和光谱信息，并在层级之间进行信息交互，以充分提取空间信息和光谱信息；同时，以Transformer为基础架构，搭建Transformer全局分支用于充分学习图像中的空间特征和光谱特征，最后经过解码得到高空间分辨率的多光谱图像。该方法在IKONOS和WorldView-2数据集上进行了全分辨率实验和降低分辨率实验，实验结果表明，该方法相比于对比方法在客观指标和主观视觉上均取得了更好的结果。
- 单位
