基于双路级联对抗机制的红外与可见光图像融合方法

作者：唐丽丽; **^*; 肖刚

来源：光子学报, 2021, 50(09): 321-331.

• 图像融合
• 生成对抗网络
• 双路级联
• 双判别器
• 红外
• 可见光

针对现有的基于生成对抗网络的图像融合方法存在忽略红外图像的热目标信息,可见光图像的部分细节信息丢失的情况,提出一种基于双路级联对抗机制的红外与可见光图像融合方法。首先,在生成器模型中采用双路级联的方式分别对红外与可见光图像进行特征提取,为提高融合质量在内容损失函数中引入结构相似度。然后,在判别器模型中采用双判别方式判别生成图像的真假。最后,在公开的数据集上进行实验并与8种经典先进的图像融合方法进行比较。实验结果表明:融合图像在保留红外图像的目标信息同时也保留了可见光图像更多的细节信息,在主观评价和客观评估上均获得较好的性能。

• 单位
  上海电力大学; 航天学院; 上海交通大学