基于空间多尺度残差网络的红外与可见光图像融合 |
| |
引用本文: | 张亦孟,林伟国.基于空间多尺度残差网络的红外与可见光图像融合[J].大气与环境光学学报,2023(5):469-478. |
| |
作者姓名: | 张亦孟 林伟国 |
| |
作者单位: | 1. 北京机电工程总体设计部;2. 北京化工大学信息科学与技术学院 |
| |
摘 要: | 针对如何充分提取和融合红外与可见光图像典型特征的问题,提出一种基于空间多尺度残差网络的图像融合算法。首先,将源图像输入基于空间多尺度残差模块组成的编码器网络,通过源图像重建任务,训练编码器自动获取重要特征信息的能力;然后,引入特征金字塔结构,设计了特征通道自注意力机制,编码器输出的基础层和细节层进行融合,减小尺度噪声,并由解码器重构出融合图像;最后,利用公开数据集进行定性和定量实验,证明了改进算法在突出红外图像目标和保留可见光图像纹理细节两方面的优势,相比于DDcGAN算法,新算法的标准差和平均梯度分别提升了12.91%和47.41%。
|
关 键 词: | 图像融合 自动编码器 空间多尺度残差模块 通道自注意力 |
|
|