| 基于边缘保持和注意力生成对抗网络的红外与可见光图像融合 |
| |
| 引用本文： | 朱雯青,汤心溢,张瑞,陈潇,苗壮. 基于边缘保持和注意力生成对抗网络的红外与可见光图像融合[J]. 红外与毫米波学报, 2021, 40(5): 696-708 |
| |
| 作者姓名： | 朱雯青 汤心溢 张瑞 陈潇 苗壮 |
| |
| 作者单位： | 中国科学院上海技术物理研究所,上海200083;中国科学院大学,北京100049;中国科学院红外探测与成像技术重点实验室,上海200083;中国科学院上海技术物理研究所,上海200083;中国科学院红外探测与成像技术重点实验室,上海200083 |
| |
| 摘 要： | 由于红外与可见光图像特征差异大，并且不存在理想的融合图像监督网络学习源图像与融合图像之间的映射关系，深度学习在图像融合领域的应用受到了限制。针对此问题，提出了一个基于注意力机制和边缘损失函数的生成对抗网络框架，应用于红外与可见光图像融合。通过引入对抗训练和注意力机制的思想，将融合问题视为源图像和融合图像对抗的关系，并结合了通道注意力和空间注意力机制学习特征通道域和空间域的非线性关系，增强了显著性目标特征表达。同时提出了一种边缘损失函数，将源图像与融合图像像素之间的映射关系转化为边缘之间的映射关系。多个数据集的测试结果表明，该方法能有效融合红外目标和可见光纹理信息，锐化图像边缘，显著提高图像清晰度和对比度。
|
| 关 键 词： | 图像融合 生成对抗网络 边缘损失 注意力机制 |
| 收稿时间： | 2020-10-29 |
| 修稿时间： | 2021-09-06 |
Infrared and visible image fusion based on edge-preserving and attention generative adversarial network |
| |
| ZHU Wen-Qing,TANG Xin-Yi,ZHANG Rui,CHEN Xiao and MIAO Zhuang. Infrared and visible image fusion based on edge-preserving and attention generative adversarial network[J]. Journal of Infrared and Millimeter Waves, 2021, 40(5): 696-708 |
| |
| Authors: | ZHU Wen-Qing TANG Xin-Yi ZHANG Rui CHEN Xiao MIAO Zhuang |
| |
| Abstract: | |
| |
| Keywords: | image fusion generative adversarial network edge-based loss function attention mechanism |
| 本文献已被 万方数据 等数据库收录！ |
| 点击此处可从《红外与毫米波学报》浏览原始摘要信息 |
|
点击此处可从《红外与毫米波学报》下载全文 |
