首页 | 本学科首页   官方微博 | 高级检索  
     

引入特征交互的红外与可见光图像自适应融合北大核心CSCD
引用本文:陈从平,闫焕章,郁春明,江高勇,凌阳,戴国洪. 引入特征交互的红外与可见光图像自适应融合北大核心CSCD[J]. 激光与红外, 2023, 53(7): 1052-1059
作者姓名:陈从平  闫焕章  郁春明  江高勇  凌阳  戴国洪
作者单位:1.常州大学机械与轨道交通学院,江苏 常州 213164;2.常州大学材料科学与工程学院,江苏 常州 213164
基金项目:江苏省产业前瞻与关键核心技术-碳达峰碳中和科技创新专项资金项目(No.BE2022044)资助。
摘    要:在图像融合领域,现有的基于卷积神经网络(CNN)或Transformer架构的方法存在两个局限性:首先,浅层纹理特征与深层语义特征之间无法有效聚合;其次,红外与可见光特征的权重比例无法自适应变化。本文提出一种引入特征交互的红外与可见光图像自适应融合方法。首先,构建一种基于Transformer的特征交互模块,聚合跨尺度特征信息,增强特征表达能力。其次,设计一种融合模块,自适应地调整特征权重比例。所提出的融合方法通过两阶段训练策略完成。第一个阶段,应用创新的特征交互概念训练编码器,增强特征表达,重建特征图像。第二个阶段,基于设计的权重自适应调整模块训练红外与可见光特征融合任务。公开数据集的实验结果表明,与现有方法相比,本方法在主观和客观的评价方面均优于其他典型方法。

关 键 词:图像融合  Transformer  特征交互  自适应融合  跨尺度
修稿时间:2022-11-01

Adaptive fusion of infrared and visible light images withintroduction of feature interaction
CHEN Cong-ping,YAN Huan-zhang,YU Chun-ming,JIANG Gao-yong,LING Yang,DAI Guo-hong. Adaptive fusion of infrared and visible light images withintroduction of feature interaction[J]. Laser & Infrared, 2023, 53(7): 1052-1059
Authors:CHEN Cong-ping  YAN Huan-zhang  YU Chun-ming  JIANG Gao-yong  LING Yang  DAI Guo-hong
Affiliation:1.School of Machinery and Rail Transit,Changzhou University,Changzhou 213164,China2.School of Materials Science and Engineering,Changzhou University,Changzhou 213164,China
Abstract:
Keywords:
本文献已被 维普 等数据库收录!
点击此处可从《激光与红外》浏览原始摘要信息
点击此处可从《激光与红外》下载全文
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号