多尺度密集连接注意力的红外与可见光图像融合

作     者：陈永 张娇娇 王镇 CHEN Yong;ZHANG Jiaojiao;WANG Zhen

作者机构：兰州交通大学电子与信息工程学院甘肃兰州730070 

基　　金：国家自然科学基金资助项目(No.61963023,No.61841303) 兰州交通大学天佑创新团队资助项目(No.TY202003) 

出 版 物：《光学精密工程》 (Optics and Precision Engineering)

年 卷 期：2022年第30卷第18期

页      码：2253-2266页

摘      要：针对现有红外与可见光图像融合时,融合结果存在细节信息丢失、特征提取不足等问题,提出了一种多尺度密集连接注意力的红外与可见光图像融合深度学习网络模型。首先,设计多尺度卷积提取红外与可见光图像中不同尺度信息,增大感受野特征提取范围,克服了单一尺度特征提取不足的问题。然后,通过密集连接网络增强特征提取,并在编码子网络末端采用提出的可变形卷积注意力机制,密切联系全局上下文信息,增强对红外与可见光图像中重要特征信息的聚焦能力。最后,由全卷积层构成解码网络,重构生成融合图像。本文选取了六种图像融合客观评价指标,红外与可见光图像公开数据集融合实验结果表明:与其他8种方法相比,本文算法对比实验指标均有所提高,其中结构相似性(SSIM)、空间频率(SF)指标分别平均提高了0.26倍、0.45倍。所提方法的融合结果保留了更清晰的边缘及目标信息,具有更好的对比度和清晰度,在客观评价方面均优于对比方法。

主 题 词：红外与可见光图像 图像融合 多尺度特征提取 密集连接网络 注意力机制 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

核心收录：

D　O　I：10.37188/OPE.20223018.2253

馆 藏 号：203115177...