基于多光谱交互注意力融合的多尺度无人机小目标检测

作     者：吴长柯 陈虎 潘涛 黄菊 刘洪 张萍 吴志红 苏强 WU Chang-Ke;CHEN Hu;PAN Tao;HUANG Ju;LIU Hong;ZHANG Ping;WU Zhi-Hong;SU Qiang

作者机构：四川大学视觉合成图形图像技术重点学科实验室成都610065 61287部队成都610036 四川大学计算机学院成都610065 中国东方电气集团有限公司成都611731 电子科技大学光电科学与工程学院成都611731 

基　　金：国家自然科学基金重点项目(U20A20161) 

出 版 物：《四川大学学报（自然科学版）》 (Journal of Sichuan University(Natural Science Edition))

年 卷 期：2024年第61卷第3期

页      码：136-143页

摘      要：针对无人机检测中存在的目标较小、受背景环境影响大、以及多光谱特征难以深度融合等问题,本文提出了针对无人机小目标检测的多尺度多光谱交互注意力融合目标检测模型.首先,将骨干网络设计为双流网络,分别提取不同尺度红外和可见光特征,并增加小目标检测层和BiFPN级联操作,提升对无人机小目标特征的提取能力.其次,创新性的设计了多光谱交互注意力融合模块,在该融合模块的指导下,网络可以在不同尺度融合红外和可见光模态的信息,使红外和可见光的特征进行深度聚合,发挥各自模态的优势,指导开展无人机小目标检测.实验结果表明,与最先进的多光谱目标检测模型相比,本文提出的模型在FLIR、LLVIP两个公开的多光谱目标检测数据集上都达到了优越的性能,在构建的多光谱无人机数据集上,本文提出的模型有效提升了无人机的检测精度和鲁棒性.

主 题 词：无人机检测 小目标检测 多光谱交互注意力融合 多尺度 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.19907/j.0490-6756.2024.032005

馆 藏 号：203127875...