基于特征融合的双模态低辨识度目标识别

作     者：吴愿 薛培林 殷国栋 黄文涵 耿可可 邹伟 WU Yuan;XUE Peilin;YIN Guodong;HUANG Wenhan;GENG Keke;ZOU Wei

作者机构：东南大学机械工程学院南京211189 

基　　金：国家重点研发计划(2016YFD0700905) 国家自然科学基金(51975118,U1664258) 江苏省重点研发计划(BE2019004-2) 

出 版 物：《中国机械工程》 (China Mechanical Engineering)

年 卷 期：2021年第32卷第10期

页      码：1205-1212,1221页

摘      要：针对单一彩色相机对低辨识度目标识别准确率低的问题,提出了一种利用彩色相机和红外热成像仪同时检测自动驾驶目标的方案。为了同时提取彩色图像的颜色特征与红外图像的温度特征,在单模态YOLOv3网络基础上改进网络结构得到双模态YOLOv3神经网络,并设计四种特征融合对比实验以确定最佳融合方案;建立双模态数据集同步采集系统,采集彩色图像与红外图像对并用于双模态网络的训练与测试;使用未经网络训练的验证集得到4种双模态特征融合模型的平均精度值与损失值。实验结果表明,在训练30次后,该双模态网络模型的平均精度值最高可达59.42%。

主 题 词：低辨识度目标识别 双模态YOLOv3神经网络 双模态数据集 特征融合 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 081104[081104] 08[工学] 0802[工学-机械学] 0835[0835] 0811[工学-水利类] 0801[工学-力学类] 0812[工学-测绘类] 

核心收录：

D　O　I：10.3969/j.issn.1004-132X.2021.10.009

馆 藏 号：203103394...