利用局部监督的跨模态行人重识别研究

作     者：江锴威 王进 张琳钰 芦欣 刘国庆 Jiang Kaiwei;Wang Jin;Zhang Linyu;Lu Xin;Liu Guoqing

作者机构：南通大学信息科学技术学院江苏南通226000 南通理工学院计算机与信息工程学院江苏南通226000 中天智能装备有限公司江苏南通226010 

基　　金：国家自然科学基金资助项目(62002179) 2022年南通市科技计划资助项目(JC22022063) 

出 版 物：《计算机应用研究》 (Application Research of Computers)

年 卷 期：2023年第40卷第4期

页      码：1226-1232页

摘      要：跨模态行人重识别技术旨在从非重叠视域不同模态的摄像头捕获的行人图像中,识别出特定行人,行人图像间存在巨大的跨模态差异以及模态内部差异,导致识别率不高。为此,提出了一种利用局部监督的跨模态行人重识别方法(LSN)。首先将可见光图像转换成与红外图像更为接近的灰度图像,在图像层面缓解跨模态的差异,并使用共享参数的双流网络,提取具有判别性的共享特征,在特征层面缓解跨模态差异;其次,设计了局部监督网络,增强了对背景、遮挡等噪声的鲁棒性,缓解了模态内部差异;最后,设计了跨模态分组损失、联合身份损失对网络进行约束。实验结果显示,在SYSU-MM01数据集上,评价指标rank-1和mAP分别达到了53.31%、50.88%;在RegDB数据集上,达到了73.51%、68.55%,实验结果优于同类方法,验证了该方法的有效性和先进性。

主 题 词：跨模态行人重识别 智能安防 双流网络 局部监督 跨模态分组损失 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.19734/j.issn.1001-3695.2022.07.0390

馆 藏 号：203121047...