结合多尺度特征与混淆学习的跨模态行人重识别

作     者：王路遥 王凤随 闫涛 陈元妹 WANG Luyao;WANG Fengsui;YAN Tao;CHEN Yuanmei

作者机构：安徽工程大学电气工程学院安徽芜湖241000 安徽工程大学检测技术与节能装置安徽省重点实验室安徽芜湖241000 安徽工程大学高端装备先进感知与智能控制教育部重点实验室安徽芜湖241000 

基　　金：安徽省自然科学基金项目(2108085MF197) 安徽高校省级自然科学研究重点项目(KJ2019A0162) 安徽工程大学国家自然科学基金预研项目(Xjky2022040) 

出 版 物：《智能系统学报》 (CAAI Transactions on Intelligent Systems)

年 卷 期：2024年第19卷第4期

页      码：898-908页

摘      要：跨模态行人重识别研究的重难点主要来自于行人图像之间巨大的模态差异和模态内差异。针对这些问题,提出一种结合多尺度特征与混淆学习的网络结构。为实现高效的特征提取、缩小模态内差异,将网络设计为多尺度特征互补的形式,分别学习行人的局部细化特征与全局粗糙特征,从细粒度和粗粒度两方面来增强网络的特征表达能力。利用混淆学习策略,模糊网络的模态识别反馈,挖掘稳定且有效的模态无关属性应对模态差异,来提高特征对模态变化的鲁棒性。在大规模数据集SYSU-MM01的全搜索模式下该算法首位击中率和平均精度(mean average precision,mAP)的结果分别为76.69%和72.45%,在RegDB数据集的可见光到红外模式下该算法首位击中率和mAP的结果分别为94.62%和94.60%,优于现有的主要方法,验证了所提方法的有效性。

主 题 词：机器视觉 行人重识别 跨模态 多尺度特征 粗粒度 细粒度 混淆学习 模态无关属性 

学科分类：1305[艺术学-设计学类] 13[艺术学] 08[工学] 081104[081104] 0804[工学-材料学] 081101[081101] 0811[工学-水利类] 

核心收录：

D　O　I：10.11992/tis.202304010

馆 藏 号：203131902...