面向大规模零样本图像识别的高效算法框架

作     者：张泽欢 刘强 国狄非 ZHANG Zehuan;LIU Qiang;GUO Difei

作者机构：天津大学微电子学院天津300072 天津市成像与感知微电子技术重点实验室天津300072 天津通信广播集团有限公司天津300140 

基　　金：国家自然科学基金(U21B2031) 

出 版 物：《西安电子科技大学学报》 (Journal of Xidian University)

年 卷 期：2022年第49卷第6期

页      码：103-110页

摘      要：在大规模零样本图像识别任务中,由于图像类别数量大,所以模型训练困难,且模型的训练成本高。为了解决这些问题,设计了高效的零样本学习算法框架,在低训练成本的前提下提高了模型识别精度和泛化能力。该算法框架中定义了公共空间,利用图像分支网络和语义分支网络分别将不同模态的特征向量映射至公共空间完成模型训练和推理。在图像分支网络中,为了改变图像特征向量的分布,使用感知机网络将图像特征向量映射至公共空间;在语义分支网络中,采用图卷积网络将语义向量映射至公共空间。同时,设计损失函数对公共空间进行约束,使得公共空间中不同类别的区分度被增大,利于模型训练。在ImageNet数据集上的实验结果显示,在“2-HOPS”测试集上,与不需要微调的现有方法相比,该算法框架的精度提高了1.1%,训练时间节省了57.8%;与需要微调的现有算法相比,该算法框架在不损失精度的情况下节省了98.4%的训练时间。实验结果表明,该算法框架以低训练成本实现了模型性能的提升。

主 题 词：深度学习 知识图谱 图神经网络 

学科分类：0710[理学-生物科学类] 12[管理学] 1201[管理学-管理科学与工程类] 081104[081104] 08[工学] 0835[0835] 0701[理学-数学类] 0811[工学-水利类] 0812[工学-测绘类] 

核心收录：

D　O　I：10.19665/j.issn1001-2400.2022.06.013

馆 藏 号：203118199...