融合多尺度特征及注意力机制的医学图像检索

作     者：周林鹏 姚剑敏 严群 林志贤 ZHOU Lin-peng;YAO Jian-min;YAN Qun;LIN Zhi-xian

作者机构：福州大学物理与信息工程学院福建福州350108 晋江市博感电子科技有限公司福建晋江362200 

基　　金：国家重点研发计划课题(No.2016YFB0401503) 广东省科技重大专项(No.2016B090906001) 福建省科技重大专项(No.2014HZ0003-1) 广东省光信息材料与技术重点实验室开放基金(No.2017B030301007) 

出 版 物：《液晶与显示》 (Chinese Journal of Liquid Crystals and Displays)

年 卷 期：2021年第36卷第8期

页      码：1174-1185页

摘      要：针对目前医学图像普遍存在病理区域尺寸分布较分散、细节特征不明显以及同类组织影像间的视觉差异较大等问题,本文在CBMIR系统的基础上,提出了一种融合多尺度特征及注意力机制的医学图像检索方法。该方法通过融合多尺度特征并设置可学习权重系数来自适应平衡浅层图像纹理特征和深层图像语义特征的关系,提高网络对不同尺度上的病理特征提取能力。同时,引入注意力模块,对网络输出的特征图进行通道加权求和,提高关键特征通道的特征表达能力,使网络更能关注到图像中的具有辨识性的病理特征区域。最后,在损失函数设计时,使用多重损失进一步优化样本特征在特征空间的分布。最终在Mura数据集上的mAP@100、mAP@20两个指标上分别达到了0.95、0.98的检索精度,基本符合实际场景对模型的检索精度要求。

主 题 词：医学影像处理 CBMIR 多尺度特征融合 注意力机制 多重损失函数 

学科分类：1305[艺术学-设计学类] 0810[工学-土木类] 13[艺术学] 08[工学] 081104[081104] 0804[工学-材料学] 0703[理学-化学类] 081101[081101] 0811[工学-水利类] 

D　O　I：10.37188/CJLCD.2020-0248

馆 藏 号：203104648...