多尺度融合注意力机制的胆囊癌显微高光谱图像分类

作     者：高红民 朱敏 曹雪莹 李臣明 刘芹 许佩佩 Gao Hongmin;Zhu Min;Cao Xueying;Li Chenming;Liu Qin;Xu Peipei

作者机构：河海大学信息学部计算机与信息学院南京211100 南京大学医学院附属鼓楼医院血液科南京211108 华东师范大学上海市多维度信息处理重点实验室上海200241 南京大学医学院附属鼓楼医院肿瘤科南京211108 

基　　金：南京市卫生科技发展专项资金项目(YKK22087) 上海市多维信息处理重点实验室开放课题基金项目 

出 版 物：《中国图象图形学报》 (Journal of Image and Graphics)

年 卷 期：2023年第28卷第4期

页      码：1173-1185页

摘      要：目的胆囊癌作为胆道系统中一种恶性程度极高的肿瘤,早期诊断困难、预后极差,因此准确鉴别胆囊病变对早期发现胆囊癌具有重要意义。目前胆囊癌的诊断主要依赖于超声、CT(computed tomography)等传统影像学方法,但准确性较低。显微高光谱能够在获取生物组织图像信息的同时从生化角度对生物组织进行分析,从而实现对胆囊癌的早期诊断,相比于传统医学图像更具优势。因此,本文基于胆囊癌显微高光谱图像设计了一种基于多尺度融合注意力机制的网络模型,以提高分类准确率。方法提出多尺度融合注意力模块(multiscale squeeze-andexcitation-residual,MSE-Res)。MSE-Res模块引入改进的多尺度特征提取模块实现通道维上特征的融合,用一个最大池化层和一个上采样层代替1×1的卷积层来提取图像的显著特征。为了弥补池化层丢失的局部信息,在跳跃连接中加入一个1×1的卷积层。在多尺度特征提取模块后,引入注意力机制来学习不同通道间特征的相关性,实现通道间特征的融合,并通过残差连接使网络在提取图像深层特征的同时避免出现过拟合现象。结果在胆囊癌高光谱数据集上进行实验,本文模型的总体分类精度、平均分类精度和Kappa系数分别为99.599%、99.546%和0.990,性能优于SE-ResNet(squeeze-and-excitation-residualnetwork)和Inception-SE-ResNet(inception-squeeze-andexcitation-residual network)。结论本文提出的MSE-ResNet能够有效利用高光谱图像的空间信息和光谱信息,提高胆囊癌分类准确率,在对胆囊癌的医学诊断方面具有一定的研究价值和现实意义。

主 题 词：胆囊癌高光谱图像 多尺度特征融合 残差网络 图像分类 SE模块 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

核心收录：

D　O　I：10.11834/jig.211201

馆 藏 号：203121185...