基于记忆迭代网络的多模态情感分析

作     者：赖河蒗 王丽丽 李玲俐 许学添 陈丽仪 LAI Helang;WANG Lili;LI Lingli;XU Xuetian;CHEN Liyi

作者机构：广东司法警官职业学院信息管理系广州510520 广东省外语艺术职业学院基础教育学院广州510640 

基　　金：广东省科技创新战略专项资金(大学生科技创新培育)项目(pdjh2024b593) 广东省教育科学规划课题(高等教育专项)(2024GXJK989) 广东省普通高校特色创新类项目(2023KTSCX250,2024WTSCX300,2023KTSCX295) 广东省第二批高职院校高水平专业群建设项目(GSPZYQ2021123) 广东司法警官职业学院第五届院级课题(2023YB08) 

出 版 物：《智能计算机与应用》 (Intelligent Computer and Applications)

年 卷 期：2024年第14卷第11期

页      码：200-205页

摘      要：在开展多模态情感分析的过程中,需要考虑2方面的关键信息:一是每种模态的内部信息,二是各模态之间的交互信息。针对如何有效地捕获以上核心信息的问题,提出一种记忆迭代网络模型。将每种模态的序列数据分别输入到其各自的循环神经网络以及注意力机制模块,处理后将所有模态序列级联并送到记忆迭代模块进行迭代处理,迭代结束后将数据经过完全连接层,降低维度后进行分类。在公开的数据集CMU-MOSI、ICT-MMMO以及YouTube上进行的实验表明,记忆迭代网络模型的准确率和F1值均有所提升。

主 题 词：记忆网络 迭代 注意力机制 多模态 情感分析 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.20169/j.issn.2095-2163.241131

馆 藏 号：203155991...