一种基于时序关系网络的逻辑推理方法

作     者：张姝楠 曹峰 郭倩 钱宇华 ZHANG Shu-nan;CAO Feng;GUO Qian;QIAN Yu-hua

作者机构：山西大学大数据科学与产业研究院太原030006 山西大学计算机与信息技术学院太原030006 山西大学计算智能与中文信息处理教育部重点实验室太原030006 

基　　金：国家自然科学基金项目(61672332,61802238,61603228,62006146,F060308) 山西省拔尖创新人才支持计划 山西省重点研发计划(国际科技合作)项目(201903D421003) 山西省三晋学者 山西省回国留学人员科研项目(2017023,2018172,HGKY2019001) 山西省青年基金项目(201901D211171,201901D211169) 

出 版 物：《计算机科学》 (Computer Science)

年 卷 期：2021年第48卷第5期

页      码：239-246页

摘      要：逻辑推理是人类智能的核心,是人工智能领域一个富有挑战性的研究课题。人类的IQ测试问题是衡量人类智商水平高低和逻辑推理能力的常用手段之一,如何让计算机学习拥有类似人类的逻辑推理能力是一个非常重要的研究内容,其目的是使计算机从给定的图像中直接学习逻辑推理模式,而无需事先为计算机设计先验推理模式。基于此目的,提出了一种新的数据集Fashion-IQ,该数据集中的每个样本包含7张输入图片和1个标签,这7张图片分别为3张包含一种或多种逻辑的问题输入图片和4张选项输入图片,目的是利用机器学习3张问题输入图片中包含的逻辑来预测下一张图片,从而选择正确的选项。为了解决这个问题,提出了一种时序关系模型。针对每个选项,该模型首先使用卷积神经网络提取前3张输入图片和选项图片的空间特征;接着采用关系网络将这4个空间特征两两组合;然后采用LSTM提取前3张问题输入图片和该选项的时序特征,将时序特征与组合好的空间特征相结合得到时序-空间融合特征;最后对前3张输入图片与每个选项得到的时序-空间融合特征进行进一步推理,采用softmax函数进行打分,得分最高的选项就是正确答案。实验结果证明,该模型在此数据集上实现了比较高的推理准确度。

主 题 词：逻辑推理 IQ测试 推理模式 时序关系网络 时序-空间融合特征 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 081104[081104] 08[工学] 0835[0835] 0811[工学-水利类] 0812[工学-测绘类] 

D　O　I：10.11896/jsjkx.201000171

馆 藏 号：203103171...