视听联觉在多通道人机自然交互中的应用研究

作     者：孙晓枫 赵新军 吕春梅 张义民 SUN Xiao-feng;ZHAO Xin-jun;LV Chun-mei;ZHANG Yi-min

作者机构：东北大学辽宁沈阳110819 沈阳化工大学辽宁沈阳110142 

基　　金：国家自然科学基金联合项目(U1708254) 科技部创新方法工作专项(No.2018IM030200) 东北大学机械学院教改项目 

出 版 物：《机械设计与制造》 (Machinery Design & Manufacture)

年 卷 期：2021年第368卷第10期

页      码：236-240页

摘      要：研究视听联觉现象以及视听各因素之间存在的具体关联性,并将其应用在多通道人机自然交互中。通过实验系统的分析声音的五种心理和生理要素(音调、音速、粗糙度、尖锐度、非连续性)与多色彩组合的色相、饱和度、对比度以及位置关系等存在的交叉关联性。实验结果表明声音的部分元素如音调、粗糙度等确实与多色彩的色相、饱和度、对比度以及位置关系存在着明显的联觉效应。基于视听联觉效应和视听各元素之间存在的关联属性,设计了基于视听联觉的多通道人机自然交互模型,在模型中构建视觉因素和听觉因素之间的交叉联动关系,提升人机交互的内部处理效率和输出反馈精准度,从而有效提升人机交互的效率。

主 题 词：视听联觉 多通道 人机自然交互 

学科分类：12[管理学] 1201[管理学-管理科学与工程类] 08[工学] 082304[082304] 080204[080204] 0802[工学-机械学] 080201[080201] 0823[工学-农业工程类] 

D　O　I：10.3969/j.issn.1001-3997.2021.10.053

馆 藏 号：203105056...