基于智能眼镜的手语识别系统设计

作     者：刘又瑜 谢本齐 江焕 姜林 

作者机构：湖南工商大学计算机学院湖南长沙410205 湖南工商大学前沿交叉学院湖南长沙410205 

基　　金：国家级大学生创新创业训练计划(202110554011) 

出 版 物：《电脑知识与技术》 (Computer Knowledge and Technology)

年 卷 期：2023年第19卷第4期

页      码：18-20页

摘      要：手语识别对于听障人士交流具有重要的意义。现有机器视觉手语识别系统存在因移动设备端算力不足,各框架兼容条件苛刻影响实时应用的问题。针对该问题,本文提出基于智能眼镜硬件平台和云端计算的实时手语识别系统。该系统采用智能眼镜捕获手语动作,并将该视频图片上传至云端服务器,利用部署在云端服务器上的深度学习模型对手语进行识别,最后将识别结果返回至智能眼镜。本系统深度学习识别网络采用TSN和LSTM相结合的方式,利用TSN视频动作分类能力和LSTM上下文信息建模能力准确识别手语动作。试验结果表明,本系统实时识别精度可达到95.37%,对于听障人士实时交流具有较好的应用价值。

主 题 词：智能眼镜 云服务 手语识别 听障人士 智能系统 

学科分类：081203[081203] 08[工学] 0835[0835] 0812[工学-测绘类] 

D　O　I：10.14004/j.cnki.ckt.2023.0193

馆 藏 号：203118792...