基于MediaPipe手势识别的聋哑人交流系统设计

作     者：范羽 梁梓康 徐明坤 陈伟锋 蔡梓涵 吴俊晓 

作者机构：肇庆学院电子与电气工程学院广东肇庆526061 

基　　金：广东省大学生创新创业项目(S202310580056) 肇庆学院质量工程及教学改革项目(zlgc02223) 

出 版 物：《轻工科技》 (Light Industry Science and Technology)

年 卷 期：2024年第40卷第5期

页      码：99-102页

摘      要：随着感知计算以及计算机技术的发展,使用各种传感器设备实时感知并捕捉手势运动数据,为人机交互提供了新的引擎动力,并被广泛地应用于虚拟现实、医疗辅助和智能家居系统等多个领域。聋哑人群体在社会交流中面临着诸多困难,为了帮助他们更好地融入社会,本文设计一款基于MediaPipe手势识别的聋哑人交流系统,对手势检测部分定位到的区域进行手部关键点检测,并提取相关特征,再将其转化为文字或语音信息,有效地解决聋哑人实时交流与沟通。实验结果证实了手势识别模型的精确率平均值为97.9%,实现方法相对简单准确率高,有较好的市场应用前景。

主 题 词：手势识别 语音识别 目标检测 深度学习 MediaPipe 

学科分类：08[工学] 0835[0835] 081202[081202] 0812[工学-测绘类] 

馆 藏 号：203140730...