三维骨骼特征融合技术在娱乐机器人系统上的应用

作     者：潘言心 吴涓 朱兴隆 王飞 PAN Yanxin;WU Juan;ZHU Xinglong;WANG Fei

作者机构：东南大学仪器科学与工程学院江苏南京210096 

基　　金：科技创新2030-“新一代人工智能”重大项目(2018AAA0103001) 国家自然科学基金(62073073) 

出 版 物：《测控技术》 (Measurement & Control Technology)

年 卷 期：2023年第42卷第12期

页      码：11-17,28页

摘      要：针对目前娱乐机器人系统存在的体积大、不易携带和操作复杂等问题,基于MediaPipe Hand人手骨骼关节点检测框架,结合BP神经网络设计并实现了人机猜拳博弈机器人系统。该系统利用Lab-VIEW编程和NI myRIO控制器实现机械手动作控制和人机交互界面的设计,并提出一种融合特征提取方法以快速检测手势特征。为验证该机器人系统的性能,在不同环境、不同试验人员等条件下对系统进行了测试。试验结果表明,系统整体预测准确率达到99.3%,手势平均识别时间约为0.0125 s,机械手动作响应时间为0.13 s,满足了高精度和实时性要求且该系统具有较高的鲁棒性和实用性,为娱乐机器人的研究提供了一定的参考价值。

主 题 词：手势识别 MediaPipe 人机交互 LabVIEW 

学科分类：1305[艺术学-设计学类] 13[艺术学] 08[工学] 081104[081104] 0804[工学-材料学] 081101[081101] 0811[工学-水利类] 

D　O　I：10.19708/j.ckjs.2023.06.244

馆 藏 号：203125307...