基于Leap Motion的虚拟课堂手势交互方法

作     者：胡发丽 高全力 王西汉 李庆敏 HU Fa-Li;GAO Quan-Li;WANG Xi-Han;LI Qing-Min

作者机构：西安工程大学计算机科学学院西安710048 

基　　金：国家科技支撑计划子课题(2018YFB1004501) 陕西省重点产业创新链项目(2020ZDLGY07-05) 国家自然科学基金青年项目(61902300) 

出 版 物：《计算机系统应用》 (Computer Systems & Applications)

年 卷 期：2022年第31卷第8期

页      码：160-168页

摘      要：随着虚拟现实技术的飞速发展,Leap Motion等体感传感器出现并被广泛地应用在人机交互中.针对Leap Motion体感控制器在识别范围边缘识别率低且识别速度慢的问题提出了一种基于深度神经网络的Leap Motion手势交互方法.该方法在定义的交互手势基础上,设计了三维交互系统并应用到虚拟场景中.系统首先通过Leap Motion进行数据捕捉,对获取到的红外图像采用深度神经网络进行特征提取并实现对手势的分类识别,然后结合Leap Motion获取的手部坐标前后帧的变化来判断动态手势,最终结合动态手势完成虚拟场景中的交互功能.经过实验验证,本文手势识别方法无论是在识别速度还是识别精度上都优于Leap Motion自带的手势识别方法,同时在Leap Motion识别范围边界处仍能保持较高的识别率.

主 题 词：虚拟课堂 虚拟现实 手势交互 Leap Motion 深度神经网络 

学科分类：0401[教育学-教育学类] 04[教育学] 08[工学] 080203[080203] 0802[工学-机械学] 040110[040110] 

D　O　I：10.15888/j.cnki.csa.008626

馆 藏 号：203114074...