基于关节点遮挡推测的多相机手姿态估计方法

作     者：谢清超 晁建刚 柴秀娟 林万洪 熊颖 杨进 XIE Qingchao;CHAO Jiangang;CHAI Xiujuan;LIN Wanhong;XIONG Ying;YANG Jin

作者机构：中国航天员科研训练中心北京100094 中国科学院计算技术研究所北京100190 

基　　金：中国航天医学工程预先研究项目(2013SY54A1303) 

出 版 物：《载人航天》 (Manned Spaceflight)

年 卷 期：2017年第23卷第3期

页      码：403-407页

摘      要：基于视觉的手势交互技术被应用在航天员虚拟训练系统中,其中基于视觉的手姿态估计方法是关键。由于手部关节多、自由度高,因此航天员在操作过程中易出现手势自遮挡,此时难以准确重建航天员手势操作,进而难以构建合适的虚拟训练系统。当关节点严重自遮挡时,甚至出现不能被识别或姿态估计结果畸形的情况。为此提出了基于关节点遮挡预测的多相机融合手姿态估计方法,在不同视角利用单幅手部图像进行关节点遮挡预测和手姿态估计,再依据关节点遮挡预测结果,在决策端将各视角的手姿态估计结果进行融合;并采集双视角手势操作视频样例,设计融合实验进行验证。实验结果表明:通过融合可以有效解决单一视角自遮挡严重、手姿态难以估计的问题,避免了传统多相机方法的相机校准和数据特征匹配过程,在保证算法实时性的基础上提高了手姿态估计的精度。

主 题 词：航天员训练 遮挡预测 手姿态估计 多相机 

学科分类：08[工学] 080203[080203] 0802[工学-机械学] 

核心收录：

D　O　I：10.16329/j.cnki.zrht.2017.03.019

馆 藏 号：203233221...