基于轻量级图卷积的人体骨架动作识别方法

作     者：孙琪翔 何宁 张聪聪 刘圣杰 SUN Qixiang;HE Ning;ZHANG Congcong;LIU Shengjie

作者机构：北京联合大学北京市信息服务工程重点实验室北京100101 北京联合大学智慧城市学院北京100101 

基　　金：国家自然科学基金(61872042,61572077) 北京市教委科技计划重点项目(KZ201911417048) 北京市教委科技计划面上项目(KM202111417009) 北京联合大学人才强校优选计划(BPHR2020AZ01,BPHR2020EZ01) 北京联合大学科研项目(ZK50202001) 北京联合大学研究生科研创新项目(YZ2020K001) 

出 版 物：《计算机工程》 (Computer Engineering)

年 卷 期：2022年第48卷第5期

页      码：306-313页

摘      要：视频中的人体动作识别在计算机视觉领域得到广泛关注,基于人体骨架的动作识别方法可以明确地表现人体动作,因此已逐渐成为该领域的重要研究方向之一。针对多数主流人体动作识别方法网络参数量大、计算复杂度高等问题,设计一种融合多流数据的轻量级图卷积网络,并将其应用于人体骨架动作识别任务。在数据预处理阶段,利用多流数据融合方法对4种特征数据流进行融合,通过一次训练就可得到最优结果,从而降低网络参数量。设计基于图卷积网络的非局部网络模块,以捕获图像的全局信息从而提高动作识别准确率。在此基础上,设计空间Ghost图卷积模块和时间Ghost图卷积模块,从网络结构上进一步降低网络参数量。在动作识别数据集NTU60 RGB+D和NTU120 RGB+D上进行实验,结果表明,与近年主流动作识别方法ST-GCN、2s AS-GCN、2s AGCN等相比,基于该轻量级图卷积网络的人体骨架动作识别方法在保持较低网络参数量的情况下能够取得较高的识别准确率。

主 题 词：人体骨架动作识别 数据融合 图卷积 非局部网络模块 Ghost网络 

学科分类：13[艺术学] 0808[工学-自动化类] 08[工学] 1305[艺术学-设计学类] 0810[工学-土木类] 0839[0839] 081104[081104] 0804[工学-材料学] 0835[0835] 081101[081101] 0701[理学-数学类] 0811[工学-水利类] 0812[工学-测绘类] 

D　O　I：10.19678/j.issn.1000-3428.0061304

馆 藏 号：203111347...