基于图卷积与规则匹配的单兵动作识别

文档摘要：针对基于骨架数据的动作识别方法存在语义理解方面不足,以及骨架数据获取不全导致识别准确率较低的问题,本文提出了一种基于融合语义分析的图卷积与规则匹配的单兵动作识别方法.首先,使用OpenPose姿态估计模型对士兵作战视频进行骨骼关键点提取;然后,根据有效骨骼关键点提取情况,动态选择基于目标检测模型(YouOnlyLookOnce,YOLO)的单兵动作识别方法或基于图卷积的动作识别方法;最后,针对图卷积网络置信度不高的判别结果引入规则匹配算法进一步完成单兵动作识别判定.实验结果表明,与时空图卷积网络(SpatialTemporalGraphConvolutionalNetworks,ST-GCN)算法和双流自适应图卷积网络(Two-StreamAdaptiveGraphConvolutionalNetworks,2s-AGCN)算法相比,该方法在单兵动作识别任务中准确率分别提高了约38％与11％.

Abstract：Aimingattheproblemthattheactionrecognitionmethodbasedonskeletondatahasinsufficientsemanticunderstandingandincompleteacquisitionofskeletondata,resultinginlowrecognitionaccuracy,asinglesoldieractionrecognitionmethodbasedongraphconvolutionandrulematchingbasedonfusionsemanticanalysisisproposed.Firstly,theOpenPoseposeestimationmodelisusedtoextracttheskeletalkeypointsofthesoldiercombatvideo.Then,accordingtotheeffectiveskeletonkeypointextraction,theYouOnlyLookOnce(YOLO)basedindividualactionrecognitionmethodorthegraphconvolutionbasedactionrecognitionmethodaredynamicallyselected.Finally,arulematchingalgorithmisintroducedtofurthercompleteindividualactionrecognitionandjudgmentforthelowconfidencediscriminationresultsofgraphconvolutionalnetwork.ExperimentalresultsshowthatcomparedwithSpatialTemporalGraphConvolutionalNetworks(ST-GCN)algorithmandTwo-StreamAdaptiveGraphConvolutionalNetworks(2s-AGCN)lgorithm,thismethodimprovestheaccuracyofindividualactionrecognitiontasksbyabout38％and11％.

作者：童立靖  冯金芝  英溢卓  曹楠Author：TONGLijing  FENGJinzhi  YINGYizhuo  CAONan
作者单位：北方工业大学信息学院,北京100144
刊名：北方工业大学学报
Journal：JournalofNorthChinaUniversityofTechnology
年，卷(期)：2024, 36(1)
分类号：TP391.41
关键词：动作识别  语义分析  图卷积  规则匹配  OpenPose  目标检测模型(YOLO)  
Keywords：actionrecognition  semanticanalysis  graphconvolutional  rulematching  OpenPose  YOLO  
机标分类号：TP391.41TN911.73TP242.3
在线出版日期：2024年7月2日
基金项目：北京市属高校青年拔尖人才培养计划项目基于图卷积与规则匹配的单兵动作识别[
期刊论文]  北方工业大学学报--2024, 36(1)童立靖  冯金芝  英溢卓  曹楠针对基于骨架数据的动作识别方法存在语义理解方面不足,以及骨架数据获取不全导致识别准确率较低的问题,本文提出了一种基于融合语义分析的图卷积与规则匹配的单兵动作识别方法.首先,使用OpenPose姿态估计模型对士兵作战...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文

关键词：动作识别,语义分析,图卷积,规则匹配,OpenPose,目标检测模型(YOLO),

2024-10-4 00:50 上传 基于图卷积与规则匹配的单兵动作识别.pdf

文件大小:

1.36 MB

下载次数:

60

高速下载