文档名：基于双重时空特征金字塔的人体行为识别
摘要：针对目前人体动作存在着行为识别准确率低的问题,提出一种基于双重时空特征金字塔网络结构的人体行为识别方法—DSTFP.该方法使用SlowFast网络作为骨干网络提取不同尺度的特征,并将多个尺度的特征输入双重时空特征金字塔进行处理以增加网络对多个尺度的敏感度.第一重为语义增强金字塔(SEEP),自顶向下融合多个尺度的特征,在不同尺度的特征中传递高层语义信息;第二重为空间增强金字塔(SPEP),采用自底向上的融合方式,在不同尺度的特征中传递空间定位信息.在公共数据集AVA上的实验结果表明:该方法能获得24.97mAP,相较于原网络提升了0.77mAP,并有效地提升了人体行为识别的准确度,相比于同类算法更符合实际应用需求.
Abstract：Aimingattheproblemoflowaccuracyofhumanactionrecognitionatpresent,ahumanactionrecognitionmethod,DSTFP,basedondualspatiotemporalfeaturepyramidnetworkstructureisproposed.ThismethodusestheSlowFastnetworkasthebackbonenetworktoextractfeaturesofdifferentscales,andthefeaturesofmultiplescalesareinputintoadualspatiotemporalfeaturepyramidforprocessingtoincreasethesensitivityofnetwork'stomultiplescales.Thefirststepisthesemanticenhancementpyramid(SEEP),whichfusesfeaturesofmultiplescalesfromtoptobottom,andhigh-levelsemanticinformationistransmittedinthefeaturesofdifferentscales.Thesecondstepisthespatialenhancementpyramid(SPEP),abottom-upfusionmethodisadopted.Thespatialpositioninginformationistransmittedinthefeatureofdifferentscales.TheexperimentalresultsonthepublicdatasetAVAshowthatthismethodcanobtain24.97mAP,whichis0.77mAPhigherthantheoriginalnetwork,andeffectivelyimprovestheaccuracyofhumanbehaviorrecognition.Comparedwithsimilaralgorithms,itmeetsrequirementsofpracticalapplicationbetter.
作者：李贵 袁家政 刘宏哲 徐成 Author：LIGui YUANJiazheng LIUHongzhe XUCheng
作者单位：北京联合大学北京市信息服务工程重点实验室,北京100101北京开放大学科学技术学院,北京100081
刊名：传感器与微系统
Journal：TransducerandMicrosystemTechnologies
年，卷(期)：2024, 43(4)
分类号：TP391.4
关键词：神经网络 特征金字塔 多尺度融合 人体行为识别 视频理解
Keywords：neuralnetwork featurepyramid multi-scalefusion humanactionrecognition videounderstanding
机标分类号：TP391TN911.73-34TP79:5762.3+2
在线出版日期：2024年4月26日
基金项目：国家自然科学基金，国家自然科学基金，国家自然科学基金，国家自然科学基金，国家自然科学基金，北京市重点科技项目，北京市重点科技项目，协同创新中心，北京联合大学学术研究项目，北京联合大学学术研究项目，北京联合大学学术研究项目，北京联合大学学术研究项目基于双重时空特征金字塔的人体行为识别[
期刊论文] 传感器与微系统--2024, 43(4)李贵 袁家政 刘宏哲 徐成针对目前人体动作存在着行为识别准确率低的问题,提出一种基于双重时空特征金字塔网络结构的人体行为识别方法—DSTFP.该方法使用SlowFast网络作为骨干网络提取不同尺度的特征,并将多个尺度的特征输入双重时空特征金字塔...参考文献和引证文献
参考文献
引证文献
本文读者也读过
相似文献
相关博文
基于双重时空特征金字塔的人体行为识别 Human behavior recognition based on double spatiotemporal feature pyramid
基于双重时空特征金字塔的人体行为识别.pdf
- 文件大小:
- 2.69 MB
- 下载次数:
- 60
-
高速下载
|
