基于视频时空特征提取分类的动作分析评估模型.pdfVIP

2024年4月15日现代电子技术Apr.2024

第47卷第8期ModernElectronicsTechniqueVol.47No.8

160

160

DOI：10.16652/j.issn.1004⁃373x.2024.08.026

引用格式：陈迪，李焱芳，毕卫云，等.基于视频时空特征提取分类的动作分析评估模型[J].现代电子技术，2024，47（8）：160⁃164.

基于视频时空特征提取分类的动作分析评估模型

12222

陈迪，李焱芳，毕卫云，李朗，蒲珊珊

（1.空军军医大学基础医学院，陕西西安710032；2.空军军医大学第一附属医院，陕西西安710032）

摘要：为拓展机器视觉技术在医工结合场景下的应用，文中基于改进的时空Transformer模型，提出一种动作规范识

别模型。该模型由数据嵌入层、时空Transformer层、决策融合层组成。数据嵌入层利用Openpose模型从sRGB图像中提取

人体骨骼数据，降低环境部署成本；时空Transformer层使用时空模块和块间模型对图像数据特征进行训练和分类，提升原模

型的分类精度；决策融合层实现对应用场景的规范性判别。实验测试结果表明：所提算法的TOP1和TOP5精度指标在所有

对比算法中均为最优；在以心肺复苏术为例进行的实际应用测试中，该算法的综合性能较为理想，能够满足工程需要。

关键词：计算机视觉；时空Transformer模型；骨骼模型；决策融合；动作识别；多头注意力机制

中图分类号：TN919⁃34；TP391文献标识码：A文章编号：1004⁃373X（2024）08⁃0160⁃05

Anactionanalysisandevaluationmodelbasedonvideospatiotemporalfeature

extractionandclassification

12222

CHENDi,LIYanfang,BIWeiyun,LILang,PUShanshan

(1.SchoolofBasicMedicalSciences,AirForceMedicalUniversity,Xi’an710032,China;2.TheFirstAffiliatedHospitalofAFMU,Xi’an710032,China)

Abstract：Inordertoexpandtheapplicationofmachinevisiontechnologyinmedicalandindustrialintegrationscenarios,

anactionspecificationrecognitionmodelbasedonanimprovedspatiotemporalTransformermodeli