CN115862136B 基于骨骼关节的轻量级加油员行为识别方法及装置 （上海承飞航空特种设备有限公司）.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN115862136B(45)授权公告日2025.07.01

(21)申请号202211555546.4

(22)申请日2022.12.06

(65)同一申请的已公布的文献号申请公布号CN115862136A

(43)申请公布日2023.03.28

(73)专利权人上海承飞航空特种设备有限公司地址200613上海市松江区花卉路55号

(72)发明人王雷管大胜张志军刘聪

裘函

(74)专利代理机构北京一枝笔知识产权代理事

务所(普通合伙)11791专利代理师张庆瑞

GO6V20/52(2022.01)GO6V10/764(2022.01)

GO6V10/774(2022.01)

GO6N3/08(2023.01)

GO6N3/0464(2023.01)

(56)对比文件

CN113436227A,2021.09.24

EP3709224A1,2020.09.16审查员何健伦

(51)Int.CI.

GO6V40/20(2022.01)

GO6V20/40(2022.01)权利要求书2页说明书10页附图4页

(54)发明名称

基于骨骼关节的轻量级加油员行为识别方

法及装置

(57)摘要

CN115862136B基于骨骼关节的轻量级加油员行为识别方法及装置，该方法利用人体目标检测网络对预处理后的行为图像进行基础特征提取，并以卷积特征块上的每个像素点为中心构造预设尺度的锚框；遍历行为图像的像素点得到预测锚框，获取预测锚框和真实人体锚框的重合部分，根据重叠率判定样本类型，利用判定的样本类型训练人体目标检测网络；将人体目标检测网络获取的前后两帧对应的锚框进行检测目标关联，以跟踪人体目标得到人体运动轨迹检测框；将人体运动轨迹检测框送入人体目标检测网络获得人体目标姿态信息，人体目标姿态信息包括人体骨骼关键点，利用人体骨骼关键点进行加油员行为识别。

CN115862136B

采集待识别的行为图像，将所述行为图像进

行解码，对解码后的所述行为图像进行尺寸预处理

构建人体目标检测网络，利用所述人体目标

检测网络对预处理后的所述行为图像进行基

础特征提取，并以卷积特征块上的每个像素

点为中心构造预设尺度的锚框

遍历所述行为图像的像素点得到预测锚框，

获取预测错框和真实人体锚框的重合部分，

根据重叠率判定样本类型，利用判定的样本

类型训练所述人体目标检测网络

将所述人体目标检测网络获取的前后两帧对

应的锚框进行检测目标关联，以跟踪人体目

标得到人体运动轨迹检测框

将所述人体运动轨迹检测框送入所述人体目

标检测网络获得人体目标姿态信息，所述人

体目标姿态信息包括人体骨骼关键点，利用

人体骨骼关键点进行加油员行为识别

S1

S4

CN115862136B权利要求书1/2页

2

1.基于骨骼关节的轻量级加油员行为识别方法，其特征在于，包括：

采集待识别的行为图像，将所述行为图像进行解码，对解码后的所述行为图像进行尺寸预处理；

构建人体目标检测网络，利用所述人体目标检测网络对预处理后的所述行为图像进行基础特征提取，并以卷积特征块上的每个像素点为中心构造预设尺度的锚框；

遍历所述行为图像的像素点得到预测锚框，获取预测锚框和真实人体锚框的重合部分，根据重叠率判定样本类型，利用判定的样本类型训练所述人体目标检测网络；

将所述人体目标检测网络获取的前后两帧对应的锚框进行检测目标关联，以跟踪人体目标得到人体运动轨迹检测框；

将所述人体运动轨迹检测框送入所述人体目标检测网络获得人体目标姿态信息，所述人体目标姿态信息包括人体骨骼关键点，利用人体骨骼关键点进行加油员行为识别。

2.根据权利要求1所述的基于骨骼关节的轻量级加油员行为识别方法，其特征在于，所述人体目标检测网络包括Block单元和SandGlass单元；

所述Block单元通过逐点卷积进行维度扩展，所述Block单元通过深度卷积提取通道特

征；

所述SandGlass单元采用两次深度卷积和两层逐点卷积进行维度缩放。

3.根据权利要求2所述的基于骨骼关节的轻量级加油员行为识别方法，其特征在于，所述人体目标检测网