CN116433647B 一种基于多任务学习的绝缘子图像质量评价方法及系统 （华北电力大学（保定））.docxVIP

(19)国家知识产权局

(12)发明专利

(10)授权公告号CN116433647B(45)授权公告日2025.07.08

(21)申请号202310469429.4

(22)申请日2023.04.27

(65)同一申请的已公布的文献号申请公布号CN116433647A

(43)申请公布日2023.07.14

GO6V10/80(2022.01)GO6V10/774(2022.01)GO6V10/40(2022.01)

GO6V10/74(2022.01)

GO6V10/764(2022.01)

GO6N3/0464(2023.01)

(73)专利权人华北电力大学(保定)

地址071000河北省保定市莲池区永华北

大街619号

(56)对比文件

CN114897884A,2022.08.12

CN113297915A,2021.08.24

(72)发明人赵文清许丽娇李梦伟陈昊审查员徐振新

(74)专利代理机构北京和联顺知识产权代理有限公司11621

专利代理师陈菊

(51)Int.CI.

GO6T7/00(2017.01)

GO6V10/82(2022.01)权利要求书2页说明书7页附图2页

(54)发明名称

一种基于多任务学习的绝缘子图像质量评价方法及系统

(57)摘要

CN116433647B本发明公开了一种基于多任务学习的绝缘子图像质量评价方法及系统，涉及绝缘子图像评价技术领域，包括：采集高清绝缘子图像，通过添加具有等级划分的失真，综合先进的客观评价算法进行质量标签标注，构建绝缘子失真图像数据集，并通过多尺度解耦的特征提取方式，将不同层次的细粒度特征进行融合后，通过编码器进行编码，将得到的编码特征，输入到任务感知transformer解码器的任务交互块，捕获每个任务的任务交互，解码每个任务的感知特征，并依据MLP网络，对绝缘子失真图像进行评价；本发明

CN116433647B

高清绝缘子

高清绝缘子

图像

五种失真类型五种失真

程度

失真等级

客观打分

与GMSD算法PLCC检验

失真图像，分数标签

绝缘子失真图像数据集

基于多任务学习的绝缘子图像质量评价方法

构建训练集构建测试集

失真等级

质量评分

MDSI算法

质量评分

失真图像

CN116433647B权利要求书1/2页

2

1.一种基于多任务学习的绝缘子图像质量评价方法，其特征在于，包括以下步骤：

采集高清绝缘子图像，通过添加具有等级划分的失真，利用客观评价算法进行质量标签标注，构建绝缘子失真图像数据集；

基于所述绝缘子失真图像数据集，通过多尺度解耦的特征提取方式，将不同层次的细粒度特征进行融合后，通过编码器进行编码，将得到的编码特征，输入到任务感知transformer解码器的任务交互块；

基于所述任务交互块捕获每个任务的任务交互，解码每个任务的感知特征，并依据MLP网络，对绝缘子失真图像进行评价；

在通过编码器进行编码的过程中，所述编码器为可变形混合器编码器，包括依次设置的用于进行图像特征降维的线性层、用于通过标准的逐点卷积进行通道混合的通道感知模块、第一GELU激活+BatchNorm模块、用于进行空间上下文聚合获取参考点的相应偏移量的空间感知模块、第二GELU激活+BatchNorm模块、残差模块和用于扁平化图像特征的Reshape模块，其中，所述残差模块分别将所述第一GELU激活+BatchNorm模块和所述第二GELU激活+BatchNorm模块的输出连接；

在通过任务感知transformer解码器进行解码的过程中，通过两个所述可变形混合器编码器，获取两个所述编码特征；

将两个所述编码特征，输入到所述任务感知transformer解码器进行解码，其中，所述任务交互块由多头自注意力模块MHSA和小型多层感知器sMLP组成，所述多头自注意力模块MHSA用于将特征进行投影，构建包括查询、键和值矩阵的自注意力策略；所述小型多层感知器sMLP用于依据所述自注意力策略，生成质量评分任务和失真评级任务的交互特征，所述小型多层感知器sMLP由一个线性层和一个LayerNor