TCES 208-2023 电力视觉检测算法评价方法.docxVIP

ICS29.240.30

CCSF20/29

团 体 标 准

T/CES208—2023

电力视觉检测算法评价方法

Evaluationmethodofpowervisiondetectionalgorithm

2023-09-08发布 2023-09-11实施

中国电工技术学会发布

T/CES

T/CES208—2023

T/CES

T/CES208—2023

目 次

前言 II

范围 1

规范性引用文件 1

术语和定义 1

符号、代号和缩略语 3

评价指标与计算方法 3

性能指标 3

效率性 6

稳定性 6

可信性 7

评价数据集的质量要求 7

可见光图片的质量要求 7

红外线图片的质量要求 8

紫外线图片的质量要求 8

评价方法 8

评价流程 8

评价方法 8

附录A（资料性附录） 模型质量等级判定参考建议 14

模型质量等级判定 14

分割模型质量等级判定 14

分类模型质量等级判定 15

I

前 言

本文件按照GB/T1.1—2020《标准化工作导则 第1部分：标准化文件的结构和起草规则》的规定起草。

请注意本文件的某些内容可能涉及专利。本文件的发布机构不承担识别专利的责任。本文件由中国电工技术学会提出。

本文件由中国电工技术学会标准工作委员会能源智慧化工作组归口。

本文件起草单位：国网河北省电力有限公司电力科学研究院、河北工业大学、中国电力科学研究院有限公司、国网雄安新区供电公司、华北电力大学、智洋创新科技股份有限公司。

本文件主要起草人：刘良帅、陈泽、李喆锋、赵建利、霍振飞、赵建斌、赵劭康、姬艳鹏、杜晓东、冯海燕、景皓、董娜、王春璞、陈海永、周颖、林涛、刘坤、龚奕霖、张东岳、刘博洋、曹振、王晓辉、李道兴、郑碧煌、季知祥、郭鹏天、陶陈彬、计昊、赵振兵、翟永杰、赵文清、张磊、朱言庆、申朕。

本文件为首次发布。

II

T/CES

T/CES208—2023

T/CES

T/CES208—2023

PAGE

PAGE11

PAGE

PAGE10

电力视觉检测算法评价方法

范围

本文件规定了电力场景视觉检测算法的指标计算方法、评价数据集的质量要求、模型测试过程和模型质量评价过程。通过对电力视觉检测算法进行定量和可对比的测试，为电力各业务领域视觉检测模型研发、入网，在运等环节的评价工作提供量化参考依据。

本文件适用于电力生产场景中含有可见光场景目标图片、红外光场景目标图片或紫外光场景目标图片进行检测、分割或分类的人工智能模型的评价。主要用于评价输电、变电、配电等专业智能巡检业务中应用到的设备本体或周围环境缺陷视觉检测模型，以及电力生产作业现场违章行为智能识别业务中应用到的行为违章、装置违章或管理违章视觉检测模型等场景。

规范性引用文件

下列文件中的内容通过文中的规范性引用而构成本文件必不可少的条款。其中，注日期的引用文件，仅该日期对应的版本适用于本文件；不注日期的引用文件，其最新版本（包括所有的修改单）适用于本文件。

ITU-TLSuppl.48:Datacentreenergysaving:Applicationofartificialintelligencetechnologyinimprovingenergyefficiencyoftelecommunicationroomanddatacentreinfrastructure.

ITU-TF.748.12:Deeplearningsoftwareframeworkevaluationmethodology.GB/T41867—2022 信息技术 人工智能 术语

GB/T5271.28—2001 信息技术 词汇 第28部分：人工智能 基本概念与专家系统

Q/GDW12118.1—2021 人工智能平台架构及技术要求 第1部分：总体架构与技术要求

Q/GDW12118.2—2021 人工智能平台架构及技术要求 第2部分：算法模型共享应用要求

Q/GDW12118.3—2021 人工智能平台架构及技术要求 第3部分：样本库格式要求

T.Lin,M.Maire,S.Belongie,etal.《MicrosoftCOCO:CommonObjectsinContext》,2014.

术语和定义

下列术语和定义适用于本文件。

人工智能 artificialintelligence(AI)

Aninterdisciplinaryfield,usuallyregardedasabranchofcomputerscience,dealingwithmodelsand

s