原创力文档- 1、本文档共25页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
ICS国际标准分类号
CCS中国标准文献分类号
团体标准
T/CESXXXXXXX
电力人工智能自然语言处理模型评价规
范
Specificationforevaluationofnatural
languageprocessingmodelofelectric
powerartificialintelligence
（征求意见稿）
XXXX-XX-XX发布XXXX-XX-XX实施
中国电工技术学会发布
T/CESXXX—XXXX
目次
目次I
前言III
1范围1
2规范性引用文件1
3术语和定义1
4符号、代号和缩略语1
5.模型基础信息2
5.1模型描述信息2
5.2模型文件2
6.评价指标与计算方法2
6.1性能指标2
6.2效率性指标5
6.3鲁棒性指标6
7.评价流程与方法6
7.1评价流程6
7.2评价方法6
7.2.1模型基础信息完备性评价6
7.2.2确定模型分类和模型任务7
7.2.3选择评价指标7
7.2.4选择测试数据集7
附录A（规范性附录）人工智能自然语言处理模型评价指标计算方法8
A.1性能指标8
A.1.1正确率8
A.1.2准确率8
A.1.3召回率8
A.1.4平均精度8
A.1.5平均正确率8
A.1.6平均精确率9
A.1.7平均召回率9
I
T/CESXXX—XXXX
A.1.8平均精度均值9
A.1.9平均交并比9
A.1.10曲线下面积9
A.1.11决定系数10
A.1.12兰德系数10
A.1.13调整兰德系数10
A.1.14F1值10
A.1.15余弦相似度10
A.1.16词语相似度准确率11
A.1.17困惑度11
A.1.18带标签依存关系准确率11
A.1.19无标签依存关系准确率11
A.1.20ROUGE-1值11
A.1.21短文本相似度准确率11
A.1.22BLEU-1值12
A.1.23知识写入速度12
A.1.24检索响应时间12
A.1.25知识抽取速度12
A.1.26检索吞吐量13
A.2效率性指标13
文档评论（0）