大模型常见评估方法.pdfVIP

大模型常见评估方法

目录

1.大模型常见评估方法概述3

1.1评估目的3

1.2评估指标分类3

2.评估指标5

2.1性能指标5

2.1.1准确率6

2.1.2召回率7

2.2质量指标8

2.2.1语义一致性9

2.2.2成文本流畅度10

2.2.3语法正确性10

2.3可靠性指标11

2.3.1预测稳定性12

2.3.2模型鲁棒性12

2.4效率指标13

3.评估方法14

3.1数据集评估15

3.1.1数据集准备15

3.1.2数据集划分16

3.1.3数据增强17

3.2实验评估18

3.2.1实验设计19

3.2.2实验执行20

3.2.3结果分析21

3.3用户评估22

3.3.1用户反馈收集23