AI 模型效果评测技师考试试卷及答案.docVIP

AI模型效果评测技师考试试卷及答案

一、填空题（每题1分，共10分）

1.分类模型中，正确预测的正例数占所有实际正例数的比例称为______。

2.混淆矩阵中，TN表示______的数量。

3.评估模型泛化能力的常用方法是______。

4.ROC曲线的横轴是假阳性率，纵轴是______。

5.针对不平衡数据集，常使用______作为核心评测指标（非准确率）。

6.A/B测试中，两组用户需满足______原则以保证结果可比性。

7.模型评测时，数据集通常划分为训练集、验证集和______。

8.PR曲线下面积（AUC-PR）越______，模型性能越好。

9.语言模型的______越低，说明对文本的预测越准确。

10.多分类模型的宏平均是对每个类别计算指标后取______。

答案：

1.召回率2.真阴性3.交叉验证4.真阳性率5.F1分数6.随机分配7.测试集8.大9.困惑度10.算术平均

二、单项选择题（每题2分，共20分）

1.下列哪个指标不适合评估不平衡数据集？

A.准确率B.精确率C.召回率D.F1分数

2.完美分类器的ROC曲线AUC值为？

A.0B.0.5C.1D.0.8

3.以下不属于离线评测方法的是？

A.交叉验证B.混淆矩阵分析C.A/B测试D.困惑度计算

4.精确率（Precision）的计算公式是？

A.TP/(TP+FN)B.TP/(TP+FP)C.TN/