- 41
- 0
- 约5.85千字
- 约 20页
- 2024-01-27 发布于江苏
- 举报
第二章模型评估与选择
1.数据集包含1000个样本,其中500个正例,500个反例,将其划分为包含70%样本的训
练集和30%样本的测试集用于留出法评估,试估算共有多少种划分方式。
一个组合问题,从500500正反例中分别选出150150正反例用于留出法评估,所以可能取
1502
法应该是()。
500
2.数据集包含100个样本,其中正反例各一半,假定学习算法所产生的模型是将新样本预测
为训练样本数较多的类别(训练样本数相同时进行随机猜测),试给出用10折交叉验证法
和留一法分别对错误率进行评估所得的结果。
10折交叉检验:由于每次训练样本中正反例数目一样,所以讲结果判断为正反例的概率也
是一样的,所以错误率的期望是5050%。
留一法:如果留下的是正例,训练样本中反例的数目比正例多一个,所以留出的样本会被判
断是反例;同理,留出的是反例,则会被判断成正例,所以错误率是100%。
3.若学习器A的F1值比学习器B高,试析A的BEP值是否也比B高。
4.试述真正例率(TPR)、假正例率(FPR)与查准率(P)、查全率(R)之间的联系。
查全率:真实正例被预测为正例的比例
真正例率:真实正例被预测为正例的比例
显然查全率与真正例率是相等的。
查准率:预
原创力文档

文档评论(0)