效度、信度和难度.docVIP

试卷质量的评估 一套试卷设计好了，并且对学生进行了测试，如何知道这份试卷的质量呢？评估的主要标准是什么？一般情况下看它的效度（validity）、信度（reliability）、难度（difficulty）、区分度（discrimination） 1、效度 效度，又称有效性。它指一套试题所考的是否就是命题人想要考的内容。或者说在多大程度上考了想要考的内容。效度的高低是衡量一次考试最重要的指标，或者说是这次考试的基本出发点。一次效度很低的考试是没有意义的。 比如我们把 Is Architecture an Art or Science?作为题目考查高中学生的书面表达能力就显得很不合适，或者说是无效的。因为这个题目要求学生首先要懂得建筑学，其次，还要对艺术和科学的范畴也有一个比较清晰的了解才有写作的表达。因此，题目太难，内容超出了高中毕业生的知识范围的考试就谈不上有效。 如何确定考试的有效性？我们可以根据考试大纲从三个方面进行判断： 考试内容是否和考试的目标有关。（听力、语法、词汇、语句、阅读、写作） 考试内容（试题）是否具有代表性。比如考查词汇能力时不可能考查学生学过的所有词汇，只能从中抽取一部分作为样本来考查；这个样本的代表性如何直接影响考试效度的高低。样本是否全面地、充分地体现了要考查的全部内容，也就是说试卷中是否有足够的题目去体现要考查的各方面的内容。 考试内容是否适合考试对象（学生）。即题目不能太难，也不能太易。 那么，如何保证考试内容的高效度呢? 第一，命题前要根据考纲、教学内容和教学目标拟定好考试的内容，并一一罗列出来。这个内容细目表越详细、越明确越好。然后再按照这个表去命制具体的题目。第二，题目编好后，要请有经验的老师审定，这样可以保证测试内容的全面和合理。 2、信度 试卷的信度是指考试结果的可靠性和稳定性。换句话说就是拿一份试卷对同一组学生进行两次或多次测试，如果测试结果很一致，那就说明该试卷的信度较高。这种信度实际上有两层意思：有不同的评卷人阅卷，所得分数大致相同；同一个评卷人在不同的时间阅卷，所得分数也大致相同。 3、难度 分析一套试卷的质量如何，除了看其效度和信度这两个重要指标外，还要看难度系数（index of difficulty 或 facility value），即试题的难易度。 难度系数的计算方法 试题的难易度通常用P来表示。P值实际上指的是答对题目的比率。假如有10名考生，某道题目有8人答对，那么该题的难度值： P===0.8 （公式1） P===0.38 （公式2） 一般来讲，考试的目的就是把好学生和差学生区分开来。如果题目过易（如P=1,即所有的考生都答对该题或得满分）或过难（如P=0,即没有一个考生答对该题或该题平均分为0）这样的题目形同虚设，无法将考生区分开来。 把握难度系数的意义： 如果有100名考生，某道题只有一个人答对，P=0.01, 该题可以把一个考生从99个考生中区分出来，也就是说P=0.01的试题可以做99次区分。如果P=0.5,说明100个考生中有50人答对，50人没有答对。那么，该题目可以做50×50=2500次区分，区分能力最强。当然，要保证所有题目的难度系数都达到0.5是不可能的。一般情况下，题目的难度最好控制在0.3～0.7之间，平均难度把握在0.5左右。