7 教育测验的标准及其建立方法.ppt

例：某次语文测验共有50道试题，每题2分，今已知题目的双基度指标如表7-4所示： 解： 三、基于题目“目标—难度”层次评估法 主要思路： 根据对题目考查目标层次的认识以及对题目难易程度作出的经验判断，把整个测验卷中所有题目按照两个特征进行双向分类； 由课任教师给每一类题目指派一个临界概率。 临界概率是，设想一个尚可接受的最低能力的学生能够正确回答该类题目的可能性大小，或者说这一临界概率是对每一位合格的学生至少应答对该类题目的比例大小。 方法 课任教师把一份测验卷中的所有题目按K个考查目标能力层次进行分类，设这K类所占分数分别为M1,M2, …， Mk 把上述每一题目按照难、中、易分成三组，计算各组题目的分数，可得到测验题目双向分类下的数据块，以矩阵的形式记为： 设想一个可接受的最低能力的被试，答对上述“第i个难度层次第j个能力目标层次”所有题目的可能性大小为Pij（i=1,2,3; j=1,2…，K），得到一个概率矩阵，记为： 计算该试验的最低合格分数，记为： 进一步地，综合若干位学科专家和命题人员的意见，认为一个尚可接受的最低能力的学生，答对上述各组题目的概率为： 例：某次《教育统计学》课程结业考试，由课任教师命题双向细目表的设计，题目分成五个目标层次和难、中、易三种难度水平，得到如下双向分类数据： 解 四、基于已知“掌握—未掌握”效标组的统计分析法 切断分数的有效性 方法： 选择两组学生样本，其中一组被课任教师认为已经掌握了特定课程的内容，另一组则被公认为未掌握特定课程的内容。 把有待确定合格线的测验，放到两组学生中试测，统计两组学生的测验成绩分布，判断测验的合格线 —完— 教育测验的标准及其建立方法 第一节 教育测验标准的含义 一、对标准参照测验及其标准的再认识 心理学家波帕姆认为标准参照测验是依据实现明确规定的知识能力标准而制订，并据此标准可以对被试的测验成绩做出解释的一类测验。 标准测验主要关心的问题是要获得严格而精确的领域规范（specifications for domains)或行为领域规范。 上述定义的缺陷：“切断点”（cut-off point) 标准的内涵 从定性方面讲，标准一词指的是测验的内容或行为的范围，而这个范围是测验分数所参照的，它将通过内容领域规范得到明确； 从定量方面讲，每当人们利用标准参照测验成绩进行有关评价决策时，客观上需要一个切断点作为分类决策的依据。切断点在一定程度上体现了标准一词在测量评价功能上的定量标准。 常模参照测验与标准测验的对比 二、几个与标准参照测验相关的概念 领域参照测验（或内容参照测验，domain-referenced test）是建立在一套完善的题目汇编或内容领域规范汇编基础上用以检查被试的素质及发展水平的测验 目标参照测验是由和目标相适应的一组题目所构成的测验 掌握测验是建立一组教学和行为目标上的测验，主要用于判断学生是否掌握某组给定的教育目标 思考：领域参照测验、目标参照测验和掌握测验有何异同？ 若将“标准参照测验”视作“依据某种特定操作标准可以直接解释测量结果的及测验”，上述三种测验在本质上无多大差别。 领域参照测验可以看成标准参照测验的同义词，目标参照测验和掌握参照测验是标准参照测验的变式。 第二节 标准参照测验分数的解释 一、正确百分数 正确百分数是以学生在标准参照测验中答对题目的比例来解释测验分数或描述学生取得成就的方法。 使用百分数，应注意： 测验所要测定的内容（成就）范围必须明确，而且测验题目能够组成成为这个内容（成就）范围的代表性良好的样本 在标准参照测验中，可以针对整个测验为每一个学生确定其答案的正确百分数，对学生的内容掌握作出判断。 在课堂教学评价及其他有关资格证书的测验中，为了对多层次的测验结果分别作出解释和描述，就需要分别针对每一教育目标或内容板块去选择题目组，构成总测验。 为求客观，可利用学生测验的原始分数和测验总分数之间的关系，计算学生个人的得分百分数 二、掌握分数 掌握分数用于判断学生是否掌握所学的内容，分数的标准是人为确定的，可以是百分之评分量尺上的某一个点，也可以是80%-90%的正确反应所对应的分数，作为最低通过标准。 以掌握分数为判断标准，可将学生区分为掌握和为掌握两类 “掌握”与“未掌握”是人为确定的； 从知识的掌握状态来讲，事实上更应该是一种连续模型； “掌握”、“及格”或“合格”的概念类似，但有区别。 当利用测验的掌握分数给学生进行二分类时，对于不同的年级、不同的课程内容、不同的测验乃至同一测验中不同的分测验，人为规定的掌握分数也未必相同。 三、内容等级分数 为了更好地解释教育测验的分数，人们把内容参照和常模参照结合起来。在编制测验的过程中，不仅