《心理测量学》第十章目标参照测验.ppt

第十章 目标参照测验 第一节 概述 目标参照测验的产生 　　由于常模参照测验所存在的局限性，即并不是所有的测验都只关心个体间的差异，有些测验的目的在于了解和界定个体在测验内容上掌握的绝对水平，所以1962年戈莱塞(R.Glaser)和克劳斯（D.Klaus）首先提出了目标参照测验这一概念。目标参照测验就此产生。 目标参照测验的定义　　按照评价所参照的标准分类，心理与教育测量可分为常模参照测验、目标参照测验和潜力参照测验（P22）。　　当一个测验是以某一明确界定的内容范围为基础编制而成，并且其分数是参照该内容范围所要求的绝对标准进行解释，那么该测验被称为目标参照测验。与常模参照测验的目的在于度量和比较个体间的相对差异不同，目标参照测验的目的则在于了解个体在所规定的测量内容上的绝对水平，从而判定该个体是否达到了从事此项行为的最低标准。 第二节 目标参照测验的项目分析 内容范围的确定 在测验编制之前，必须对所欲测量的内容范围作出清晰的界定，并给予其严格的操作性定义。测验题目的选择限制在这样的内容范围之内，并且构成测验的所有题目也必须是所依据的内容范围的一个代表性样本。　　特定的测验目的常常为内容范围的界定提供依据，而界定的结果常常以双向细目表（或称测验蓝图）的形式表现出来。 下表是广东省化学高考标准化试验中使用的命题细目表（1986-1990） 测验项目的内容效度分析 专家评定法 第一步，填写项目内容评定表，在五级量表上对每个题目所测内容与项目编制者所欲测量的目标内容之间的一致性作出评定 下表是一个测验项目内容评定量表的样例 第二步，对多位专家的等级评定结果进行统计，要求计算被评定的每道题目的等级平均数和中数。（如下图） 第三步：根据每位专家在所有题目上所评等级与中数间的差异量来决定对专家的取舍，在保留的专家对题目的评定中以中数或平均数为基础判定题目内容效度的高低，进而决定题目的取舍。 测验项目的难度和区分度分析 测验的预测　　测验编制完成以后，必须选取一定数量的被试进行预测，由此获得预测数据，然后才能在此数据基础上对项目的难度和区分度进行量化分析。目标参照测验的预测方法主要有三种：前测-后测方法、已接受教学组-未接受教学组方法、对照组方法。 难度分析　　难度是指测验项目的难易程度。目标参照测验的项目难度计算与常模参照测验相同，一般以通过率来表示。但对目标参照测验的项目难度的计算，在多数情况下只是作为项目区分度的基础，这是因为目标参照测验一般注重的是所测内容范围以及被试在所测内容范围上的掌握程度，因而若某项目被确定为内容范围内所不可缺少的重要内容，那么无论该项目是难是易，均应得到保留。 区分度分析　　区分度是指测验项目对被试心理品质水平差异的区分能力。目标参照测验的项目区分度一般采用两类指标：难度差值和相关系数。　　1.难度差值　 （1）掌握组--未掌握组鉴别指数（D）　　通过上述三种预测方法中的任何一种，均可得到两组数据，一组代表掌握者水平，一组代表未掌握者水平。分别计算这两组在某项目上的平均通过率，记做PA/PB? ?? 则该项目的鉴别指数为：D=PA—PB　　　　　　　　　　　  （2）个人获得指数（DIG）??????????? 　　 采取前测--后测方法，可获得在前测中错误回答某项目而在后测中能够正确回答的被试人数比例，此即该项目的个人获得指数，其值在0-+1.00之间变化，其大小直接反映了经过教学活动之后受益的被试比例。个人获得指数越接近+1.00，表明某项目的区分度越大，越接近0，表明该项目的区分度越小。 2.相关系数　　以项目得分与测验总分之间的相关系数作为项目区分度的指标，其值在-1.00-+1.00之间变化。具体计算与分析见第六章。 第三节 目标参照测验的信度和效度 信度及其估计 不能用相关系数来表示信度指标，为什么？ 通常采用两种统计指标：分类一致性，方差分析方法－荷伊特信度 （一）分类一致性信度 　目标参照测验在其分数解释上最常见的做法就是将被试分类，一般是根据某一分数分界点将被试分为掌握者和未掌握者两类。对目标参照测验分类的一致性的度量指标，就叫做分类一致性信度。 其最常见的估计方法是考查被试在同一测验的两次施测中或两个复本的施测中是否被分在同一类中。 具体的做法类似于常模参照测验中的再测法荷复本法，但统计方法和所用指标不同。在此是将同一被试团体在两次测验结果中均被分为及格或不及格类别中的人数百分比例作为分类一致性信度的指标。　　 设两次测验记为Ａ和Ｂ，测验结果以下表表示： 根据上表，测验的分类一致性信度为两次施测中均及格和均不及格人数占总人数的比例，即： 分类一致性信度P