项目分析中的难度分析与区分度.ppt

1、鉴别指数法 比较测验总分高和总分低的两组被试在项目通过率上的差别 例如：某高中物理测验，高分组在第5题上的通过率为0.75，低分组的通过率为0.35，则该项目的鉴别指数为： D=0.75-0.35=0.40 续上 1965年，美国测验专家伊贝尔（L.Ebel）根据长期的经验提出用鉴别指数评价项目性能的标准，如下表所示。 区分度与难度有密切关系 back 2、方差法 当n30时，属于统计上的小样本，改用 实际进行项目分析时，被试不能少于30人，提到该公式是由于练习的需要。 back 3、相关法 以项目分数与效标分数或测验总分的相关作为项目区分度的指标 续表 （1）二列相关 二列相关适用于两个连续变量，但其中一个变量被人为分成两类。公式为： 或 例：下表有20个学生语文测验总分以及在作文题和一个选择题上的得分情况，假设作文37分（包括37分）算通过，试计算作文题的区分度。 解： （2）点二列相关 点二列相关适用于一个变量为连续变量，另一个变量为二分变量的数据资料。公式为： 例如：根据上例的资料，计算选择题的区分度。 解： back (三)区分度的相对性 1.不同的计算方法，所得的区分值不同 两种相关值的比较 2.样本容量的大小影响相关法区分度值的大小 3.分组标准影响鉴别指数 4.被试样本的同质性程度影响区分度值的大小 back （一）多重选择题的项目分析 1、步骤 2、对选择项的反应模式注意从 以下几方面进行分析 3、项目分析实例 back 1、步骤 1）选取有代表性的样本370人，按规定的程序，进行预测工作； 2）把370份试卷按测验总分的高低次序排列，然后从最高分数的人开始向下取足27%（100人）为高分组，再从最低分数的人开始向上取足27%（100人）为低分组； 3）计算高分组与低分组通过每一题的比率，分别以Ph和Pl表示； 4）按照区分度与难度的公式，分别求出每一测题的难度与鉴别力指数； 5）比较高分组、低分组在测题不同答案上的反应； 6）根据测题统计分析的结果，修改测题或选择适当的测题。 back 2、对选择项的反应模式注意从以下几方面进行分析 1.如果正确的备选答案被所有的受测者选择，说明该项目太容易，或者可能是项目中提供某种暗示，使正确答案过于明显。 2.如果某个错误答案没有任何被试选择，说明该选项不具有迷惑性，错得过于明显，除了增加阅读时间外，不起任何作用。 3.如果所有被试都选择了同一个错误答案，可能是编制测验时把正确答案搞错了，也可能是在教学中发生了错误。 4.如果高分组被试的选择集中在两个答案上，二者选择率相近，说明该题可能 、本来就有两种正确答案，或者在某种意义上另一个选择项也有一定道理。 5.如果高分组对正确答案的选择率与低分组相等或低于后者，说明该题所考查的东西与被试水平无关，即不具有鉴别力。 6.如果一个题目被试未作答的人数较多（速度性测验除外），或者选择各个备选答案的人数相等，说明该项目可能过难或题意不清，被试无法作答或凭猜测作答。 back 接上 3、项目分析实例 1）区分度 取舍题目时，首先看区分度，低区分度的题目不能有效鉴别被试。 2）难度 P值一般在0.35到0.65之间为好，但就整个测验而言，难度为0.5的测题应占多数，同时也需要一些难度较大或者较小的题目。 3）选项 第一题：正误答案配比较好。第二题：除C答案缺乏鉴别能力外，其余都不错。第三题：未答的人数比例过大，且答案B、C、D均属于负向的 。第四题：A项选答的人数较少， D项也有负向性 。 4）找出原因，对各题进行修改 不要丢弃不符合要求的项目，因为 用内部一致性分析所求得的鉴别力不一定能代表试题的效度。 鉴别力指数低的试题不一定表示该试题有缺点。 课堂测验的项目分析资料的有效性是随时空而变化的，并非固定不变。 有研究表明，编制新的项目需要的时间几乎比修订现存项目长5倍。 back 表1 四种测量水平和量表对应数据特征