第五讲项目分析.pptVIP

第五讲 项目分析 内容梗概 难度 区分度 猜测问题与猜测率 多重选择题的项目分析 第一节 测验的难度 一、难度的定义 难度是指测验项目的难易程度。用正确做对一个题目的比率或通过百分比(percentage passing) 表示，记为P。 二、难度的计算 二、难度的计算 三、难度的确定 1.合适的难度水平取决于测验目的、测验性质和项目形式。 2.标准参照测验可不必过多考虑项目难度。 3.选拔测验的项目难度应控制在录取率左右。 4.通常情况下，应该使整个测验的项目难度呈正态分布，且平均难度为0.50左右。 四、难度的等距转换 1.以项目通过率表示难度属于顺序变量。 2.当样本容量很大时，测验分数接近正态分布。依据正态分布曲线表，将项目P作为正态曲线下的面积，转换成Z分数（等距变量）。 3.美国教育测验服务中心（ETS）的难度指标： Δ=13+4×Z 五、难度对测验的影响 1. 影响测验分数的分布形态 （1）难度过高，正偏态 （2）难度过低，负偏态 （3）中等难度，正态分布 2. 影响测验分数的离散程度 （1）难度过高或难度过低，全距较小 （2）难度集中在0.50左右，全距较大 第二节 测验的区分度 一、区分度的定义 区分度是指测验项目对被试心理特质水平差异的区分程度和鉴别能力。 区分度是测验是否有效的指示器，是评价项目质量、筛选项目和主要依据。 二、区分度的计算 （一）项目鉴别指数法 1.计算公式 教材78页，公式6.5。 2.评价标准 教材79页，表6-1。 3.分组方法 27%，33%，50% 二、区分度的计算 （二）相关法 1.点二列相关 2.二列相关 3.φ相关 4.积差相关 三、区分度与难度的关系 三、区分度与难度的关系 1.中等难度水平项目区分度最高。 2.较难的项目对高水平的被试的区分度高，较易的项目对低水平被试区分度高，中等难度的项目对中等水平被试的区分度高。 3.对被试总体较难或较易的项目，对水平高或低的被试则成了中等难度的项目。 四、区分度的相对性 1.不同计算方法所得的区分度值不同 2.样本容量影响由相关法计算的区分度值 3.分组标准影响鉴别指数值 4.被试样本的同质性程度影响区分度值 第三节 猜测问题与猜测率 一、猜测误差 1.猜相对于不猜的误差 2.是否猜对引发的误差 二、猜测的校正 1.被试群体难度校正：教材86页，公式6.11。 2.单个被试分数校正：教材87页，公式6.12。 三、关于猜测校正的争论 （一）支持的观点 1.可避免降低测验的信度 2.可反映被试的真实水平 3.可培养被试诚实的美德 4.比较公平 三、关于猜测校正的争论 （二）反对的观点 1.校正公式的基本假设不成立 2.若被试作答所有试题，校正分数无实质作用 3.不采用猜测校正对信度无重大影响 4.可能导致无法解释的现象 5.合理猜测是值得培养的习惯 第四节 多重选择题的项目分析 一、作用 1.项目是否具有预期功能？ 2.项目难度是否恰当？ 3.项目是否有缺陷？ 4.诱答选项是否有效？ 二、具体步骤 1.按被试总分从高到低依次排列试卷 2.以27%比例分别取高分组和低分组 3.分别登记高低分组中各选项的人数 4.根据登记结果对选项进行质量分析 三、需要注意的反应模式 1.正确项被所有人选，说明太容易或太明显。 2.错误答案没有被试选择，说明迷惑性不强。 3.所有人选择同一错误答案，答案可能有误。 4.高分组集中在两个选项上，两者选择率相近，可能存在两个正确答案。 5.高分组正确率不高于低分组，项目区分度低。 6.未作答人数多或各个备选答案人数差不多，说明题目过难或题意不清。 * *