第六章-测验项目分析.ppt

* * * * 第六章 测验的项目分析 1 测验项目的难度 2 测验项目的区分度 3 客观题的猜测问题 4 选择题的选项分析 5 目标参照测验的项目分析 难度是指被试完成测验项目任务时所遇到的难易程度。 一个项目，大部分被试都能答对， 项目的难度就小；大部分被试都不能答对，项目的难度就大。 一、难度的意义 二分法计分项目 通过率： P为项目难度，N为全体被试数，R为答对该项目的人数。 P值越大，难度越小；P值越小，难度越大。 非二分法计分项目 二、项目难度的计算-1 得分率： 为被试在某一项目上的平均得分，Xmax为该项目的满分。 P值越大，难度越小；P值越小，难度越大。 极端分组法（当被试人数较多时） 将被试依测验总分从高到低排列分成三组，总分最高和最低的27%分别为高分组和低分组。分别计算高分组和低分组的通过率，然后求项目的难度。 PH、PL分别为高分组和低分组的通过率；RH、RL分别为高分组和低分组通过该项目的人数；NH、NL分别为高分组和低分组的人数。 二、项目难度的计算-2 难度水平的适合性，取决于测验的目的和性质 标准化常模参照测验：接近0.50，范围在0.30-0.70间 标准参照测验：不必过多考虑难度 选拔和录用类测验：接近录取率 速度测验：不宜太高，且每个项目基本相等 难度测验：0.50左右 三、难度水平的确定 通过率或得分率难度属于顺序变量。 当样本容量很大时，测验分数将接近正态分布。 根据正态分布曲线表，将试题难度P作为曲线下的面积，转换成具有相等单位的等距量数，即Z分数。 转换后，较难项目难度为正值，较易项目难度为负值。 四、难度的等距变换-1 Z分数有小数点和负数。 美国教育测验服务中心难度指标： 四、难度的等距变换-2 测验难度影响测验分数的分布形态 测验难度影响测验信度 项目难度影响项目的区分度 五、难度对测验的影响 1 测验项目的难度 2 测验项目的区分度 3 客观题的猜测问题 4 选择题的选项分析 5 目标参照测验的项目分析 区分度指测验项目对被试心理品质水平差异的区分能力。 具有良好区分度的项目，能将不同水平的被试区分开来。 区分度(D)取值范围介于-1.00至+1.00之间。D为正值， 积极区分；D为负值，消极区分；D为0，无区分作用。 一、项目区分度的意义 项目鉴别指数法 PH与PL分别是高分组和低分组在该项目上的通过率。 二、区分度的计算-1 相关法：项目分数与效标分数或测验总分的相关。 点二列相关：适用于0、1记分项目。 二列相关：适用于连续测量变量，但其中一个变量被人为分为两类。 Ф相关：适用于两个变量都是二分名义变量。 积差相关：适用于多级计分题。 三、区分度的计算-2 点二列相关 rpb为点二列相关系数，xp为通过该项目被试的平均效标分数；xq为未通过该项目被试的平均效标分数；P为通过该项目被试的人数百分比；q为未通过该项目被试的人数百分比；St为全体被试的效标分数的标准差。 三、区分度的计算-3 二列相关 rb为二列相关系数，xp、xq、p、q、St的意义同点二列相关系数公式；y为正态分布p与q分割点正态曲线的高度。 三、区分度的计算-4 Ф相关 rФ为Ф的相关系数，a、b、c、d分别为四格表中四项所包含的人次数。 三、区分度的计算-5 应使整个测验难度呈正态分布，且平均水平在0.50左右。 四、区分度与难度的关系 不同计算方法所得的区分度不同。分析同一个测验时,各个项目的区分度值要采用同一种指标。 样本容量大小影响相关法区分度值的大小。样本越小，统计值越不可靠，算出r后，应进行统计检验。 分组标准影响鉴别指数值。分组越极端，D值越大。 被试团体的同质性程度影响区分度值的大小。被试团体越具有同质性，项目的区分度值就越小。 五、区分度的相对性 1 测验项目的难度 2 测验项目的区分度 3 客观题的猜测问题 4 选择题的选项分析 5 目标参照测验的项目分析 猜测率 当被试确实不知道正确答案，而每个选项具有同样的吸引力时，被试凭猜测选择正确答案的机会是1/K。 猜测误差来源 猜对相对于不猜引起的误差。 是否猜得对引起的误差。 一、猜测率与猜测误差来源 项目难度的校正 CP为校正后的通过率，P为实际通过率，Κ为备选答案数目，q=1-P。 个体得分的校正 二、猜测校正公式 S为校正后的得分，R为被试答对的项目数，W为被试答错的项目数，Κ为项目的选项数目。 可以避免降低测验的信度。 校正后的得分可以反映被试的真正水平和能力。 在教育测验中，可以培养被试诚实的美德。 比较公平。 三、猜测校正的优点 公式的基本假设不成立，即被