测量学-0测验项目的质量分析.pptVIP

一、难度的意义 难度就是测验项目的难易程度 通常以试题的“通过率”作为难度指标 难度是分析测验项目的重要指标之一 二、难度的计算 1、二分法记分项目的难度计算 （1）基本法 对二分法记分的客观性测验项目的难度系数通常以答对或通过该项目人数的百分比来表示： （2）极端分组法 当被试人数较多时，则先将被试按测验总分从高到低排列，分成三组，总分最高的27%被试称为高分组，总分最低的27%被试为低分组，分别计算高分组和低分组的通过率，然后再求项目的难度。 2、多分值记分项目的难度计算 （1）基本法 当被试人数较少时，采用基本法计算难度 ： 三、难度的等距变换 1、难度的缺陷 难度指标属于顺序变量，不具有相等单位。不能进行差异大小比较，也不能直接计算平均难度。 2、难度转化为Z分数 当样本容量很大时，测验分数接近正态分布。可根据正态分布表，将试题的难度P作为正态曲线下面积，转换成具有相等单位的等距量数，即Z分数。 较难项目难度为正值，较易项目难度为负值。 3、Z分数的变式 常用的是美国教育测量服务中心采用的难度指标： 四、难度对测验的影响 1.测验难度影响测验分数的分布形态 难度大呈正偏态，难度小呈负偏态 难度适中呈正态分布 2.测验难度影响测验分数的离散程度 难度偏大或偏小，离散程度小，分数较集中 难度适中，离散程度大，分数分布范围大 五、测验难度水平的确定 1.测验的平均难度应接近0.50左右 即0.50±0.20 2.测验的难度应该由测验的目的确定（选拔性测验） 一、区分度的意义 区分度是指测验对被试实际水平的区分程度或能力 测量专家们把试题的区分度称为测验是否具有效度的“指示器”，并作为评价项目质量，筛选项目的主要指标与依据。 区分度D 取值范围: -1.00——+1.00 D为正值 ——积极区分； D为负值 ——消极区分； D为0 ——零区分。 具有积极区分作用的项目，其D值越大，区分的效果越好。 二、区分度的计算 1、项目鉴别指数法 （1）二分法记分的测验项目 极端分组，从总分分数分布的两端各选择27%的被试组成高分组和低分组，分别计算出每道题目上的各自的通过率，二者之差就是鉴别度指数： 二、区分度的计算 项目鉴别指数D的评价标准 二、区分度的计算 2、相关法 （1）点二列相关 适用于测验项目是0、1记分或二分变量，而效标或测验总分是连续变量的数量资料。 三、区分度对测验的影响 1、区分度与难度的关系 三、区分度对测验的影响 2、区分度与信度的关系 四、区分度的相对性 1. 不同的计算方法，所得区分度不同 2. 样本容量大小影响相关法区分度值的大小 3. 分组标准影响鉴别指数值的大小 4. 被试样本的同质性程度影响区分度值的大小 一、概述 分析的目的在于评估测验项目的质量，为筛选、修改试题提供依据，使测验逐渐实现科学化。 定性分析：依靠分析者的知识、经验，经过逻辑判断，对测验的质量作出质的分析。 定量分析：借用数理统计学的方法，计算出各种指数，对测验的质量作出量的分析。 定量分析内容主要包括： 难度分析 区分度分析 二、多重选择题的项目分析 多重选择题在心理、教育测量中应用极其广泛 分析步骤： 按测验总分进行极端分组 分别登记高分组、低分组选中各选项的人数 分别计算难度P和区分度D 根据登记结果进行选择项的质量分析 例：某测验预测后，取高分组20人、低分组20人的试卷进行项目分析，其中6道选择题的项目分析结果列表如下（*为正确选项）： 测验项目的质量分析表 分析结果： 1题：难度太小，区分度不高，建议修改后使用。 2题：难度、区分度较好，第⑤项无干扰作用，建议修改后使用。 3题：难度太大，区分度太低，从选项看，答案可能有错，建议删除。 4题：负区分，项目可能有错，建议删除。 5题：零区分，建议修改或删除。 6题：难度太大，区分度不高，建议修改或删除。 [练习与思考]： 　 1.测验项目分析的作用是什么？ 　 2.某测验对11名被试施测，结果数据如下表，计算各题的难度、区分度。 * 专 业：心理学、教育学 主 讲：章 永 单 位：教科院