第五章 的项目分析.ppt

第五章 项目分析 定性分析 主要由专家对项目的内容和形式进行分析，包括考察内容效度、题目编写的恰当性和有效性等。 定量分析 主要计算项目的难度、区分度等。 目的 对项目进行筛选和修订，提高测验的信度和效度。 第一节 项目的难度 项目的难度（difficulty）是指测验项目（或试题）的难易程度。 在能力测验中就是指试题的难度水平。 人格测验不存在难度问题，与此相应的指标称为通俗性或流行性（popularity level），即总体中在答案方向上回答的人数比率。 一、难度的计算 二级评分法项目的难度计算 多级评分法项目的难度计算 1、二级评分法项目的难度计算 通过率 P=试题的难度 R=答对该题的人数 N=参加测验的总人数 例题 10名被试在某选择题上的得分如下，试计算该题的难度。 极端分组法 将被试按总分高低依次排序； 划出人数相等的高分组和低分组（例如比例为27%）； 计算高分组和低分组在该题上的通过率PH和 PL ； 该题的难度计算公式为： 例题 选取有代表性的试卷370份，按照总分高低排序，将从最高分向下的27%（100人）作为高分组，将从最低分向上的27%（100人）作为低分组。某题的答题情况如下表。试计算该题的难度。 2、多级评分法项目的难度计算 P =试题的难度 =全体被试在该题上的平均分数 =该题的满分分数 例题 问答题满分为15分，10名被试在该题的得分如下。试计算该题的难度。 二、二级评分法项目难度的矫正 排除由于被试猜测而答对某些题目致使P值增大的可能性。比较答案选项数不同的题目的难度。 矫正公式为： CP=矫正后的难度 P=未矫正的难度 K=测题的选项数目 难度矫正公式的推导 例题 一个五择一的项目，其通过率为0.50，则排除猜测的影响，矫正后的难度为 多少？ 三、难度的等距量表 用百分比表示的难度值是等级数据。 　P值越大，项目越容易。 将以等级量表表示的P值转换为具有相等单位的等距量表Z值： 将某题的通过率P视为正态分布曲线下的面积；查正态分布表找出正态曲线右侧面积所对应的Z分数。 Z值越大，项目越难。 美国教育测验服务社（ETS）： △ = 13 + 4Z △取值范围为1～25 四、难度对测验分布的影响 常态分布：平均难度在0.5左右 负偏态分布：测验容易，P值大 正偏态分布：测验过难，P值小 第二节 项目的鉴别力 一、定义 二、估计方法 一、定义 项目的鉴别力（Item discrimination），又称项目的区分度。 指项目得分对被试实际水平的区分能力或鉴别能力。 二、估计方法 极端组法 相关分析法 因素分析法 1．鉴别指数（极端组法） 高分组与低分组在某一项目上的通过率之差 D = PH－PL 　　　　　D＝鉴别指数 　　　　　PH＝高分组通过率 　　　　　PL＝低分组通过率 例题 选取有代表性的试卷370份，按照总分高低排序，将从最高分向下的27%（100人）作为高分组，将从最低分向上的27%（100人）作为低分组。某题的答题情况如下表。试计算该题的鉴别指数。 鉴别指数与项目的优劣 2．相关分析法 项目得分与总分的相关 项目间的相互相关 项目得分与效标的相关 ⑴项目与总分的相关 点二列相关 二列相关 积差相关 点二列相关 项目是0、1记分，总分是连续变量 例题 二列相关 项目和总分都是正态连续变量，但项目得分被人为地分为两个类别 例题 积差相关 项目和总分均为正态连续变量 ⑵项目间的相互相关 又称项目的组间相关 项目是0、1记分 项目是非0、1记分 项目是0、1记分 项目是0、1记分 四项相关 Φ相关 项目是非0、1记分 积差相关 ⑶项目与效标的相关 项目的效标效度分析 计算方法与前面项目与总分的相关基本相同 相关系数的统计检验 以相关系数计算项目的鉴别力时，鉴别力达到多高时才可以接受？ 相关系数不是来源于ρ=0的总体！ 参考王孝玲《教育统计学》第十一章（1993） 3．因素分析法 一般是先通过因素分析发现测验中的若干共同因素，再分析每一项目在各共同因素上的因素载荷（Factor Loading）。 当一个项目在预先假定要测量的因素上要较高的载荷时，该项目就被认为是有较高区分度的。 项目的因素载荷一般要在0.30以上才是可以接受的。 第三节 项目分析的相关问题 一、难度、区分度与测验信度和效度 二、依据项目统计量挑选项目 三、选择题的选答项分析 四、标准参照测验的项目分析 一、难度、区分度与测验信度和效度 难度与区分度的关系 难度与测验的信度和效度 区分度与测验的信度和效度 1．难度与区分度的关系 测题难度对其区分度的影响可以通过不同难度的测题提供了多少次被试间相互比较的机会而得到说明。 如果通过某题的有R