第一节项目难度分析.pptVIP

第 三 章 项 目 分 析 Item analysis 第一节 项目难度分析第二节 项目的区分度分析第三节 项目分析的相关问题go? 一、 难度的意义二、 难度的计算三、 难度与测验分数的分布四、 项目难度分布与信度的关系back? 一 、 项 目 难 度 的 意 义项目难度(Item Difficulty)指测验项 目的难易程度。 back? (一)计算难度的基本公式(二)用极端分组法计算难度三 项目难度受机遇影响的校正(四)项目难度的等距量表 back? (一)计算难度的基本公式1.以答对的百分比(或称通过率)来计算难度对0、1两级记分的测题: R pN(公式3-1)P 为项目的难度;R 为通过该项目的人数;N 为参加测验的总人数。? 例1,100人参加某一测验,其中第2题和 第6题通过的人数分别为20人和30人,求 第2题和第6题的难度。? 2.当测题不是两级记分时,计算难度的 公式为 X(公式3-2) pX max其中, 为全体被试在该项目上的平均 X得分; 表示该项目的满分。 X max? 例2,某语文测验第五题的满分为12分, 这道题考生的平均得分为8.5分,问该题 的难度是多少? back(二)用极端分组法计算难度 具体步骤如下:第一步:先依测验总分的高低,按由高到低的顺序, 依次排列试卷;第二步:从得分最高的一份试卷开始依次向下选出全 部试卷的27%,作为高分组第三步:从得分最低的一份试卷开始依次向上选出全 部试卷的27%,作为低分组第四步:按下列公式计算难度 pp H L(公式3-3) p2式中,P为难度;P 为高分组在该项目上的通过率; P H L 为低分组在该项目上的通过率。例3,某一次数学测验,100名学生中, 高分组和低分组各有27人。其中高分组 答对第一题的共有20人,低分组答对第 一题的共有10人。请计算第一题的难度。back? 三 项目难度受机遇影响的校正在是非题和选择题中,由于允许猜测,被选答 案的数目越少,机遇的作用越大,就越不能反 映项目的真实难度。为平衡机遇对难度的影响, 可用下面的公式校正: K P ?1 C P (公式3-4) K ?1其中,CP:校正后的难度;P:未校正时的难 度;K:为是非题和选择题选项的数目。? 例4,一个五择一的测题,未校正前的难 度指数为0.50,一个四择一的测题,未 校正前的难度指数为0.53,请问校正后 哪一题的难度大?back? (四)项目难度的等距量表(难度转换)1.使用项目难度等距量表的理由前面我们计算的难度是用百分比来表示难度。 百分量表是等级量表,不是等距量表,缺乏相 等的单位,只能表示事物之间位次的关系,不 能用来对项目之间的难度作精确的比较,也不 能由各试卷的难度来计算整份试卷的平均难度。例如,1、2、3三个项目的难度指数分别为 0.50、0.40、0.30? 2 . 方 法先将某题的通过率视作正态曲线下的面 积,然后查正态分布表找出正态曲线右 侧的面积所对应的Z分数。这一Z分数就 可视为该题的标准难度。 例5,某题的通过率为84%,求该题的标准难度。 84% 34% 16% -2 1 2 3 -1 -3 0? 练习:请同学们计算一下上述三个项目 的标准难度Δ(delta)量表标准难度(美国教育测 验服务中心(ETS))。Δ值可以用以下 公式计算: Δ=13+4Z (公式3-5)希腊字母Δ表示标准化难度指数,Z为标 准分数。Δ值是一个均数为13,标准差 为4的正态分布。例6 求难度指数为0.50、0.40、0.30的 标准难度指数(Δ值)? Δ的取值范围:标准正态分布的全距一般包括6个标准差的距 离,即从-3到+3,当Z=-3时,表明通过率达 到99.87%,这种情况极少发生,此时Δ=1; 当Z=3时,表明通过率为0.13%,也是不大可 能出现的情况,此时Δ=25。Δ的取值范围是 1~25。 back 测验的难度直接依赖于组成测验的项目的难度。通过考察测验 分数的分布,可以对测验的难度作出直观的分析。若测验项目的难 度普遍较大,被试的得分普遍较低,使测验分数集中在低分段,其 分数的分布呈正偏态;若测验项目的难度普遍较低,被试的得分普 遍较高,使测验分数集中在高分段,其分数的分布呈负偏态。 图3-2 测验分数的正偏态分布 图3-3 测验分数的负偏态分布当测验的分数(预试结果)呈偏态分布 时,可以通过改变项目难度的比例对测 验的难度加以调整,通常,如果被试的 取样具有代表性,对于中等难度的测验, 其分数的分布呈现正态分布。 back? 四、项目难度分布与信度的关系过难和过易的测验,会使测验分数的分布相对 集中于高分段和低分段,从而缩小分数的分布 范围。分数分布范围影响信度,范围越广,信 度越高,分数分布范围越小