计算机辅助教育测量与评价第3章摘要.ppt

难度系数的计算办法 （2）当被试人数很多时，主观性试题可采用下式计算难度： （3-12） 难度系数的计算办法 3．难度的测前估算 在未测试前就估算难度，需要了解影响试题 难度的一般因素： 熟悉程度 信息数量 题目结构 变化动态 难度的转换 人们常假设每个试题所要测量的潜在特质或 能力是呈正态分布的，然后就可以根据正态分布 曲线，将试题的难度指数P作为正态曲线下的 （概率）面积，转换成具有相等单位的等距量 表，即Z分数（标准分数）。由于标准分数具有 相等单位，属于等距量表。所以，用标准分数作 为题目难度的指标，为进一步作难度分析带来了 一些方便。 难度对测验的影响 难度对测验分数分布的影响 难度对测验信度的影响 难度与测验目的的关系 3.4 区分度 3.4.1 区分度的意义 3.4.2 区分度的计算 3.4.3 区分度对测验的影响 区分度的意义 题目区分度就是题目区别被试水平能 力的量度，常记为D。测验多少都带有将 被试的水平加以区分的意图，那么构成测 验的每一个题目就应该为这一目标作贡 献，区分度就是刻画试题的这种功能的质 量指标。 区分度的意义 区分度的分析方法，大约可以归纳成 两类：一为外在效标法，即分析被试在测 验题目上的得分与外在客观标准上的表现 之间的关系。另一为内部一致性法，即分 析被试在测验题上的得分与在整个测验总 分之间的一致性程度。 区分度的意义 区分度的取值范围在-1.00至＋1.00之 间。通常D为正值，称作积极区分；D为负 值，称作消极区分；D为0，称作无区分作 用。具有积极区分作用的项目，其D值越 大，区分的效果越好。 区分度的计算 高低分组法 相关法 区分度对测验的影响 区分度与难度的关系 区分度对测验的影响 区分度与信度的关系 一个良好的测验，信度必须要高。艾贝尔 （R.L.Ebel）的研究表明，整个测验中各试题的 区分度D值的平均数越高，测验的信度就越高。 信度是随区分度的提高而增长的，且信度增长的 速度比区分度增长还快。所以，要想使得测验信 度达到理想的值，提高各试题区分度是一个好的 途径。 中国水利水电出版社 中国水利水电出版社 第3章 教育测量与评价的质量分析 3.1 信度 3.1.1 同质性信度 3.1.2 分半信度 3.1.3 再测信度 3.1.4 评分者的信度 3.1 信度 测验的信度是指测验结果的可靠性或可靠程度。所谓 可靠性是指对同一组对象进行两次相同测量所得结果的一致 性和稳定性程度。常用的信度估计方法有： 计算测验内部各项目的得分的一致性，得到同质性信度； 用同一测验对同一组被试，前后测验两次，据两次测验分数计算其相关系数，得到再测信度； 当一种测验只能施行一次且没有复本时，可按测验题目的奇偶数分两半计分，求相关系数，经校正得到分半信度。 同质性信度 同质性信度也称为内部一致性信度， 是指测验内部所有项目的一致性。常用的 估计方法有克伦巴赫系数等。 同质性信度 对于信度系数，应该注意以下要点： （1）Cronbach的信度系数衡量的是测量某一心理结构的一组试题测量结果的可靠程度。 （2）理论上说，Cronbach的信度系数取值范围在0到1之间，但实际上95%的测量的系数在0.50到0.90之间。根据Nunnally（1967），信度系数的不同范围，反映出测量量表的不同问题。 同质性信度 信度系数的解释（Nunnally，1967） 同质性信度 （3）Cronbach的信度系数可以表示成试卷的试题数与试题间平均相关系数的函数，即信度系数的标准化形式： 　　由公式可见，试题数增加，信度系数增加。若试题间相关系数的平均值低，信度系数就比较低；反之，信度系数就比较高。 同质性信度 （4）如果信度系数高，说明试题间的相关系数 平均值比较高，考生在某道试题上得高分，在另 一道试题上得高分的概率就比较高，这可能说明 这些试题测量的是单一的心理结构。 （5）如果信度系数较低，说明试题间相关系数 平均值较低，这暗示数据可能存在多维结构。在 这种情况下，需要进行因子分析，确定数据维 度。然后，对同一维度的试题计算信度系数。 同质性信度 （6）Cronbach在2004年已经提出，不应再将信度系数看作是考试结果信度的主要衡量指标，应该用标准测量误差来衡量考试结果的信度。标准测量误差与信度系数以及考试的标准偏差　相关： 分半信度 　　分半信度是在测试以后对测试项目按 奇项、偶项或其他标准分成两半，分别记 分，由两半分数之间的相关系数得到信度 系数。 分半信度 　　由于分半，所求得的相关系数只