项目反应理论及其应用.pptVIP

经典测验理论 （Classical Test Theory，CTT ） 真分数理论的数学模型 X = T + E X指实测值或观测分数；T指真分数；E指测量误差 假设1：真分数具有某种程度的稳定性，是常数 假设2：测量误差之间的相关值与期望值都为0 假设3：真分数与误差相互独立，其相关值为0 假设4：平行性测验是客观存在的 不同被试，测量的误差变化量是不同的，真分数与误差的相关值不为0。 信度不是按定义公式求取而是借助于“平行测验”假设估计得到的。 经典测量理论的误差太过笼统，很不明确。 观测分数实质上是顺序量尺 分数与能力不能直接对应 一般局限于常模参照测验 测验依赖的局限： 1.被试能力水平的解释依赖于测验的特性 2.对被试的比较被迫限制在同一份试卷上 样本依赖的局限： 1.项目难度估计值会随被试水平的变化而变化 2.同一测验在不同被试样本上施测所估性能指标 不一样 测验总分的参照系是测验项目全体 项目难度的参照系是被试全体 两个指标的参照系不相同，被试能力分数与项目难度两指标不匹配 经典测验理论之发展 — 概化理论 概化理论（Generalizability Theory，GT）是经典理论宏观发展，重在研究误差控制、研究测验整体设计。 概化理论研究目的 1.探清总分方差结构 2.区分误差原因 3.明确各种误差大小 4.找到最优设计方案 概化理论的测验情境关系说 概化理论模型的建立依赖于对测验情境关系的详细调查。 测验情境关系是指测量目标与各测量侧面所组成的一种关系结构。 概化理论的测验情境说 测量目标 测量者希望通过测量用测量值描绘的心理品质。 测量侧面 测量的条件。 概化理论下的真分数概念 在不同测量条件下会有不同的真分数。 1.界定测量目标和测量侧面的个数及名称、意义，确定各侧面的水平数。 侧面数目：单侧面设计、双侧面设计、多侧面设计 2.设计数据结构 交叉设计（ P×I 、p× i× r ） 测量目标在所有侧面的各个水平上被测量。 嵌套设计（ p : r 、p : r : s） 测量目标在一个或多个侧面的部分水平以下被测量。 混合设计 [i×（p : r ）] 既有交叉，又有嵌套的测验设计 用方差分量分析，定量估计观察领域中测量目标方差和各个测量侧面方差，以及其间的交互作用的方差。 方差分量分析步骤 1.分解总体方差为测量目标主效应方差、各测量侧面主效应方差和各种交互效应方差。 2.应用样本方差估计各种效应的期望均方差。 在G研究的基础上，在原设计的测验情境关系范围之内，分析比较各种可能的测验方案，由研究者结合实际，优选实施方案。 D研究的统计分析步骤 1.估计拓广领域（新测验方案）下各种效应期望方差。 2.估计新方案下测验误差的总体指标和测验质量指标，以提供比较依据。 1.哥特曼理想量表项目 2.SAT —V项目经验ICC 3.Logistic模型 4.Rasch模型 1.二元计分模式——Rasch模式 量尺问题 顺序量尺：常见的原始分数 比率量尺： 等距量尺： 联合极大似然估计 若有N个被试，经过n个试题的测试， 根据作答的反应矩阵，我们可以应用联合 极大似然方法，同时，估计出所有被试的 能力水平 ?n 和所有的试题参数 。 单维 测验中的所有题目主要都是测量相同的某一项特质，或 是被试在测验题目上的答題反应主要是受到单一特质的 影响。 局部独立性 相同能力的被试，在每个题目上的答对的几率是互相独立 的。 1.单维假定与项目编写 ⑴要具有可以测量的潜在特质 ⑵欲測量特质必須是单维的 ⑶设计并合理编排所测量潜在特质不同水平的題目 2. 项目和测验质量的初评 ⑴被试的答题反应必须是合理的 ⑵分数量尺要符合等距的特性 3.项目的选择与调整 项目和测验质量的初评 项目反应理论的其它应用 题库建设 题目参数等值 标准参照性测验的编制 计算机化自适应测验编制 MIRT在多向度测验上的应用 经典测验理论之发展 — 概化理论 IRT的基本假设 经典测验理论之改进 — 项目反应理论 返回 例：请描述某一容器中的空气到底是怎样的？ 开放式问项的设计 IRT在量表编制上的应用 初步决定项目评分等级 IRT在量表编制上的应用 项目评分等级结构初测 理论