题组反应理论及其在中学英语考试中的应用研究.pdfVIP

心理学探新 2014，Vo1．34，No．5，441—445 PSYCH0L0GICALEXPL0RATION 题组反应理论及其在中学英语考试中的应用研究 田文娜 张敏强 胡小甜 梁淑仪 张楠楠 黄牧蕙 (华南师范大学心理应用研究中心，广州 510631) 摘 要：题组作为众多测验中的一种常见题型，由于项 目间存在一定程度的依赖性而违背 了 局部独立性假设，若用项 目反应模型进行参数估计将会出现较大的偏差。题组反应理论将被试与 题组的交互作用纳入到模型中，解决了项 目间相依性的问题。笔者对题组反应理论的发展、基本 原理及其相关研究进行了综述，并将其应用在 中学英语考试中。与项 目反应理论相对比，结果发 现：(1)题组反应模型与项 目反应模型在各参数估计值的相关系数较强，尤其是能力参数和难度参 数；(2)在置信区间宽度的比较上，题组反应模型在各个参数上均窄于项 目反应模型，即题组反应 模型的估计精度优于项 目反应模型。 关键词：题组；项 目反应理论；参数估计；局部独立性；项目相依性 中图分类号：B841．2 文献标识码：A 文章编号：1003—5184(2014)05—0441—05 1 引言 概括前人的相关研究可 以发现：忽视项 目相依 题组 (Testlet)作为一种常见的题型频繁地出现 性会高估测验信度的情况。而在教育测量中，一般 在各大小型测试和评估 中，一般是指同一试题材料 对测验的信度要求较高，忽视相依性造成的信度高 下有两道及 以上题 目的试题形式，如阅读理解。因 估现象会使一些已有测验的信度达不到既定要求， 为题组内项 目往往存在一定程度的相依性，单维二 这样会使测验的精确性受到影响。 分的项 目反应理论模型，比如说Rasch模型，两参数 此外，题 目间的相依性还会影响极大似然估计 逻辑斯蒂克模型和三参数逻辑斯蒂克模型，并不能 方法的准确性 (Ackerman，1987；KingstonDorans， 很好地处理包含题组的测验数据。但是近年来，为 1984；Thissen，Steinberg， Mooney，1989；Wainer， 了满足测验 目的的要求，出现了由单选题向题组的 Bradlow，Wang，2000；Yen，1980，1993)。研究表 过渡趋势(Wang，Bradlow，Wainer，2002)。如何处 明，忽视项 目相依性不仅会高估被试的能力参数，还 理题组内题 目间存在的相依性成为一个不得不考虑 会使项 目参数的估计出现较大的偏差 (Sireci，This． 的问题 。 sen， W ainer，1991；Wainer，1995；Wainer ＆ This— 有些研究者认为中等偏下的相依性对参数估计 sen，1996)。其 中，Tuerlinckx和 DeBoeck(2001)专 精度的影响不大，因而选择忽视，但是大量研究表明 门针对项 目区分度进行了研究，研究结果表明忽视 忽视项 目相依性会给项 目反应理论中测验信度和参 正向的题组效应将会高估项 目区分度，而忽视负向 数估计精度产生影 响。Sireci，Thissen和 Wainer 的题组效应会低估项 目的区分度。 (1991)在项 目反应理论的框架下对信度增大的现 相 比于忽略项 目相依性的影响，更多的研究者 象进行了验证，Sireci等通过整合不同能力水平下的 试图减轻题组效应的影响或者改善已有的测量模型 测量误差的变异，计算出边际信度，把边际信度当做 来处理相依性的问题。其中，运用多级计分的IRT 是考虑项 目相依性时的测验信度，他们的研究表明， 模型减轻题组效应的影响是 比较常用的一种方