变通的题组项目功能差异检验方法在篇章阅读测验中的应用.pdfVIP

心理学报 2011, Vol. 43, No.7, 830−835 Acta Psychologica Sinica DOI: 10.3724/SP.J.1041.2011.00830 (北京师范大学认知神经科学与学习国家重点实验室, 北京 100875) 篇章形式的阅读测验在语文学科考试与语言能力测试中占有越来越重要的地位。篇章阅读测验是 一种典型的题组测验 , 因此需要采用能够处理题组效应的统计方法进行分析。在进行项目功能差异(DIF)检 验时, 也需要采用与之匹配的 DIF 检验方法。目前能够处理题组效应的 DIF 检验方法主要包括变通的题组 DIF 检验方法和基于题组反应模型的 DIF 检验方法, 基于题组反应模型的 DIF 检验方法由于实现过程繁琐, 目前只停留在理论探讨阶段。本研究将变通的题组 DIF 检验方法及其效应值指标引入篇章阅读测验的 DIF 检验中, 能够解决篇章阅读测验中 DIF 检验与测量的问题, 效应值指标能够为如何处理有 DIF 效应的题组项 目提供重要依据。本研究首先选用非题组 DIF 检验方法与变通的题组 DIF 检验方法对一份试卷进行 DIF 检 验, 两种方法的比较结果体现了进行题组 DIF 检验的必要性与优越性, 然后选用变通的题组 DIF 检验方法中 有代表性的四种方法对某阅读成就测验进行题组 DIF 检验。研究结果表明 , 在篇章阅读测验中, 能够处理题 组效应的 DIF 检验方法较传统的 DIF 检验方法具有较大的优越性。 篇章 ; 项目功能差异 ; 题组 DIF; 效应值 B841 1 问题提出 (item bundle) (Rosenbaum, 1988) 。在阅读测验中, 隶属于同一篇章的多个项目就是一个典型的题组。 测验公平性问题一直是心理与教育测量关注 同 一 题 组 的 项 目 间 可 能 存 在 局 部 依 赖 性 (local 的重要问题之一。项目功能差异(DIF)检验方法是确 dependence), 而局部独立性是项目反应理论的基 保测验公平的统计技术手段。在过去的几十年里 , 本假设之一(Lee, Brennan, Frisbie, 2005) 。局部依 DIF 检验方法有了长足的发展, 能够满足不同测验 赖性造成的模型拟合问题会影响 DIF 检验结果的 条件的要求。但是随着测验的发展 , 测验实践给 准确性(Bolt, 2002) 。因此, Wainer 和 Lukhele 指出, DIF 检验带来了新的挑战, 例如本研究的主题, 如 非常有必要恰当的处理题组项目间的局部依赖性 何处理篇章形式阅读测验的 DIF 检验问题。 问题, 否则对测验分数的有关分析可能会产生很多 目前, 篇章形式的阅读测验在语文学科考试和 错误(Wainer Lukhele, 1997) 。 语言能力测试中越来越普及。这种形式的测验强调 本文的探讨重点就是寻找符合篇章阅读测验 摆脱过去那种在孤立语境中进行考查的方式, 越来 的项目功能差异检验方法。项目功能差异检验方法 越倾向在篇章中考查被试的词汇、语法等语言能 是确保项目公平性的统计技术 ,对测验进行项目功 力。但是, 篇章形式的测验是一种题组(testlet)测验, 能差异检验已经成为篇章阅读测验编制流程的基 传统的各种 DIF 检验方法都无法处理题组效应。题 本程序之一, 但是传统的项目功能差异检验方法都 组 是