多维数据IRT真分数等值和IRT观察分数等值研究.pdfVIP

心 、探新 2015，Vo1．35，No．1，56—6l PSYCHOL0(lCAL EXPLORATION 多维数据 IRT真分数等值和 IRT观察分数等值研究 刘 胡 ．刘红云 (1．p f省教育科学研究所，成都 610225；2．北尿~．-?FBI-大学心 学院，北京 100875) 摘 要：实际应用中测验往往具有多维结构 ，如果仍采用单维方法进行等值，会得到不准确的 结果。研究基于随机等组设计下英语测验，使用MCMC方法估计题 目参数，将单维 IRT真分数等 值和观察分数等值方法推广到多维。比较 了四种等值方法：单维 IRT真分数等值和观察分数等 值，多维近似单维IRT真分数等值和观察分数等值。结果显示，当数据符合 多维结构时：(1)基于 多雏测验的IRT真分数等值和观察分数等值方法优于单维 IRT真分数等值和 IRT观察分数等值 方法；(2)多维IRT观察分数等值略优于多维 IRT真分数等值，但是两者之间的差异较小。 关键词：测验等值；多维 IRT；真分数等值 ；观察分数等值；MCMC估计 中图分类号：B841．2 文献标识码：A 文章编号：1003—5184(2015)01—0056一O6 1 问题提出 尺旋转和维度相关调整等一系列过程 (Reckase， 住教育测量中，常常会出现考核同一个 内容的 2009)。 多个测验形式，为了实现这些测验分数之间的比较， 在单维IRT等值中，一些研究比较了IRT真分 会jf]到测验等值的方法。针x,jN验分数的等值，一 数等值 与IRT观察分数等值 (HarrisCrouse，1993； 般 I【『以分为经典测验理论 (CTT)下的等值方法和项 Han，Kolen， Pohlmann，1997；Lord W ingersky， H反应理论(IRT)下的等值方法(KolenBrennan， 1984；刘 ，骆方，刘红云，2010)。尽管关于两种等 2004)。其中，IRT真分数等值和观察分数等值就是 值方法是否有区别存在不一致的结论，但是大多数 两种经典的实现测验分数等值的方法。它们既能与 研究证明，IRT真分数等值与 IRT观察分数等值的 传统观察分数等值方法的日的一致，实现测验分数 结果有极高的相似性。在多维 IRT等值中，大多研 之间的转换，又能结合 IRT等值的优势，使等值后的 究关注于项 目参数的等值，很少有研究应用针对测 项 目参数在同一量尺上，为题库建设中铆定新加人题 验分数等值。Brossman(2010)首次将单维 IRT真分 目的参数提供了便利。IRT真分数等值是当项 目参 数等值和观察分数等值推广到多维，并对这些方法 数都被置于同一量度上之后，将两个测验的真分数通 进行比较。结果证明，对于存在中等程度多维的数 过被 试的能力值 0进 行链接 (Kolen Brennan， 据，几种多维 IRT等值方法优于单维 IRT等值。 2004)。IRT观察分数等值是产生两个测验的观察分 在Brossman(2010)的研究巾，参数估计使用的 数分布。然后，使用传统的等百分位等值方法来进行 是边缘极大似然估计方法。随着统计方法和计算机 等值(Kolen＆Brennan，2004)。但是，基于 IRT的等 技术的发展， 叶斯估计的MCMC算法以其估计结 值办法往 需要测验结构满足单维性的前提假设。 果的准确性得到了越来越多的应用 (Yao，Lewis， 然而，在现实情境里，测验通常包含多维的结 Zhang，2008)。因此，基于贝叶斯估计得到的项 目参 构．．如英语测验 ，就能根据 内容分为阅读 ，听力 ，写 数，进行单维和多维 IRT分数等值，其结果是否存在 作等维度。这时，传统 IRT理论