使用题组反应模型缓解局部题目依赖性对多阶段测验的危害-心理科学.PDF

216 心理科学 Journal of Psychological Science 2017，40（1）：216-223 心 理 科 学 使用题组反应模型缓解局部题目依赖性 对多阶段测验的危害* 1 *2 1 3 詹沛达 高椿雷 边玉芳 罗照盛 1 2 （ 北京师范大学 中国基础教育质量监测协同创新中心 , 北京 , 100875）（ 江西师范大学 初等教育学院 , 南昌 , 330022） 3 （ 江西师范大学 心理学院 , 南昌 , 330022） 摘 要 尽管多阶段测验（MST）在保持自适应测验优点的同时允许测验编制者按照一定的约束条件去建构每一个模块和题板，但 建构测验时若因忽视某些潜在的因素而导致题目之间出现局部题目依赖性（LID）时，也会对 MST 测验结果带来一定的危害。为 探究“LID 对 MST 的危害”这一问题，本研究首先介绍了 MST 和 LID 等相关概念；然后通过模拟研究比较探讨该问题，结果表明 LID 的存在会影响被试能力估计的精度但仍为估计偏差较小，且该危害不限于某一特定的路由规则；之后为消除该危害，使用了 题组反应模型作为 MST 施测过程中的分析模型，结果表明尽管该方法能够消除部分危害但效果有限。这一方面表明 LID 对 MST 中 被试能力估计精度所带来的危害确实值得关注，另一方面也表明在今后关于如何消除 MST 中由 LID 造成危害的方法仍值得进一步 探究的。 关键词 多阶段测验 局部依赖性 题组 项目反应理论 题组反应模型 计算机化自适应测验 1 引言 测验，CAT 会基于被试在每一道题目上的表现， 依据一定的选题策略来选择下一道最优的待施测的 在计算机低成本、高运算速度的今天，教育和 题目。可以说，CAT 的高效性已经得到了从小尺 心理评估的主要形式正逐渐从纸笔测验形式向计算 度低利害的诊断测验到大尺度高利害的资格测验的 机化测验形式过渡。目前，主要有三种计算机化测 广泛认可（Zheng Chang, 2014 ）。但在CAT 向人 验：基于计算机的测验（CBT ）、计算机化多阶段 们展示着其各种优点的同时，一些潜在的隐患也逐 测验（MST ）和计算机化自适应测验（CAT ）。其中， 渐受到人们的关注，比如题目曝光率、内容平衡、 CBT 仅仅是一种将传统的线性的纸笔测验形式依托 不允许跳答或修改答案等。尽管已有很多研究在 在计算机上的非自适应测验；而 CAT 和 MST 均是 探讨如何解决这些隐患（Boyd, 2003; Chang Ying, 可以依据被试的作答情况来调节下一步施测题目难 1999; Han, 2013; Mao Xin, 2013; Sympson Hetter, 度的自适应测验，两者的差异在于 CAT 为题目水平