使用验证性补偿多维IRT模型进行认知诊断评价-OpenRepositoryof.PDFVIP

心理学报 2016, Vol. 48, No.10, 13471356 Acta Psychologica Sinica DOI: 10.3724/SP.J.1041.2016.0 1347 使用验证性补偿多维IRT 模型进行认知诊断评估* 詹沛达 陈 平 边玉芳 (北京师范大学中国基础教育质量监测协同创新中心, 北京 100875) 摘 要 随着人们对测验反馈结果精细化的需求逐渐提高, 具有认知诊断功能的测量方法逐渐受到人们的 关注。在认知诊断模型(CDMs)闪耀着光芒的同时, 另一类能够在连续量尺上提供精细反馈的多维 IRT 模型 (MIRTMs)似乎受到些许冷落。为探究 MIRTMs 潜在的认知诊断功能 , 本文以补偿模型为视角 , 聚焦于分别 属于 MIRTMs 的多维两参数 logistic 模型(M2PLM)和属于 CDMs 的线性 logistic 模型(LLM); 之后为使两者 具有可比性 , 可对补偿 M2PLM 引入验证性矩阵(Q 矩阵)来界定题目与维度之间的关系 , 进而得到验证性的 补偿 M2PLM (CC-M2PLM), 并通过把潜在特质按切点划分为跨界属性 , 以期使 CC-M2PLM 展现出其本应 具有的认知诊断功能 ; 预研究表明 logistic 量尺上的 0 点可作为相对合理的切点 ; 然后, 通过模拟研究对比 探究 CC-M2PLM 和 LLM 的认知诊断功能, 结果表明 CC-M2PLM 可用于分析诊断测验数据, 且认知诊断功 能与直接使用 LLM 的效果相当; 最后, 以两则实证数据为例来说明 CC-M2PLM 在实际诊断测验分析中的可 行性。 关键词 项目反应理论 ; 多维项目反应理论; 认知诊断模型 ; 认知诊断 ; Q 矩阵 ; 验证性因素分析 分类号 B841 1 引言 Huang Wang, 2014; Li Wang, 2015; Templin Bradshaw, 2014; 詹沛达 , 李晓敏, 王文中, 边玉芳, 人们已不满足于只能分析出一个总分的教育 王立君 , 2015)也被提出并建议使用在特定的测验 与心理测量方法, 具有诊断功能的测量方法因此逐 情境中。 渐受到人们的关注。基于此, 测验编制者希望借助 在 CDMs 闪耀着光芒的同时, 多维 IRT 模型 被试的作答结果获得更加丰富的信息, 以便对被试 (multidimensional IRT models, MIRTMs)似乎受到 做出更客观更有针对性的评估和补救。认知诊断评 些许冷落。而实际上, MIRTMs 和 CDMs 一样也具 估作为一种将形成性评估和终结性评估相结合的 有诊断功能(Embretson Yang, 2013; Stout, 2007; 综合评估形式, 其最终目的是为了更有效地促进学 Wang Nydick, 2015), 只不过因为 MIRTMs 是在 生的发展, 其作为一种评估手段 , 更关注的应是评 连续量尺上刻画或诊断被试的潜变量值, 并没有直 估后如何更有效地对学生进行补救教学, 或是如何 接或明确地对被试进行分类, 导致我们放大了其根 修正现有教学的过程与方法以促进学生更有效地 据子维度分排序的功能。另外,