一种多级评分的认知诊断模型：P-DINA 模型的开发.pdfVIP

心理学报 2010, Vol. 42, No.10, 1011− 1020 Acta Psychologica Sinica DOI: 10.3724/SP.J.1041.2010.01011 P-DINA * 1,4 2 1 3 (1 江西师范大学心理学院, 南昌 330027) ( 2 江西师范大学数学与信息科学学院, 南昌 330027) (3 江西师范大学计算机信息工程学院, 南昌 330027) (4 清华大学教育研究院, 北京 100084) 当前绝大多数认知诊断计量模型仅适用于 0-1 评分数据资料 , 大大限制了认知诊断在实际中的应 用, 也限制了认知诊断的进一步推广和发展。本文对具有较好发展前景的 DINA 模型进行拓展 , 开发出适合 多种评分(含 0-1 二级评分和多级评分)数据资料的 P-DINA 模型 , 同时采用 MCMC 算法实现模型参数的估计 , 并对该模型性能进行研究。结果表明：(1)本文开发的 P-DINA 模型无论是在无结构型属性层级关系下还是 在结构型属性层级关系下, 参数估计的精度均较高 , 参数估计的稳健性较强 , 说明开发的 P-DINA 模型基本 合理、可行。(2)P-DINA 模型可采用 MCMC 算法实现参数估计 , 且参数估计的精度较高。(3)整体来看, 无 结构型属性层级关系和结构型属性层级关系下, P-DINA 模型在项目参数的估计精度上两者基本相当 ; 但在 被试属性判准率(MMR 和 PMR)上无结构型属性层级关系表现的稍差一些。(4)无结构型属性阶层关系下：模 型诊断的属性个数越多, 参数 s 估计的精度越差、属性诊断的正确率(MMR 和 PMR)越低, 但参数 g 的估计 精度越好 ; 若想保证属性模式判准率在 80%以上, 建议诊断的属性个数不宜超过 7 个。总之, 本研究为拓展 认知诊断在教育学和心理学中的应用提供了一种新方法、新模型。 认知诊断模型 ; DINA 模型 ; P-DINA 模型 ; MCMC 算法 B841 1 引言 国正式通过法案(No Child Left Behind Act of 2001), 规定美国所有实施的测验应该给家长、老师及学生 传统的测验/考试 ( 比如通常的教育测验)关注 提供诊断信息。现在美国社会主流舆论认为, 只考 的焦点是考生分数, 对分数背后所隐藏的心理内部 试不诊断或者只诊断而不作补救教学, 都是不负责 加工过程、技能和策略、认知结构/知识结构等无法 任的表现。认知诊断的重视程度可见一斑。随着我 提供进一步的信息, 更不能为有针对性地对学生进 国教育改革的深入发展, 认知诊断正在成为日益重 行教学补救及教师开展因材施教提供指导, 因此亟 要的研究课题。 需对上述信息加以诊断、评估和报告。在心理与教 然而要对人的内部心理加工过程进行测量、诊 育测量中, 人们通常把对个体认知过程、加工技能 断、评估比较困难, 因为人们无法观察到思考过程, 或 知 识 结 构 的 诊 断 评 估 称 为 认 知 诊 断 (Cognitive 而只能得到解答结果。为此心理测量学家、认知心 Diagnosis, CD, Leighton Gierl, 2007) 。 理学家们以认知心理学和心理测量学为理论基础 , 当前人们已不满足于仅给学生一个简单的测 对诊断评估做了艰苦的尝试和