教育认知诊断测验与认知模型一致性的评价-心理学报.PDFVIP

心理学报 2012, Vol. 44, No.11, 1535−1546 Acta Psychologica Sinica DOI: 10.3724/SP.J.1041.2012.0 1535 * 1 2 1 1 3 CUI Ying (1 江西师范大学计算机信息工程学院, 南昌 330022) (2 南昌大学教育学院教育系, 南昌 330031) 3 ( Centre for Research in Applied Measurement and Evaluation (CRAME), University of Alberta, CA) 构建正确的认知模型是成功进行认知诊断的关键之一 , 如果认知诊断测验不能完整准确地代表这 个认知模型 , 这个测验的效度就存在问题。属性及其层级可以表示一个认知模型。在认知模型正确基础上 , 给出了一个计量公式以衡量认知诊断测验能够多大程度上代表认知模型; 对于不止包含一个知识状态的等 价类及其形成原因进行了分析, 对 Cui 等人的属性层级相合性指标(HCI)提出修改建议, 以更好地探查数据 与专家给出的认知模型的一致性。 认知诊断 ; 认知模型 ; 认知诊断测验 B841 教育认知诊断中涉及到两类模型：认知诊断模 补偿模型包括连接模型(conjunctive models)和非连接 型 (cognitive diagnostic model, CDM) 和认知模型 模型(disjunctive models)。连接的含义是掌握项目所 (cognitive model, CM)。认知诊断模型受到高度关注, 有属性, 可以较高的概率正确作答, 而未掌握( 即使 它是被试在项目上的反应的函数, 将被试可观察的 只有一个属性没有掌握)也将大大降低答对概率。本 反应模式(ORP)转化为被试知识状态(KS) 的数学模 文仅讨论连接的非补偿模型。 型。大家比较熟悉的规则空间模型(RSM; Tatsuoka, 认知模型因为和具体的认知行为有关 , 故更加 1995, 2009)、属性层级模型(AHM; Leighton, Gierl, 多姿多彩。本文仅讨论教育测量中的认知模型。给 Hunka, 2004) 、确定性输入, 噪音“ 与 ” 门模型 定一个感兴趣的论域 (domain), 教育测量中的认知 (DINA; Junker Sijtsma, 2001)等等, 都是 CDM 。 模 型 是 对 问 题 解 决 的 抽 象 , 选 择 合 适 的 粒 度 对 CDM 的研究包括对 CDM 的开发、CDM 的性质 (granularity)刻划任务 , 即用合适的粒度(粒度的直 的探讨以及 CDM 的应用等等。而 CDM 又可依照 观解释是考察点的细分或细化程度)对问题解决的 不同标准进行分类 , 如果从项目的评分方式来看 , 简化描述, 以方便解释和预报被试表现, 包括他们 可以分成 0-1 评分、多级评分、甚至连续评分的 在这个论域中认知上的长处和不足(Gierl, Leighton, CDM; 从认知模型的维度来看 , 有单维和多维模 Hunka, 2007)。比如诊断小学生分数运算掌握情况, 型; 从认知属性对认知任务起的作用来看 , 有补偿 就不能使用“分数运算”这么大的粒度对问题进行描 性、部分补偿性和非补偿性模型 ; 从认知策略的多 述,