基础教育学业水平评价新方式-CAT认知诊断.doc

基础教育学业水平评价新方式:CAT认知诊断摘 要：认知诊断是目前基础教育学业水平评价的热点研究之一。计算机自适应测验与认知诊断技术结合，发展到具有认知诊断功能的计算机自适应测验（CAT认知诊断）功能，通过CAT认知诊断方法可以在课堂教学中测试并即时反馈结果，给出学生知识掌握的诊断信息，为后续的补救教学提供了参考依据。有研究者认为，CAT认知诊断将逐渐成为基础教育学业水平评价的主要形式。 关键词：基础教育；CAT认知诊断；学业水平评价 中图分类号：G40-058.1 文献标识码：A 文章编号：1009-010X（2012）08-0023-03 一、CAT认知诊断的发展背景 对学业水平进行认知诊断是目前基础教育测量与学业水平评价的热点研究之一。随着现代教育测量的认知诊断理论技术的发展，许多研究者认为，在学业水平评价中不能仅仅满足于给学生一个简单的考试分数，而要给出知识掌握的诊断信息，判断学生的认知结构所存在的缺陷，以便在后续教学中给予恰切的补救措施。而传统的考试评价方法仅关注了学生的作答结果，忽视了学生完成作业时的认知过程，只是简单提供一个考试分数或者评定等级，不能对学生的不同的知识掌握状态作出比较准确的诊断评价。例如，对于相同分数的学生个体间的差异，过去的考试测量方法是无法区分的；而且在测验中的某一个知识点的作答准确率，只能够说明有多少学生掌握，多少未掌握，但对未掌握的学生答错试题的原因无法判断。 认知诊断理论是以认知心理学和现代教育测量理论为基础的，根据测量任务的认知分析，编制认知诊断测验，根据学生作答反应，来诊断学生的知识掌握情况，从而为进一步的补救教学提供依据。认知诊断的目标是将认知状态分为多个认知状态模式（多个认知状态类型），根据学生的作答情况将学生归为某一认知状态模式，并具体分析该学生哪些知识点掌握了，哪些知识点未掌握。 美国教育法案“No Child Left Behind Act of 2001”规定所有实施的测验须向家长、学生和老师提供诊断信息。美国教育界逐渐加强了基础教育阶段的学生学业水平的测试评价；而且，普遍认识到，考试在给出分数结果的同时，也应给予诊断评价，考试与评价要为促进学生发展服务。目前，大规模运用认知诊断测验来评价学生学业水平的典型例子是美国的PSAT（高考预考）。 随着计算机自适应测验（Computerized Adaptive Testing, CAT）技术的广泛应用，认知诊断方法与计算机自适应测验进一步相结合，已发展到具有认知诊断功能的计算机自适应测验，即CAT认知诊断，可运用计算机自适应测验对学生进行认知诊断，例如Tatsuoka（1997）应用规则空间方法开发具有认知诊断功能的CAT[1]，实现了对个体的认知属性进行认知诊断。随后，不少研究者仍在继续对CAT认知诊断测量方法进行不断完善。使用CAT认知诊断进行学业水平诊断评价的一个显著优点是，能立即诊断、分析出学生的知识掌握状态，并能立即将信息反馈给教师和学生，为教师的补救教学和学生的补救复习提供参考依据。 二、CAT认知诊断方法的基本组成部分 Huebner提出计算机自适应测验有六个基本组成部分。同样，CAT认知诊断也是由六个基本部分组成：（1）用于CAT认知诊断的测量模型；（2）建立量表化的题库；（3）CAT认知诊断的测试起点；（4）CAT认知诊断的选题策略；（5）CAT认知诊断的测验终止标准；（6）最终能力估计与知识状态估计的方法。 （一）用于CAT认知诊断的测量模型 计算机自适应测验进行认知诊断的测量基础，是适用的认知诊断测量模型。在目前的研究与实践中，可用于计算机自适应测验方式的认知诊断模型比较多，但主要的常用模型有三种：DINA模型（the Deterministic Input, Noisy-And Gate Model ）、NIDA模型（the Noisy Input, Deterministic-And Gate Model）和规则空间模型（Rule-Space Model）。其中，DINA 模型是目前研究者使用较多的模型，它采用了简化的模型定义，仅涉及到“失误”和“猜测”两类参数，真正实现了对认知诊断模型的简化，参数估计相对简单，且易于解释。 （二）建立量表化的题库 建设用于认知诊断、参数估计量表化题库，是进行CAT认知诊断测验的一项基础性工作。在认知诊断题库的建设过程中，要根据已选定认知诊断模型，对目标知识内容进行认知结构和认知属性分析，列出认知属性矩阵并据此编制相应的测验项目，这项工作将由相关知识领域的专家和具有丰富教学经验的学科教师，与教育测量专家一起共同完成，是根据编制好的测验项目进行初测，并使用认知诊断模型的参数估计软件，来估计试题的认知属性参数，从而完成测验