认知诊断技术在学科学业评价中的应.docVIP

　　认知诊断技术在学科学业评价中的应 2012年第3期(总第32期 ) EXAMINATIONSRESEARCH No．3，2012GeneralNo．32 认知诊断技术在学科学业评价中的应用 ———以初中一年级“有理数及其运算”为例 宁 ［摘 革龚天平吴伙兵 要］当前，中小学学业评价中以考试总分为结果报告的主要方式，这虽 然可以判断学生在特定团体中所处的位置以及学生总体上的学习情况，但是却不能明确地指出学生的认知优势或劣势，不能有效地提供“学生掌握了或未掌握什么知识、技能”等信息，也不能有效地让教师因材施教、实现针对性教学。基于这一情况，——认知诊断应用于学业成就评价，本研究将教育测量中的前沿技术—以初中一年级“有理数及其运算”为例，介绍了认知诊断技术在数学学业评价中的应用过程，数学 为教师改进教学、促进学生发展提供有效支持。 ［关键词］有理数;认知属性;认知诊断;DINA模型［中图分类号］G424．74［文献标识码］A［］1673－1654(2012)03－021－009当前，学校对教学质量的管理通常都是根据经典测量理论(CTT)，计算试卷或试题的难度、区分度以及各班级的平均分、优秀率、及格率等考试参数，并以此为依据进行教学评价。尽管这种评价方式可以体现评价的“排队”激励作用，但是以为管理手段的评价方式也导致了很多学习困难的学生在学习过程中缺乏成就感，并且卷面总分不能具体指出学生掌握或没有掌握哪些知识和技能，更无法诊断学生作答错误的原因，没有体现出评价的诊断功能。如果通过测试为教师及学生本人提供诊断信息，这将为师生改变教与学的策略、改进教与学的方法提供重要的参 简介宁革，中学高级教师，广东省深圳市滨河中学副校长，深圳市首批教育科研专家工作室主持 中学高级教师，广东省深圳市滨河中学数学教师。吴伙兵，硕士，中学高级教师，广东省深圳市滨人;龚天平， 518001。河中学数学教师。广东深圳， “十二五”本文系广东省教育科学规划2011年度教育信息技术研究项目(编号:11JXZ009)成果之一。 考依据。为此，本研究借助教育统计与测量——认知诊断(cognitive中的前沿技术— diagnosis，CD)技术，尝试在初中一年级对“有理数及其运算”这一内容进行认知诊断。 ［1］ 认知诊断技术是在项目反应理论(IRT)基 础上发展而成的，本文详细介绍了其具体操作过程、测验结果及诊断分析，以期抛砖引玉，为学校教师和管理者在实践中运用认知诊断技术促进学生发展、促进教师发展进而实现学校的发展提供借鉴和参考。 —21— 《考试研究》2012年第3期(总第32期) “有理数及其运算”、一相关认知属性 及其Q矩阵的确定 (一)“有理数及其运算”相关认知属性确定 属性是指学生解题时所运用陈述性知识(知识点)、程序性知识或解题策略的总称，属性之间可以没有关联彼此独立，也可以彼此之间具有一定的层级关系，即完成一次测试所需要的属性之间具有一定的逻辑或心理 次序。 本研究组织学校具有丰富教学经验的数学教师来确定“有理数及其运算”这一章所涉及的相关知识和技能(属性)，具体过程是:首先由数学教师根据课程标准分别独立“有理数及其运算”所涉及的核心知识完成 点和技能，再集体讨论并统一意见，最后再通过头脑风暴将这些属性进行整合，共得出15个认知属性，详见表1。 表1“有理数及其运算”相关认知属性 第一属性群 属性编号 A1A2A3A4A5A6A7A8 属性描述 整数和分数有理数数轴相反数 有理数大小比较绝对值有理数加法有理数减法 属性编号A9A10A11A12A13A14A15 第二属性群 属性描述 有理数加减法有理数乘法加法运算律倒数与除法乘方乘法运算律有理数混合运算 在一次测试诊断中，所有试题所涉及的属性个数一般不宜超过10个，否则诊断的准确率会受影响。如果确实要超过10个属性，有两种处理方法:一是用更大的属性去包含即属性合并，以减少属性的个几个小属性， 数;二是将众多的属性按照它们的逻辑关系分解为几个小的属性群，对各个属性群分别单独进行诊断测试。由于“有理数及其运算”这一章的学习内容比较多，我们最后将其所涉及的15个认知属性分解为两个属性群，分两次进行诊断。本文主要报告第一属性群的认知诊断情况。 (二)测验Q矩阵与认知诊断测验的编制 Q矩阵是用来连接试题与认知属性关系I指试题数，K的矩阵，一般由I行K列组成，指认知属性数。其中的元素只有“1”和“0”两种取值，若qij=1，说明第i题测量了第j—22— 个认知属性;若qij=0，说明第i题未测量第j个认知属性。Q矩阵被认为是认知诊断测验编制的蓝图。 试题编制过程如下:首先，收集一批“有这一内容的测试题，题型全理数及其运算” 部为单项选择题。然后，将每道试题所运用到的属性直接标示在该题题首，这是属性与试题关联匹配