多级评分认知诊断测验蓝图的设计.docVIP

  多级评分认知诊断测验蓝图的设计# 丁树良，汪文义，罗芬* （江西师范大学计算机信息工程学院，南昌，330022） 5 10 15 20 25 摘要：在某种给定的评分方式下，假设属性之间没有补偿作用，讨论多级评分认知诊断测验 蓝图设计问题。定义了菱形层级结构的概念以后，根据图论，将基本属性层级结构划分为 独立型、菱形和根树型，对于上述三种层级结构分别构造出完备测验 Q 阵，即使知识状态 与期望反应模式一一对应，且含列数最少的测验 Q 阵。研究发现这些层级结构的完备测验 Q 阵列数均由最大不可比较属性集合中属性数目决定。 关键词：教育心理学；多级评分；认知诊断；测验蓝图设计；属性层级；完备 Q 阵 中图分类号：G449 Design of polytomous cognitive diagnostic test blueprint DING Shuliang, WANG Wenyi, LUO Fen (College of Computer Information and Engineering, Jiangxi Normal University, Nanchang, 330022) Abstract: Giving a polytomous scoring rule,suppose that there is no compensation among the attributes ,the design of polytomous cognitive diagnostic test blueprint is discussed in this paper. After defining the rhombus type, the basic attribute hierarchies are partitioned into new 3 basic types: independent type, rhombus type and rooted type. The rooted type includes the linear ,the divergent and unstructured type defined by Leighton and her colleagues. The structures of the test Q matrix, named as perfect Q matrix, for the 3 types are obtained. The perfect Q matrix contains the fewest columns and is the bijective mapping between the set of the knowledge states and the set of the expected response patterns The perfect Q matrix for the polytomous, which is restricted with its rank ,is different from that for the dichotomous. Key words: Educational Psychology; polytomous scoring; cognitive diagnosis; design of test blueprint; attribute hierarchy; perfect Q matrix  30 35 40  0 引言 认知诊断测验和传统测验不同，它关注的不是被试的总分或能力值，而是被试的知识状 态即属性掌握情况，并且对未掌握的属性进行补救，因此它对促进发展的作用更大。认知诊 断模型通过被试在项目（测验）上的反应（反应模型）估计被试的知识结构。已知属性及属 性层级关系以后，要想使一个好的认知诊断模型充分的发挥作用，首要的前提是有合理的测 验编制。事实上测验蓝图的编制，即测验的设计十分重要，因为测验蓝图直接关系到测验是 否能够为每一个被试提供充分详细的信息。比如要诊断小学生对分数加减运算的掌握情况， 可以编制一份测验，其中每个项目都涉及到异分母的带分数加减运算，采用 0-1 评分，答对 给 1 分，否则给 0 分；这些试题（这份试卷）仅仅能区分完全掌握与不完全掌握所测知识两 类被试，而无法知晓被试未完全掌握的具体原因。事实上，这些未完全掌握的被试的原因可 能千差万别，因人而异。因此对于诊断被试认知缺陷的目的而言，这不是一份好的试卷。如 基金项目：本研究得到国家自然科学基金31100756、国家社会科学基金 (12BYY055，13BYY0