考试组卷的若干测量学要求.pdfVIP

测评新视点● 教 育 测 量 与 评 价 考试组卷的若干测量学要求 杨志明 【摘 要】考试组卷的规范性和合理性是保障考试质量、降低出错风险、提高工作效率的重要条件。大量的 考试实践表明，一个规范的考试组卷过程至少应当包括以下6 个环节：确立测验目的；制定测验蓝图；编写组 卷方案；分析测量参数；复查题目内容；编辑审批试卷。本文针对前4 个环节，简要讨论其测量学要求。 【关键词】考试组卷；测验蓝图；测量学要求 【中图分类号】G424.74 【文献标识码】A 【DOI编码】10.16518/j.cnki.emae.2016.01.012 规范、合理的考试组卷是保障考试质量、提 卷，确保没有法律和科学性问题。 高工作效率的重要条件。然而，出于保密要求和 以上环节主要依靠学科专家组（ Assessment 时间紧迫等方面的考虑，考试组卷工作常常受制 Development Team, AD ）和测评专家组（Psychomet－ 于命题专家的个体经验，因而很可能出现题目区 ric Team, PT ）协同完成。其中，前3 个环节以学科 分度不高、试卷过难或过易、测量信度偏低、效度 专家组为主、测评专家组为辅；第4 个环节是测 证据不足等问题，甚至出现偏题、怪题，或是导致 评专家组的工作；第5 个环节是学科专家组的工 少数试题对某个特定群体（如女性、农村考生）不 作；最后一个环节涉及编辑人员、法律顾问、信息 公平（Bias ）或具有题目功能差异（Differentiate 技术专家（Information Technology Team, IT ）、质量 Item Function ，DIF ）等。比较遗憾的是，学术界目 检验人员以及主管领导等的工作。必须指出的 前关于考试组卷的研究[1][2]还不是很多。为了规范 是，环节（4 ）与环节（3 ）之间一般需要经过多次反 考试工作、降低出错风险，本文简要讨论考试组 复修改才能达到要求。如果测验题目的参数无法 卷工作中的若干测量学要求。 得到事先估计，则组卷工作的质量无法保障，很 容易出现试卷太难、太易或其他问题。由于前4 一、组卷的基本流程 个环节都需要测评专家组的参与，本文就上述前 在考试行业中，组卷工作需要考虑的因素有 4 个环节的内容作进一步阐析。 很多。根据工作顺序，其主要流程包括以下环节： 二、确立考试目的与制定测验蓝图 （1）根据需要确立测验目的；（2 ）根据目的制定测 验蓝图；（3 ）根据测验蓝图编写组卷方案；（4 ）针 考试目的主要是根据需要来确定的，它通常 对组卷方案分析测量参数，包括题目参数（难度、 表现为如下3 种情况中的一种或多种。其一，人 区分度、 才选拔，如高考和公务员考试等。这种测验一般 Bias 或 DIF ）、测验特征曲线（Test Char－ acteristic Curves, TCC ）、测验信息曲线（Test Infor－ 称为常模参照性测验。其二，静态诊断，如学生的 mation Function,