项目反应理论在教育考试命题质量评价中的应用.pdf

2010 年 6 月 教 　育 　科 　学 J un ,2010 　第 26 卷 　第 3 期 Education Science Vol . 26 　No . 3 　 项 目反应理论在教育考试命题质量评价中的应用 1 2 王晓华 , 　文剑冰 ( 1. 上海市教育考试院 ,上海 　200235 ;2 . 华东师范大学 心理与认知科学学院 ,上海 　200062) 〔摘 　　　要〕　由于诸多因素的影响 ,大规模教育考试始终未能建立题库 ,只能在考后对考试数 据进行分析的基础上 ,对命题质量进行综合评价 。项 目反应理论能够对试题进行深入细致的分 析 ,对测验的编制也提出了相应的指标和方法 。本文应用项 目反应理论对大规模教育考试命题 质量进行分析 ,并以《高等数学》课程为例 ,探讨命题质量分析的程序和方法 。希望以考后命题质 量的评价作为切入点 ,为大规模教育考试命题建立题库 ,积累基础项 目和数据 。 〔关 键 词〕　项 目反应理论 ;教育考试 ;评价 〔中图分类号〕G4003 　　 〔文献标识码〕A 　　 〔文章编号(20 10) 　　一 、引言 分析 ,获得试题的参数 ,确定什么能力水平的考生能 ( 大规模教育考试 如中考 、高考 、研究生入学考 够对试题作出正确的应答 ,试题对何种能力水平的 ) 试 、自学考试等 都是国家级的高利害关系考试 ,其 考生具有良好的区分能力 ,试题的质量是否 良好等 质量至关重要 。由于 目前还没有教育考试题库 ,每 等[2 ] 。项 目反应理论对试题的分析结果明确 ,可以 年考试的试题都要全部重新进行编制 ,不但造成浪 使我们有针对性地采取措施 ,提高试题的质量 。 费 ,也给命题工作带来了非常繁重的压力 。而且每 试卷是根据一定的考试 目标而设计开发的试题 年的试卷难以等值 ,造成考试的难度不均 。特别是 有机集合 。试卷的质量包含两个层面 ,一个是微观 对于标准参照性考试 ,极易造成考试标准的波动 ,从 层面 ,即组成试卷的试题的质量 ,主要依靠试题分析 而给学校的教学和学生的学习带来很大的困扰 。 来进行评价 ,其质量指标主要是试题的难度 、区分度 在当前大规模教育考试的命题工作中 ,命题质 以及试题所提供的信息量等 ; 另一方面则是宏观层 量的分析不仅需要对所命制试题是否符合命题规则 面 , 即试题的选配 、组合是否合符考试的测量 目标 。 以及考核 目标等方面进行质的分析 ,根据考生的作 其质量指标主要有效度和信度 ,主要依靠效度检验 答情况对试题进行量的分析也是一个重要的方面 。 和信度分析来进行评价 。项 目反应理论对于测验的 因此考后试题的分析和命题质量评价具有特殊的意 信度和效度的分析也与经典测量理论不同。在信度 义 ,是教育考试工作中最重要的工作之一 。 和测量误差的估计上 ,经典测量理论的信度是针对 ( ) 传统的经典测量理论 C T T 试题分析可能会提 被试全体的 , 只代表平均测量精度 。其信度不能给 供大量的信息 ,但这些信息却明显地受到考生群体 出不同能力水平被试的准确测量精度 , 因而对如何 的影响 ,且分析结果的意义不十分明确 。因而有研 提高不同能力水平的测量精度问题 ,C T T 显得无能 究者认为在现代考试设计 、开发以及试题和考试结 为力 。而项 目反应理论则用测验信息函数的概念代 果分析中 ,不要过多地强调这种传统的试题分析[ 1] 。 替了信度理论 ,用测验对能力估计所提供的信息量 而项 目反应理论可以通过试题的特征曲线和信息量