浅谈试题编制技术与试卷质量分析浅谈命题技术与质量.pptVIP

测验效度 测验的准确性（测出所预测特质的程度） 内容效度 （内容范围的共性：具有边界、结构化；一个测验涵盖的只可能是从所欲考查内容中抽取的一个代表性样本；课标、考纲；双向细目表、知识范围、能力要求） 结构效度（构想效度） （理论构想的基本属性：对本质的抽象概括、可测量化或外显化；对测验结果的合理解释首先要求获得该测验的结构效度资料） 效标关联效度（实证效度） （对被试未来成功的预测准确程度等） 第二十七页，共四十八页。 内容效度与结构效度 内容效度就是测验能代表它所欲考查内容的程度。知识覆盖率法是其最简单常见的统计方法。 内容效度涉及到知识的计量问题，对同一学科而言，我们可将课程标准所开列的每一个知识点作为知识基本单位，也可用教材的章来构造基本知识单位，甚至是按照知识的内在联系来确定基本知识单元。 内容效度反映的是测验外在的、形式上的东西，与所欲测量的特质（如，人文精神、科学素养、探究能力、创造能力、方法论等），没有必然的联系。事实上，它只是测量特质的必要条件。 第二十八页，共四十八页。 内容效度与结构效度 内容效度从知识间的内在联系出发，是以知识为本位分析效度的方法。对于学生而言，掌握必要的知识也是很重要的，因此，注意测验的内容效度有它合理性的一面。 然而，学习者学习知识更为重要的目的是通过学习和掌握这些知识的过程，获得并发展隐含在这些知识中的特质，如果片面强调内容效度就可能导致被试在学习过程中重视知识本身而不重视能力发展。 第二十九页，共四十八页。 内容效度与结构效度 结构效度从隐含在建构这些知识联系背后的特质出发，反映的是其特质的当前发展水平。 由于知识本身可能成为一种特质的表征，而且某些特质与特定的知识领域密不可分，因此，强调结构效度并不反对使用特定的知识作为试题的载体。但这种主张与强调内容效度的主张有着根本的差别。 因此，应该在确保结构效度的基础上兼顾内容效度的需要。对于教育测量（特别是考试）而言，为了鼓励学习者既掌握好知识的本身，又获得和发展隐含于所学知识中的特质，编制测验应该在保证结构效度的基础上尽量选用被试所学过的知识为测验题目的载体。 第三十页，共四十八页。 试题难度 通过率（ P=R/N ）或得分率（ P=X/W） 高考要求： 全卷难度0.5~0.6 试题难度0.3~0.7 易：中：难＝3：5：2 第三十一页，共四十八页。 试题区分度 鉴别指数：D=PH-PL （D ≥ 0.40，优； 0.39 ≥ D≥0.30，良好； ； 0.29 ≥ D≥0.20，尚可； D 0.20，劣，应该淘汰） 高考要求： D ≥ 0.3 高端区分与低端区分 第三十二页，共四十八页。 其他分析指标 平均分：分数的集中水平 标准差：分数的离散程度（高考要求全卷满分为150分时，S 15） 选择题反应模式： ①若所有考生都选择了正确答案，说明题目太简单或给出了明显的暗示 ②若某个错误选项没有一个考生选择，说明该选项没有迷惑性 ③若所有考生都选择了同一个错误选项，可能是答案定错了 ④若高分组考生的选择集中在两个答案上，且两者选择率相近，说明两个答案可能都有道理 ⑤若高分组考生选择正确答案的人数接近或低于低分组，说明该题所考内容与水平无关 ⑥若考生零分人数过多或选择各备选答案的人数相近，说明题目过难，或题意表达不清，是的考生无法作答或只能凭猜测作答 第三十三页，共四十八页。 综合试题分析 对试题难度（P）与区分度（D）进行总体衡量 人的多数心理特征呈正态分布 一个测验的各道题目之间或多或少存在着一定的相关 因此一般采用使题目从易到难排列，而非皆固定在P=0.5左右 P值 1.0 0.9 0.7 0.5 0.3 0.1 0.0 D最大值 0.0 0.2 0.6 1.0 0.6 0.2 0.0 第三十四页，共四十八页。 浅谈试题编制技术与试卷质量分析 广州市教育局教学研究室 教学管理科 钟 阳 特级教师 Tel： （020） E-mail： 第一页，共四十八页。 一、教育测量学简介 教育测量学以现代教育学、心理学、统计学为基础 教育测量只能通过检测心理现象的外显行为或外在表现特征来推知个体的心理能力和个性特质 教育测量学研究的主要内容是：测验的编制、使用、结果的评价 第二页，共四十八页。 教育测量的基本概念 测量：事物及属性、法则、数字或符号 测验：行为样本、标准化、评价指标（题目质量分析指标—难度和区分度，测验结果可靠性指标—信度，测验结果有效性指标—效度） 测量要素：参照点（常模参照，标准参照）、单位（往往不等距或等距不等值） 量表：命名（类别）量表、顺序（等级）量表、等距量表、比率量表 第三页，共四十八页。 教育测量的量表与变量类型 类别量表—称名变量：如学生编号等。只有区分性，没有序列性、等距性和