Angoff方法有效性的检验研究.pdfVIP

教育研究与实验 2008年第 1 教育心理研究。 Angoff方法有效性的检验研究 余嘉元 摘【 要】Ango肪 法是标准参照测验中确定分数线的常用方法，本研究提出了质量系数、校正的 Angoff~ CJt,等概念和计算方法，对Ang0肪 法有效性的检验进行了研究，考察了评判者的个人特性 和质量系数的相关，研究验证了用Ango肪 法得到的分数线是有效的。 [关键词】Angofr方法 标准参照测验 有效性检验 “合格分数线制定”等术语 ，讨论的都是相同的问 一 、 引言 题，即如何得到Glaser所说 特“定操作标准”。 (一)标准参照测验 (二)标准设置的方法 教育测量的 目的有些是为了进行相对比较，例 标准设置的目的是确定一个科学的划界分数， 如高校入学考试，有些是为了进行绝对判断，例如 以区别应试者中的合格者和不合格者。这是一个非 中学的毕业考试，于是教育测验相应地被划分为常 常困难的问题，教育和心理测量学家已经提出了数 模参照测验 (NRT)和标准参照测验 (CRT)。迄今 十种标准设置的方法，但至今仍然没有一种可以被 为止 ，人们对于 NRT的研究比较深入 ，而对于CRT 认为是唯一合适的最佳方法。人们通常将其中比较 的研究还比较薄弱。但是，标准参照测验的应用在 流行的方法归纳为两大类1]【：以被试为中心的方法和 当今社会越来越广泛，例如，高等教育 自学考试、 以测验为中心的方法。以被试为 中心的方法主要有 大学英语四六级考试、全国公共英语等级考试 、全 边界组法和对照组法 ，这两种方法是Livingston提出 国计算机等级考试、教师资格考试、江苏省的高中 来的，边界组法是将临界水平应试者的期望分数作 学业水平考试等都是标准参照测验 ，它们在我国社 为合格分数线，对照组法是将应试者分成掌握组和 会生活中的影响越来越大，因此有必要对标准参照 未掌握组，让他们参加同一个测验，然后找出使掌 测验的有关问题进行深入研究。 握组未通过且使未掌握组通过人数相等的那个分数 Glaser(1971)曾经说过： “标准参照测验是依 作为合格分数 。以测验为中心的方法包括Nedelsky 据某种特定操作标准可 以直接解释测量结果的测 方法、Angoff方法和Ebel方法，Nedelsky方法是针 验。”该定义提出了标准参照测验 中的关键问题是 对全部 由多项选择题组成的测验 ，Angoff方法要求 “特定操作标准”的制定，如果没有这个操作性的标 评判者们直接判断处于临界水平 的应试者对测验的 准，人们对测验的编制就无从人手，对于测验分数 各题 目正确作答的概率，Ebel方法要求评判者先将 的解释也将缺乏依据，因此对于操作标准的制定就 测验题 目按照一定的标准分类，然后估计临界应试 、是标准参照测验中的核心问题之一。在长达几十年 者在每一类上各题 目的答对概率 。也有文献将标准 的研究中，人们提出了 标“准设置”、 标“准确定”、 设置的方法归纳为三大类嘞：以测验或题库的整体印 象为基础的判断；以个别题 目的内容分