6第六章 测验项目分析.pptVIP

效 度 第六章 测验的项目分析 (Item analysis) 项目分析的内涵 项目分析是对测验中每个题目的质量进行的分析，包括质的分析和量的分析。 质的分析:主要由专家对项目的内容和形式进行分析，包括考察内容效度、题目编写的恰当性和有效性等。 量的分析：是通过计算项目的一些统计量作为项目质量高低的指标，包括项目的难度和区分度。 目的：对项目进行筛选和修订，提高测验的信度和效度。 如题库的建立 效 度 教学目标 通过本章的学习可解决三个问题： 一、掌握什么是测验的难度，如何计算测验的难度（重点） 二、掌握什么是测验的区分度，如何计算测验的区分度，难度和区分度的关系怎样（重点） 三、掌握项目分析的其他特殊形式 第一节 项目的难度 一、难度的含义 1.难度（difficulty）指测验项目的难易程度。 2.一个测验项目，如果大部分被试都能答对，该项目的难度就小；如果大部分被试都不能答对，则该项目的难度就大。 3.难度过大或过小的题目，都不能很好地将不同水平的被试区分开来，因此对常模参照测验的价值就不大 。 二、难度的计算方法 难度通常以答对百分比作指标。 （一）二分法记分的项目 1.通过率 若试题为二分法记分项目（即答对给1分，答错记0分）时,难度的指标通常以通过率表示，即以答对或通过该题的人数的百分比来表示： 式中，P代表项目的难度，N代表全体被试者人数，R为答对或通过该项目的人数。 P值越大，则难度越小；反之越难。 例题 10名被试在某选择题上的得分如下，试计算该题的难度。 2.极端分组法 当被试人数较多时，则可根据测验总成绩将被试分成三组：分数最高的27%被试者为高分组（NH）,分数最低的27%被试者为低分组（NL）。分别计算高分组和低分组的通过率，以两组通过率的平均值作为每一题的难度。公式为： 例题 选取有代表性的试卷370份，按照总分高低排序，将从最高分向下的27%（100人）作为高分组，将从最低分向上的27%（100人）作为低分组。某题的答题情况如下表。试计算该题的难度。 练习题 练习题1：80名学生参加了某个测验，答对第3道 选择题的有64人，请问该题目的难度是多大？ 练习题2：100个学生参加了某测验，其中某选择题 的答题情况如下表所示，计算该题目的难度。 注意：标准化测验一般采用27%为分组点。也可以取总人数的1/4或1/3（即25%或33%）为分组点。当样本小于100时，一般选50%作为分界点。 （二）非二分法计分的难度 当项目是多重计分时，难度等于平均分与满分之比。 例题 问答题满分为15分，10名被试在该题的得分如下。试计算该题的难度。 问 题 有A、B两个测题，项目A为四重选择题，通过率为0.58；项目B为五重选择题，通过率为0.56，能否说项目A更容易，项目B更难？ （三）难度的校正 由于选择题允许猜测，所以通过率可能因机遇作用而变大。备选答案的数目越少，机遇的作用越大，越不能反映测验的难度。为了平衡机遇对难度的影响，吉尔福特提出了一个难度的校正公式： 例 题 1.一个五择一的项目，其通过率为0.50，则排除猜测的影响，矫正后的难度为多少？ 2.有A、B两个测题，项目A为四重选择题，通过率为0.58；项目B为五重选择题，通过率为0.56，试比较两题的难度。 P值的范围在0-1之间。 P值越大，题目越容易；P值越小，题目越难。 P值与我们通常理解的难度意义正好相反，也有人将称它为容易度。 三、测验难度水平的确定 进行难度分析的主要目的是为了筛选项目，项目的难度多高合适，取决于测验的目的、性质以及项目的形式。 一般准则：平均难度在0.50左右。 1. 成就或学绩测验：不考虑难度（Why?） 目的是考察教学内容的掌握情况。只要是必须掌握的内容，不论其难度都可以作为考试项目，其难度可以从0-1之间变动。 2.选拔性、竞赛性考试：其项目难度应接近录取率。 思考：若选拔率为15％，题目的难度该多少？若测验的目的在于选出20%的差生进行特别辅导，题目的难度该多少？ 3.选择题的难度：P值要大于猜测概率。 4.人格测验的难度：不存在难度问题，于此相应的指标是“通俗性”。 5.对于一般性测验而言，项目难度的一般标准应在0.3-0.7之间； 四、难度的等距转换 使用项目难度等距量表的理由： ⑴测题的难度一般用答对某题的人数的百分比表示。百分量表是等级量表，而非等距量表。也就是说它只表示事物之间大小的关系，但没有相等的单位。用百分比P值作为难度指标，实际上是在顺序量表的水平上衡量题目的难度。 ⑵难度的等级量表是反序而行的，P值越大，项目越容易，这与我们的日常概念是相反的。 当样本的容量很