评估与测量的基本方法.ppt

華東師範大學 East China Normal University 第三章 评估与测量的基本方法 Fundamental Approaches to Psychological Assessment and Measurement 张畅芯 言语听觉康复科学系 言语听觉科学教育部重点实验室 2015-04-16 内容概述 ? 第一节 测量与测验的基本问题 ? 第二节 测验的编制 ? 第三节 项目分析 ? 第四节 常模及分数的解释 ? 第五节 测验的选择与使用 信度与效度 華東師範大學 East China Normal University 效 度 ? 效度 (validity) ，又叫做准确性，是指一个测验能够测量到所要测量的心理特质 的程度。效度反映调查问卷能否代表设计者的意图，即问卷能否有效地测量各 项变量、达到鉴别，评价，预测的目的。 ? 效度的种类包括内容效度、效标关联效度、构想效度。 内容效度 ? 内容效度（ Content validity ）是指测验中的题目对所要测量的整个内容领域的 代表程度。 ? 内容效度高的测验应该具备的条件 – 所要测量的内容领域界定要明确 – 测验中的题目应该是所测内容领域的代表性样本，而不是随机取样的样本 – 内容效度 ≠ 表面效度 内容效度 ? 检验内容效度的方法 – 对所要测量的内容范围进行明确的界定，这是确保测验具有较高内容效度所必须具 备的条件之一。 – 编制双向细目表，把代表性取样的要求用双向细目表的形式体现出来。 – 分析测验中的每一道题，看它测量了双向细目表中的哪一个方面内容。如果二者的 吻合程度高，就表明测验的内容效度高，反之，则表明测验的内容效度低。 – 写出鉴定报告，说明测验所包含的各类题目的数量及分数比例，以及它对所要测量 的内容领域的覆盖率如何。 ? 内容效度的检验方法主要为逻辑分析法。虽然有人曾做过其他的尝试，但是到 目前为止，还没有一种成熟的统计方法可以用于估计测验的内容效度。 ? 内容效度主要适用于评价成就测验的质量。 效标关联效度 ? 效标关联效度（ criterion-related validity ）又叫做实证效度，是指一个测验对处 于特定情境中的个体的行为进行 诊断或预测时的有效程度 。效标关联效度越高， 测验对某些行为的诊断或预测就越准确。 ? 要诊断或要预测的行为称为 效标 （ criterion ），测验与效标之间的关联程度即 为效标关联效度，简称为 效标效度 。 ? 用来预测个体未来某个行为的 测验 叫 预测源 。 ? 根据效标资料收集的时间不同分为 – 同时效度：实施测验的同时收集效标资料 – 预测效度：实施测验一段时间之后收集效标资料 ? 预测效度被关注的程度远超过同时效度。 如何确定效标？ ? 观念效标 – 是指以一种抽象概念存在于头脑中的效标。 – 例如，一个人在音乐事业上成功或失败。 ? 效标测量 – 提现观念效标的具体指标。 – 例如，一个人参加音乐比赛的获奖情况。 ? 常见的效标测量有 – 其他标准化测验的分数。 – 例如：韦克斯勒儿童智力量表、瑞文标准推理测验、斯坦福一比内智力量表、 Conner 儿童行为 问卷、 AAMR 适应行为量表、卡特尔 16 种人格因素问卷等测验的分数。 常见的效标测量 ? 其他标准化测验的分数。 – 韦克斯勒儿童智力量表、瑞文标准推理测验、斯坦福一比内智力量表、 Conner 儿童 行为问卷、 AAMR 适应行为量表、卡特尔 16 种人格因素问卷等测验的分数。 ? 学习成绩 ? 教师评定 ? 专门的训练成绩 ? 实际的生活状况或工作表现 选择效标的注意事项 ? 效标测量本身必须是有效的，即效标测量必须能真正地反映观念效标。 ? 效标测量还必须具有较高的信度 ? 效标测量必须排除主观偏见的影响 效标效度的计算方法 受测者 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 16 18 19 20 21 22 智力测验分数 42 53 50 44 51 49 51 38 39 54 52 50 41 43 40 49 46 52 45 47 48 45 数学考试成绩 74 81 85 79 85 80 78 73 60 84 70 83