第四章教育测量的质量指标效度.pptVIP

第三章　教育测量的质量指标 第二节　效度 第二节　效度 一、效度的意义 二、效度的统计定义及其与信度的关系 三、效度的分类及估计 四、提高效度的方法 一、效度的意义 效度（Validity） 测量结果的准确性和有效性的程度 一个测验或量表实际能测出其所要测量的特性的程度 记为：rxy 一、效度的意义 第一，效度始终是针对一定的测量目的而言的。 第二，效度是针对测量结果而言的。 第三，效度只有高或低的程度上的差异。 第四，评价一个测量是否有效要多角度、多方面地收集证据。 第五，教育测量中，效度问题比在其他领域的测量中更为重要。 一、效度的概念 这是因为： ⑴教育测量的对象大多是精神现象，只能通过对其具有可测性的外部表现（如语言或动作等）的测量，以间接认识其心理活动、心理特征或知识水平等。 ⑵学生的心理活动、心理特征与其外部表现之间，一般仅具有相关关系而无函数关系，外部行为并不能准确无误地反映某种心理状态。 ⑶教育测量的对象不是物而是有主观能动性的人。人能有意识地调节自己的外部行为，掩盖自己的内心活动，这就增加了认识其精神现象的难度。 二、效度的统计定义及其与信度的关系1、效度的统计学原理 2、效度与信度的关系 三、效度的类别与分析验证法 1974年美国心理学会发行的《教育和心理测量的标准》一书将效度分为三大类： 内容效度：侧重于测验题目取样的代表性，考查这些题目对所欲测量的内容和行为反应测量的有效程度。 结构效度：侧重于一个测验的能够测量到心理学和教学理论上的抽象概念和特质的程度。 效标效度：侧重于测验分数预测我们所关心的外在行为的准确程度。 三、效度的类别与分析验证法 琳恩和格朗兰德提出效度的四个向度，即内容内容效度、效标关联效度、构想效度和结果效度。 （一）内容效度及其分析方法 内容效度（Content validity） 又称合理效度或逻辑程度，是指测验内容或行为取样的代表性和适当程度；即实测内容和预定测验内容之间的一致性程度。 估计内容效度的方法： 逻辑分析法（定性的方法） 统计分析法（定量的方法） （一）内容效度及其分析方法 逻辑分析法（定性的方法） 依据教材内容、教学大纲的范围以及教学目标分析测验内容，检查测验内容究竟在体现教材内容和教学目标方面达到多大程度 对每一道题目逐一进行审查，以此形成“题目双向细目表” 与“命题双向细目表”加以对照，以确定试卷的效度 统计分析法（定量的方法） 克龙巴赫法（两套测验试题，对相同被试实施测试后，计算得分的相关系数） 评分一致性考查法（不同评分者之间评分的一致性程度，即考查评分者信度） 前后测对比法（根据前后两次测验的差异显著性，确定测验的内容效度） （二）结构效度的验证方法 结构效度是指一个测量能实际测量出理论上的构想或心理特性的程度。它的目的在于用心理学的概念来说明分析测验分数的意义，也就是说从心理学的理论观点就测验的结果加以解释和探讨。 这里的结构的含义是心理学理论所涉及的抽象而属假设性的概念、构想、特性或变量，如智力、焦虑、机械能力倾向、成就、动机等。 （二）结构效度的验证方法 建立理论框架 从理论框架出发，提出各种假设 根据假设编制测验 以逻辑及实证的方法，检验结果是否符合心理学的理论框架及其假设 比如：中学生数学能力的研究 数学能力由分析能力、综合能力、归纳和演绎能力、运算能力、空间想象能力构成；数学能力与早期教育有关；数学能力与智力正相关。 编制测验，施测并收集测验结果 分析测验结果，考查测试的结构效度，考查测验结果是否支持理论构想 （三）效标关联效度的估计方法 效标：检验测验效度的外在的、客观的标准，即效度的标准 效标效度，也称为效标关联效度，也称为实证效度 验证方法是指一个测验对处于特定情境中的个体行为进行预测时的有效性 例： 高考成绩预测大学学习成绩 能力倾向测验预测工作成效 （三）效标关联效度的估计方法 分类： 同时效度：测验分数与效标资料的取得约在同一时间内连续完成，这两种资料的相关系数即为同时效度 目的：诊断现状 用全国高考的成绩作为效标来检验高中毕业生会考的成绩，计算两者之间的相关系数就是会考的同时效度 预测效度：测验分数取得一段时间后才获得效标资料，计算这两种资料间的相关系数 目的：预测某个个体将来的行为 而用大学一年级的成绩作为效标来检验高考的成绩，计算两者的相关系数就是高考的预测效度。 效标效度的估计方法 相关法 直接计算测验分数与效标分数的相关系数 积差相关、等级相关、二列相关等 显著差异法 根据效标测量将被试分为两个极端组，检验这两个组测验分数是否具有统计学上的差异显著性 命中率 当测验用作取舍决策时，常使用命中率 相关概念：总命中率、正命中率、负命中率 总命中率高，则测试的效度高 例： 70人参加的考试，通过测验选取了50人，淘