信度效度分析.pptVIP

3.教育测量的信度和效度 一个高质量的测验，它的结果是可靠而且是有效的； 可靠性（信度）和有效性（效度）是评价测验质量的两个重要指标。 当一个测验多次测量的结果一致时，它就被认为是可靠的； 估计测量一致性程度的指标被称为信度。 如果在大体相同的条件下，几次测验都得到了大体相同的分数，那么这个测验的信度是较高的，反之，信度就低； 即如果被试的实得分数与真实分数差距小，则测验的分数越可靠，信度越高。 通常用信度系数衡量测验好坏： 一般能力与学籍测验的信度系数常在0.9以上； 性格、兴趣、态度等人格测验常在0.8-0.85之间,有的认为0.7以上。 估计信度的方法 再测信度 复本信度 分半信度 内部一致性信度 教育测量的效度 效度是测量的有效性，即一个测验对它所要测量的特性准确测量的程度。 效度不仅受随机误差的影响，还受系统误差的影响。 效度的类型 内容效度 构想效度 内部效度 统计结论效度 外部效度 内容效度 题目对欲测的内容或行为范围取样的适当程度，即是否充分代表了该范围内的基本知识和基本能力。 要具备好的内容效度要满足两个条件： 确定好内容范围； 测试题目具有该范围的代表性。 确定内容效度的方法 专家判断法 再测法 内容效度较适合评价教育成就测验和职业选拔测验； 缺乏可靠的数量指标，妨碍各测验间的相互比较。 构想效度 测验对理论上的构想或特质的测量程度； 即测验所提供的数据同理论假设的符合程度。 要获得较高的构想效度： 理论构思必须结构严谨，符合逻辑，层次分明，形成某种“构思网络”； 对研究的各种变量作出明确、严格的说明； 给变量下明确的操作定义，并制定相应的、客观的测量指标； 消除或控制影响构思效度的因素。 影响构思效度的因素 对构思缺乏明确的说明，概念解释模糊，逻辑关系不清； 单一方法和操作引起的偏差； 构思水平之间的混乱； 研究过程中主试的期望、被试因猜测而发生的心理与行为的改变，不同实验处理的相互作用等。 内部效度 自变量与因变量之间存在一定关系的明确程度； 即所研究的两个或多个变量之间是否存在一定的关系？是否确实是自变量的变化引起了因变量的变化？ 影响内部效度的因素： 成熟因素； 历史因素； 被试选择上的差异； 被试缺失产生的效应； 前测的影响； 实验程序不一致等 统计结论效度 检验研究结果的数据分析程序与方法的有效性的指标。 主要受数据的质量，统计的假设等因素影响。 研究的外部效度 研究结果能够一般化和普遍化到样本来自的总体和其他变量条件、时间和背景中去的程度，即研究结果的普遍性和代表性。 再测信度 用同一个测验，对同一组被试前后两次施测，两次测验分数的相关系数即得信度系数。 满足的条件： 所测量的特性必须是稳定的； 遗忘与练习的效果相同； 两次施测期间被试的学习效果没有差别。 缺点 易受练习和记忆的影响； 优点 能提供测验结果是否随时间变化的资料，作为预测被试将来行为的依据； 适用于速度测验，不用用于难度测验。 复本信度 根据一组被试在两个等值测验上的得分计算的相关系数即为复本信度系数（肯德尔和谐系数）。 优点 可以在一定程度上避免再测法的缺点； 缺点 需要编制等值的两份问卷，比较困难。 分半信度 按照正常的程序实施测验，然后将全部试题分成相等的两半，被试组在这两半测验上的分数之间的相关系数即为信度系数。 通常采用奇偶分半法，得到半个测验的信度，求整个测验的信度，需要校正。 当两半测验分数具有相同的平均数与标准差，用斯皮尔曼-布朗校正公式； 当两半测验分数具有不同的平均数与标准差，用卢伦校正公式； 优点 减少学生的疲劳、厌烦等因素的干扰 缺点 只能表示两半试题的等值程度，不能提供时间稳定性的信息。 内部一致性信度 即测验内部所有题目间的一致性，如果在一个测验中各道题得分有较大的正相关时，则测验是同质的； 也就是说该测验中所有的项目都测量相同的特质或程度略同的特质。 在李克特态度量表中常用的信度检验方法为Cronbach系数。 如果一个测验或量表，包含了数个小测验或构想层面，则每个小量表或构想层面的信度也要检验。 多数子测验或构想层面间的信度系数值会低于总测验或总量表的信度系数值。 例cha-2.sav： 因素层面1：a1,a2,a3,a4,a5,a6,a7,a8 因素层面2：a10,a11,a12,a13,a14,a15 因素层面3：a20,a21,a22 因素层面4：a16,a18,a19 Analyze/Scale/Reliability Analysis * * *