最新chapter5-validity.pptVIP

第五章 测量效度 Validity 何为有效的测量？ 没有人会用天平来测量时间，用直尺来测量重量。 因为天平是用来测量重量的，而直尺是用来测量长度的。 如果将这些工具用于一些无关的目的，就这些目的而言用它们是无效的。 续… 有时我们编制心理测验，并且认为达到了自己期望的目的，但结果却发现测验实际上只测量到了一些与目的完全不相干的特质。 如果被测到的特质与自己的测验目的不相符，那么无论它的信度多高也是没有用的，是无效的。 学习目标 掌握效度的概念及其与信度的关系。 掌握效度的种类，掌握各种效度的估计方法。 了解影响效度的因素及提高效度的方法。 了解效度的具体应用。 主要内容 效度概述 效度的种类及估计方法 内容效度 结构效度 效标关联效度 影响效度的因素/怎样提高测验的效度 效度的应用 效度概述-定义 效度 (Validity) , Val 测量结果的有效性程度，也就是一个测验对其所要测量的特质测量到了什么程度。 效度系数 (Validity Coefficient) , rxy 描述某种测量结果有效性程度的数量指标。 效度的“相对性” 效度是一个相对的概念，这种相对性表现在以下两个方面： 效度是相对于一定的测量目的而言的。 效度只有程度上的差异，而不是“全”或“无”的差异。 效度的数学含义 依据经典测量理论的观点，效度被定义为：在测量中与测量目的有关的真实变异与总变异的比率。 即 效度概述-效度与信度的关系(1) 高信度是高效度的必要非充分条件。 高效度是高信度的充分非必要条件。 效度概述-效度与信度的关系(2) 测验的效度受它的信度制约，效度系数的最高限度是信度系数的平方根。 测量效度种类及评估方法 内容效度 效标关联效度 结构效度 含义及基本保证条件 评估方法 应用 内容效度-定义 内容效度 content validity 指测验项目所涉及的内容对欲测内容范围的代表性程度。 或者说所测内容对要测内容范围取样的代表性。 内容效度-基本保证条件 要获得较高的内容效度，必须具备两个基本条件： 欲测量的内容范围必须定义清楚，界限分明。 测验项目应是所界定的内容范围的代表性取样。 内容效度-评估方法 专家判断法 经验法 再测法 复本法 内容效度评估-专家判断法 由专家对测验项目与所欲测验的内容范围的吻合程度进行系统的比较判断。 具体方法步骤如下 : 依据双向细目表，明确所要测量的内容范围。 确定每题所测的内容，并与双向细目表对照。 制定评定量表以评定测验的整个效度及其他特点。 表× 高二化学标准测验双向细目表 内容效度评估-经验法 如果测验总分和题目的通过率随着年级的增加而增加，则说明该测验对于教学效果的测量具有较好的内容效度。 内容效度评估-再测法 如果后测成绩显著优于前测成绩，则说明此测验对于这部分知识学习而言具有高的内容效度。 内容效度评估-复本法 获得被试在两个独立取自同一内容范围的测验上的分数，计算出他们的相关，把这一相关作为对内容效度的数量估计。 相关高？ 相关低？ 内容效度-具体应用 内容效度的评估最适合于成就测验 知识和技能的掌握程度 也适合于某些选拔和分类的人事测验 内容效度-表面效度 表面效度(surface validity) 指被试或其他未受过专门训练的人员对测量有效性程度的估计。 严格意义上，表面效度不能算是一种效度，它不反映测验实际测量的内容，但可取得被试的合作。 何时重视表面效度？ 效标关联效度-定义 效标关联效度 criterion-related validity 指测验对个体的效标行为表现进行估计的有效性程度。 又称实证效度、经验效度、准则关联效度，等。 效标关联效度-类型 标准：效标资料获得的时间 同时效度(concurrent validity) 效标资料与测验资料同时获得。如，机械能力倾向测验… 预测效度(predictive validity) 效标资料后于测验资料获得。如，招聘选拔类考试… 效标关联效度-具体应用 同时效度：诊断现状 … 预测效度：预测未来表现 … 例如，某人患病了吗？某人会成功吗？ 效标关联效度-效标与效标测量 效标(criterion) 衡量测验有效性的参照标准，它是独立于测验之外、体现测验目的的行为变量。 观念效标(conceptual criterion) 效标测量(criterion measurement) 续… 观念效标 效标的实质内容。如，学习或工作成功、技术水平，等 效标测量 效标的具体化，可操作的测量指标。 同一观念效标可以有多个效标测量。 效标关联效度-常用效标 学业成就：学业成绩、学历、奖励，等 工作成就：实际工作表现 等级评定：以效标行为的主观评定作为效标测量 团体对照：选择效标行为表现有差异的团体 先前已被证明有