第二讲 问卷的心理测量学指标及误差控制_PPT课件.ppt

心理测量学 一、 测量效度概述 什么是效度 测量工具测量了他所希望测量的心理特质或行为特征的效果和程度。 Val=SV2/SX2=rxy2 Val为效度，rxy为效度系数 可能是因为预测效度的最大值为rxy2 = rxxryy 心理测量学 一、测量效度概述 效度验证与效度概化 我们称为某测量工具进行效度验证的过程为效度证据的获取过程，简称为效度验证。 本地效度验证（local validation） 效度概化（validity generalization）：在某一情境中所作的效度研究能否推广到其他情境。 心理测量学 效度与信度的关系 1、高信度是高效度的必要条件，而不是充分条件 2、信度系数的平方根是效度系数的最高限度 心理测量学 效度的性质 （1）效度是针对测验结果的 测验效度是“测验结果”的有效性程度。 （2）效度是针对某种特定的测验目的的 没有对任何测量目的都有效的测验 （3）效度只有程度上的差异 不是“全”或“无”的差异 心理测量学 二、测量工具效度验证的方法 根据测量目标的不同，对测量工具进行效度验证的方法主要有三种： 基于所测内容的效度验证方法。 基于所测心理结构的效度验证方法。 基于效标关联性的效度验证方法。 心理测量学 基于所测内容的效度验证方法 含义 就是要对测量工具本身的具体内容进行系统性的查验，以确定这些内容是不是测量目标特质或行为领域的一个有代表性的样本。 主要应用 学业成就测验、职业资格测验，人员选拔与安置中的工作样本测验。 心理测量学 基于所测内容的效度验证方法 评估方法 确定测量目标的全域范围及各部分内容权重。 确定一批有经验的领域专家，在深入培训的基础上，要求他们按照已确定的测量全域范围及各部分内容权重，初步分析测试题目的代表性，并对题目测量的被试作答的内部心理过程进行初步分析。 进行实测，根据测试数据分析和被试作答过程分析，全面验证测量工具的效度。 内容效度的注意事项 适合于评价成就测验 尤其适合于内容参照测验 适合于测量具体属性的测验 也适用于某些对员工进行选拔和分类的职业测验 能力倾向测验和人格测验不太适合 心理测量学 心理测量学 基于效标关联性的效度验证方法 效标：它是独立于测量工具并可以从实践中获得的被试的行为特征表现，用于验证测量工具的有效性。 校标污染（criterion contamination）:主试知道了被试的测验分数而影响了对其校标分数的评定。 心理测量学 基于效标关联性的效度验证方法 根据测量工具与效标两者结果获得的时间间隔的不同，基于效标关联性的效度证据采集可以有同时性设计与预测性设计两种方法。 心理测量学 二、 测量工具效度验证的方法 基于效标关联性的效度验证方法 效度证据采集的预测性设计方法 含义：验证现有测量评价结果与将来才可能获取的效标评价结果之间的关联程度。 主要应用：人员选拔、安置类型的测量工具 心理测量学 测量工具效度验证的方法 基于效标关联性的效度验证方法 效度证据采集的预测性设计方法 首先，获取被试在当前测量工具上的评价结果，如测验分数、等级评定； 然后，间隔一定的时间，采集被试在预测目标（效标）上的评价结果； 最后，分析以上这两个评价结果之间的关联性程度，这种关联性程度的分析方法常用的有以下几种： 相关分析 区分能力分析 命中率分析 心理测量学 区分能力分析 分析测量工具对被试分组的准确性 比如，一个测量工具根据分数高低把被试分成了两个组：一个是优秀组，一个是普通组，分组的合理性就需要在被试将来的实际表现中进行验证。 在一定的时间间隔以后，采集这两个组被试的实际工作表现，根据这些实际表现可以把这批被试重新分组，最后，求取这次分组结果与最初分组结果之间的一致性程度，以验证该测量工具预测的准确性。 心理测量学 命中率分析 某销售岗位需要选拔20名员工，一共有100名报名，最后，通过制作的测量工具选拔了20名员工。但由于这时销售工作的迅速发展，于是公司设定把被淘汰的人也招募进来成为正式员工。经过一年的实际工作，发现通过专门的测量工具选拔进来的20名员工中，有2人未完成预定任务，占1/10，而一开始被淘汰的80名员工中，有20人未完成预定任务，占1/4，这时候，我们可以得出结论认为，这个测量工具对选拔该岗位的销售人员是有效的，具有较高的预测能力。 心理测量学 基于效标关联性的效度验证方法 效度证据采集的同时性设计方法 含义：对同时获得的测量工具评价结果与效标评价结果之间的关联性程度进行分析。 主要应用 经常用于评价测量工具诊断被试当前心理特质状态的效果。 在许多情形下，效度证据采集的同时性设计方法会替代预测性设计方法。 评估方法 与预测性设计方法一样 心理测量学 基于效标关联性的效度验证方法 基于效标关