测量效度与系统误差控制 （心理测量课件）.pptx

第十一节 效度及其与信度的关系 1······什么是信效度目 录CONTENTS2······效度与信度的关系 评价测量工具的指标：信度测量工具是否会受到各种随机误差因素（如时间间隔）的影响以及受这些因素影响的程度。效度测量工具究竟测量了什么心理行为特质，测量的效果如何。 一、什么是效度效度（validity）指的是测量工具测出它所希望测量的心理特质或行为特征的效果和程度。效度总是与一定的测量目标相联系的。 了解高中毕业生职业兴趣结构了解学生知识技能掌握水平通过智力量表选拔合适管理者关注：是否确实测量了职业兴趣及其结构特点关注：是否测量了学生的知识技能，及测量内容的覆盖面、各部分内容权重安排是否合理等关注：通过智力量表为企业选拔的管理者是否在管理岗位上表现优秀 一、什么是效度 一、什么是效度信度稳定性效度准确性 一、什么是效度效度验证（validation）：对某测量工具进行效度验证的过程被称为 效度证据的获取过程。 二、效度与信度的关系信度只受到随机误差或非系统测量误差的影响效度同时受到随机误差和系统测量误差的影响12 二、效度与信度的关系一个测量工具可能是非常稳定（信度高）的，但却是无效的。一个完全不稳定（信度低）的测量工具也不可能是有效的。测量信度高是效度高的必要而非充分条件。 第十二节 基于所测内容的效度验证方法 1基于所测内容的效度验证方法2基于效标关联性的效度验证方法3基于所测心理结构的效度验证方法100%效度验证方法 1······含义和应用目 录CONTENTS2······评估方法3······与表面效度的区别 一、含义和应用（一）含义基于所测内容的效度验证方法，就是要对测量工具本身的具体内容进行系统性的查验，以确定这些内容是不是测量目标特质或行为领域的一个有代表性的样本。 一、含义和应用（二）应用一般用于那些测量知识或技能掌握程度的测验，如学业成就测验、职业资格测验等。基于所测内容的效度验证方法也可以用在其他一些更广泛的领域中，如人员选拔与安置中的工作样本测验。一般很少用于一般能力测验、人格测验中，因为这类测验很难预先确定测试的内容范围。 二、评估方法1需要明确地界定所测特质或行为领域的全域范围，以及各方面内容的合理比例关系。2需要对被试作答的内部心理过程进行分析，以确定被试是如何得到作答结果的，进而评价所测量的潜在特质是否符合测量目标。 二、评估方法一般来说，基于所测内容的效度验证过程包括以下三个步骤：1确定测量目标的全域范围及各部分内容权重。如在学业成就测验中，这个过程就是根据教学大纲编制命题双向细目表。 二、评估方法某学科的标准测验双向细目表识记了解应用分析综合 评价合计第一章8210第二三章3624722第四章291265640合计5252814226100 二、评估方法2确定一批有经验的领域专家，在深入培训的基础上，要求他们按照已确定的测量全域范围及各部分内容权重，初步分析测试题目代表性，并对被试作答的内部心理过程进行初步预分析。3进行实测。根据测试数据分析和被试作答过程分析, 如出声思考、事后访谈分析等，全面验证测量工具的效度。 三、关于测量工具的表面效度严格来说，表面效度并不符合效度的定义，因为它反映的不是实际要测量的目标是什么，或对目标测量的程度如何，而是测量工具从表面上看测量了什么。实际上，表面效度关心的是测量的友好性以及与公众的和谐关系。因此，虽然表面效度并不符合效度的一般定义，但一般来说，测量工具的编制者还是应该追求良好的表面效度。 第十三章 基于效标关联性的效度验证方法 目 录CONTENTS2······效度证据采集方法3······影响因素和估计标准误1······基于效标关联性的效度验证方法的含义 一、基于效标关联性的效度验证方法的含义被试在该测量工具上的表现与另外一个独立存在的、 可观察的相关行为特征表现之间的关联性程度。如果一个测验的预测与将来实际发生的情况非常一致， 即预测准确性高，便说明它是一个好的测验。 效标：这个独立存在的、可观察的相关行为特征表现。它是独立于该测量工具并可以从实践中获得的被试的行为特征表现。职业选拔测验一、基于效标关联性的效度验证方法的含义 在心理测量中，常用的效标有：学业成就专门的训练成绩实际的工作表现行为表现的等级评定临床诊断其他现成的有效测验得分一、基于效标关联性的效度验证方法的含义 二、基于效标关联性的效度验证方法的效度证据采集方法 二、基于效标关联性的效度验证方法的效度证据采集方法（一）效度证据采集的预测性设计方法1含义和应用含义：验证现有测量评价结果与将来才可能获取的效标评价结果之间的关联程度。应用：人员选拔和安置类的测量工具的效度评价。