《心理测量学》第五章测量效度1.ppt

第五章 测量效度 本章内容 效度概念及其与信度的关系 效度的种类及估计 提高测量效度的方法 一个现实的问题 1997年1月，北京市政府宣布从社会各界公开招聘57名厅、局级干部（均为副职）。经过各种测验和测评，57名干部从2000多名候选人中脱颖而出，如期上任。 其中使用的测验技术包括：结构化面试，评价中心，纸笔考试（专业知识）等。 你从测验学的角度如何看待这一举措？不考虑政治因素。 根据测验分数作出推断的例子 得这个分数的人能顺利完成医学院的训练 得这个分数的人可能成为最令人满意的工程师 得这个分数的人极有可能从厂里偷东西 第一节 效度概述 一、什么是效度 效度（validity）是指一个测验或量表实际能测出其所要测的心理特质的程度。 例： 语文能力好的学生，在语文测验上的得分高；语文能力不好的学生，在语文测验上的得分低 注意： （1）效度是一个相对的概念： 效度是相对于一定的测量目的而言的。 每个测量工具都有自己的目的；测量某一特质有效的量表，若用它来测量另一种特质，必然无效，如，用测身高的钢尺测量体重，用测量智力的量表测性格。 内隐特质是通过外显行为间接测得的。所以，测量无法达到100％准确，而是一定程度的准确，效度永远不会为0。 （2）效度是测量的随机误差和系统误差的综合反映。 （3）判断一个测量是否有效要从多方面收集证据。 实测结果无法和心理特性直接比较，而必须先从多种角度把特性描述清楚。 操作定义：与目的有关的真分数在实测分数中所占的比例 实测分数=真分数+误差(随机误差) 与目的 与目的 有关 无关(系统误差) 效度=S2V/S2X=r2XY rXY代表效度系数，S2V代表有效变异数，S2X代表总变异数 二、效度和信度的关系 信度高是效度高的必要而非充分条件 有信度的测验未必有效度，高效度可保证某种程度的信度 信度低，效度一定低，但测验具有效度之前，需先具有信度，因若测验不可靠，更不用谈其正确性。 效度高，信度一定高，但效度低，信度不一定低 效度需要测验分数的一致性和正确性，但信度仅需要一致性即可。 效度是受信度制约的 第二节 效度的估计 测量效度的估计很大程度上取决于人们对测量目的的解释。 常见的解释角度主要有三种： 用测量的内容来说明目的（内容效度） 用心理学上某种理论结构来说明目的（构想效度） 用工作实效来说明目的（实证效度） 一、内容效度 1．含义及应用范围 内容效度（content validity）是指测验题目对有关内容或行为取样的适当程度，即一个测验实际测到的内容与所要测量的内容之间的吻合程度。 因此，一个测验要有内容效度必须具备两个条件： （1）要有定义完好的内容范围 包括欲测的知识范围，以及该范围内各知识点所要求掌握的程度 （2）测验题目应是所界定的内容范围的代表性取样。 内容效度主要应用于成就测验，也适合于某些用于选拔和分类的职业测验。 但不适用于能力倾向测验和人格测验。 表面效度（surface validity）：外行人对某个测验从表面上看好像是测某种心理特质的程度。并不是一种真正的效度。 人格测验要求表面效度不宜过高。 2．内容效度的确定方法 （1）逻辑分析法：专家判断根据自己的知识经验对量表的有效性（逻辑性）作出判断，也称逻辑效度。 为使内容效度的判断过程更客观，一般采用下列步骤： ①确定测验内容的总体范围； ②编制双向细目表； ③编制评定量表，从测验内容所测的技能、题目对所定义的范围的覆盖率、各种题目数量和分数的比例以及题目形式的适当性等方面，对测验作出总的评价。 提高内容效度的方法之一： 编制命题的双向细目表 （2）统计方法：用两个测验复本来测同一批被试，若相关高，则内容效度可能高，但若相关低，则说明必有一个测验缺乏内容效度。 ? （3）再测法： 前测→教学→后测 如果后测成绩优于前测成绩，说明该测验具有一定的内容效度。 二、结构效度 1．含义、特点与应用范围 结构效度（structure validity）是指一个测验实际测到所要测量的理论结构或特质的程度，或者说测验分数能够说明心理学理论的某种结构或特质的程度。 特点： （1）具有不同理论构思的测验，其结构效度是无法进行比较的； （2）结构效度有时很难获得； （3）结构效度没有单一的指标，是由各方面的证据累积起来进行评价的。 2．结构效度的确定方法 结构效度确立的一般步骤： （1）提出理论框架； （2）依据理论框