03测量效度程序.ppt

心理测量 Psychological Measurement 于红军 sfthongjun@buu.edu.cn 北京联合大学师范学院 应用心理学教学部 第03章 测量效度 本章学习目标： 1、理解效度的概念和统计学含义。 2、掌握信度和效度之间的关系。 3、掌握三种效度的概念及其估算方法。 4、了解提高测量效度的途径。 5、理解表面效度和效标污染的概念。 第一节 效度的定义 一、效度的含义 所谓的测量效度是指测量结果的有效性、准确性程度，也就是一个测验实际能测出其所要测量的心理特质的程度。 效度关注两个基本问题：其一，心理测验所测查的“心理特质”是什么（测验目的）；其二，该测验对欲测量的心理特质测查到了什么程度？测量的准确性和有效性如何? 分析实际测量的结果与测量目标之间的关系。 效度检验的实质 二、效度的概念理解 1、效度是一个相对的概念。 效度是相对于一定的测量目的而言的。 效度不是一个全或无的概念。 2、效度是随机误差和系统误差的综合反映。 3、效度不是直接可以测量到的，判断一个测验是否有效要从多方面搜集证据，从证据去推论测验的效度 (犹如法庭上收集证据一样) 。 三、用统计学术语谈效度 根据CTT假设，有以下公式存在： 四、效度与信度的关系 高效度是高信度的充分条件 效度较高的测验，其信度一定高; 效度很低的测验，其信度系数未必低。 高信度是高效度的必要条件 信度系数低的测验，其效度必然低; 信度系数高的测验，其效度未必就高. 信度系数的平方根是效度系数的最高限度 充分条件、必要条件、充要条件？ 充分条件（充足条件）？ 当有事物情况p，就必定有事物情况q时，p就是q的充分条件。 必要条件？ 当没有事物情况p，就没有事物情况q时，p就是q的必要条件。 充分必要条件（充要条件）？ 如果有事物情况p，就必定有事物情况q时，而没有事物情况p，就没有事物情况q，那么，p就是q的充分必要条件。 第二节 效度的种类与确定方法 1966年，弗伦奇 (French)和米歇尔(Michbel)根据测验目的的不同，把效度分为： 内容效度 结构效度 效标关联效度 预测效度 同时效度 1974年，美国心理学会采纳了这种分类意见。 效度是一个整合的概念，不同类型的效度 只是寻求证据的方式不同，三者有交叉重叠。 一、内容效度 （一）内容效度的含义 定义：指一个测验实际测到的内容与所要测量的内容之间的吻合程度。或者说，指测验题目对所要测量的内容范围的代表性程度。 内容效度的关键问题是测验题目取样的代表性程度。（覆盖面不够、偏题、超纲） 具备高内容效度的两个基本条件 1、所要测量的内容范围必须定义清楚，界限分明，重点突出。 2、测验题目应是所界定的内容范围的代表性取样。 以“教学大纲”为例，它明确规定了教学范围、 教学目标、每一章的知识要点、重点和难点，这些既 是教学的纲要，也是考试命题的参照标准； 参照教学大纲，教师命题时一是不要超纲，二是 题目的覆盖面要尽可能宽，三是题目要具有典型性、 代表性，四是题目的难度和区分度应合乎要求。这些 都是保证题目取样能够具有较高代表性的条件。 内容效度的适用范围 内容效度主要用于学绩测验和职业测验（基于工作任务分析）。 人格测验、能力倾向测验、智力测验不适合采用内容效度。 （二）确定内容效度的方法 1、逻辑分析法：即专家判断法，请有关专家对 测验题目与原定内容范围的吻合程度作出判断。 定性分析与定量分析相结合。 步骤如下：（1）明确欲测内容的范围；（2） 确定每个题目所要测量的类型，并与双向细目表 对照；（3）制定评定量表。综合评价测验题目是 否有效地代表了所要测量的内容范围。 2、教学前测与后测法 被试学习某种知识之前做一次测验（如心 理测量学的知识测验），在学习该知识之后再 做同样的测验。比较前测与后测的成绩差异， 若后测成绩显著优于前测成绩，则说明测验内 容是新近学习的知识，这个测验具有较高的内 容效度。 学科成绩测验与智力测验的内容效度 学科成绩测验的内容效度： 测验题目领域类别的分数比例，与课程教学计划所要求的知识和能力领域分布比例是否一致？ 测验考察的各种能力层次的分数分布，是否与学科教学目标的层次要求相一致。 智力测验的内容效度： 测验的项目和题目是否比较全面地考察了公认的智力行为类别。 如果公认的智力行为表现有10个方面，某智力测验只含3个方面的题目。该测验的内容效度高吗？ 内容效度分析练习一 根据《中国历史》课程的教学时数比例和对测验的命题要求要求，分析哪个测验的内容效度较好？ 内容效度分析练习二 根据测验对各层次目标的命题要求，试分析哪份试卷的内容效度较高？ 如何分析和提高一般心