测量效度与系统误差控制95336.ppt

第三章 测量效度与系统误差控制 案例一 美国杜克能源公司某蒸气站被12名黑人雇工告上了法庭，缘由是该公司把他们都当勤杂工使用，每天的仸务就是扫地和清洁，他们原本指望能被提升到像运煤工这样层次更高的岗位上，但公司说他们的智力测验分数不够，而该公司的14个黑人员工中有13个做勤杂工，诉讼的理由是智力测验有种族歧规。而公司说没有仸何歧规，岗位安排完全根据测验结果来定，没有歧规黑人。 法庭要求公司提供测验对职位胜任的预测力 案例二 某大学学生期终考试后向校方提出质疑，说教授给出的考词范围是教科书中的1—10章，但考词内容却都集中在前三章，这样的考试无法检验真实的学习成绩，也就是考试并没有提供一个让我展现所学全部知识的机会。 第三章 测量效度与系统误差控制第一节 测量效度概述 效度所要回答的问题：(1)测验测量的是什么？(2)对它所测量的东西测量到什么程度？ 一、效度的概念 CTT认为，效度(validity)是指一个测验或量表实际能测出其所要测的心理特质的程度 第三章 测量效度与系统误差控制第一节 测量效度概述 （一） 对效度概念的理解 1 效度是一个相对的概念： (1)效度是相对于一定的测量目的（结果）而言的 ? 当我们说“这个人格测验有效吗？”这样的问题。实际上是在问“这个测验是否测量到了人格特质”。所以测验的有效性是针对测量结果而言的。 没有一种对任何测量目标都有效的测验。同一测验因其使用目的及验证方法不同，效度也不同。 我的脚几点了？ 第三章 测量效度与系统误差控制第一节 测量效度概述 （一） 对效度概念的理解 1 效度是一个相对的概念： (2)效度只有程度上的差异 心理特质隐蔽的特性，只能通过行为来间接研究。所以测量人的心理特质只能达到某种程度的正确。因此，效度也不是全或无的问题，而是一个有效程度的差别。 正常情况下，效度不会为零；只要使用测验就有误差， 也不可能达到完全有效。因此，应在考虑其用途的基础上，用“高”，“中”，“低”等来评价测验在多大程度上有效。 第三章 测量效度与系统误差控制第一节 测量效度概述 （一） 对效度概念的理解 2 效度是测量的随机误差和系统误差的综合反映。 随机误差大时，实测结果会偏离真值，造成结果的不准确。若测验中还存在系统误差，则系统误差会加大测验误差。 3 判断一个测量是否有效要从多方面收集证据 可以从理论上，也可以从实践上获取测验效度。 第三章 测量效度与系统误差控制第一节 测量效度概述 （二） 效度的数学定义及其基本原理 回顾前面介绍的CTT的内容： 一组测验分数的总变异(σ2X)包括三部分： 真实的（稳定的）、与测量目的有关的变异(σ2V) 真实的、但出自无关来源的变异(σ2I) 随机误差的变异(σ2E) 第三章 测量效度与系统误差控制第一节 测量效度概述 （二） 效度的数学定义及其基本原理 三者关系如下： σ2X= σ2V + σ2I +σ2E CTT将测量效度定义为：在一列测量中，与测量目的有关的真实变异数（由所要测量的变因引起的有效变异数）与总变异数（实得变异数）的比率 。 val.= σ2V /σ2X=r2XY 第三章 测量效度与系统误差控制第一节 测量效度概述 二、效度与信度的关系 根据公式σ2X= σ2V + σ2I +σ2E ，可以得到信度与效度的关系如下： （一）信度高是效度高的必要而非充分条件。 当σ2E减小时， σ2T增加，测验信度随之提高，信度的提高只给σ2V的增加提供了可能，还要看σ2I的大小。 信度高效度不一定高，效度高则信度一定高； 信度低，效度不可能高，效度低，信度有可能高。 第三章 测量效度与系统误差控制第一节 测量效度概述 二、效度与信度的关系 （二）测验的效度受它的信度制约,效度以信度为上限。 根据r2XY =σ2V / σ2X rXX =σ2T / σ2X σ2T= σ2V + σ2I 可得 r2XY ＜rXX 效度值总是小于信度值 第三章 测量效度与系统误差控制第一节 测量效度概述 二、效度与信度的关系 （三）效度对一个测验来说它的作用比信度更重要。一个测验若效度很低，那么即使效度再高也没有意义。 用一套测验词汇的测验测量个体对语法的掌握程度？ 一个稳定但无效的智力测验。 第三章 测量效度与系统误差控制第一节 测量效度概述 二、效度与信度的关系 一个稳定但无效的智力测验 （ ） 1. 你出生在几月份? 2. 你母亲姓什么? 3. 1+1=? 4. 一个星期有几天? 5. 下面哪个是三角形? A. □ B. ○ C.▲ 第三章 测量效度与系统误差控制第二节 测量工具效度验证方法 要把握一个测验应用于某方面的有效性，不能凭主观臆测来解决，而要靠收集客观亊实和证据来说明。 由于测量的