效度与系统误差.pptVIP

第1页，共38页，星期日，2025年，2月5日一个现实的问题?1997年1月，湖北省政府宣布从社会各界公开招聘36名厅、局级干部(均为副职)。经过各种测验与测评,36名干部从4000多名候选者中脱颖而出,如期上任。?其中使用的测验技术包括：结构化面试,评价中心,纸笔考试(专业知识)等。?你从测验学的角度将如何看待这一举措？不考虑政治因素。一.效度的概念第2页，共38页，星期日，2025年，2月5日你如何解释下述现象？一个很聪明的孩子,测得智商是80分一个学习很好的学生,考试成绩为60分一个人缘很好的人,人际关系测量低于常模值第3页，共38页，星期日，2025年，2月5日根据智力测验分数作出推断的例子?得这个分数的人能顺利完成医学院的学业?得这个分数的人可能成为最令人满意的工程师?得这个分数的人极有可能从工厂里偷东西第4页，共38页，星期日，2025年，2月5日测量效度=测量的准确性、有效性效度是一个测验能够测量其所要测量的特质的准确程度(theextentordegreetowhichthetestmeasureswhatitwasdesignedtomeasure)。?或根据测验分数做出的推断的正确性。即：这个测验测的是什么？这个测验测得准不准？?一个测验的效度不止一个,不存在一个一般的效度,因为一个测验可能测的是一个非常宽泛的概念,如智力,根据测验分数可以做出许多推断。第5页，共38页，星期日，2025年，2月5日效度的概念理解1、效度是一个相对的概念。效度是相对于一定的测量目的而言的。效度不是一个全或无的概念。2、效度是系统误差和随机误差的综合反映。3、效度不是直接可以测量到的，判断一个测验是否有效要从多方面搜集证据，从证据去推论测验的效度(犹如法庭上收集证据一样)。第6页，共38页，星期日，2025年，2月5日测量学中的效度概念?与测量目的有关的真实变异(或有效变异)在实测值变异中的比例?即rXY=SV2/SX2第7页，共38页，星期日，2025年，2月5日对同一测验之有效与无效的推断?使用MMPI你可以对患有心理障碍的人做出有效推断，但不能对“正常人”做出有效推断。?尺子可以用来度量长度,但不能用来度量重量,即便每次度量的结果都完全一样。第8页，共38页，星期日，2025年，2月5日效度与信度关系(1)高效度,高信度(2)高信度,低效度(3)低信度,低效度信度是效度的必要而非充分条件?rXY=SV2/SX2=(SX2-SI2-SE2)/SX2=1-SI2/SX2-SE2/SX2=rXX-SI2/SX2?SI2≥0?rxy≤rxx第9页，共38页，星期日，2025年，2月5日信度的平方根为效度的最高限即?rXYmax=rXY/(rXX*rYY)1/2?1.0≥rXY/(rXX*rYY)1/2?rXY≤(rXX*rYY)1/2?rXY≤(rXX)1/2一个测验的效度总是受它的信度所制约第10页，共38页，星期日，2025年，2月5日效度的种类证明一个测验是有效的(validation),必须保证在以下三方面均是有效的?内容(content)?效标关联或实证(criterion-relatedorempirical)?构想或结构(construct)不能只独立地保证一方面。构想效标关联内容第11页，共38页，星期日，2025年，2月5日1.内容效度(ContentValidity)及其估计内容效度指测验实际测到的内容与所要测量的内容之间的吻合程度。?基本前提:测验试题应为所欲测内容或行为范围的有效性样本。?基本条件：1)每个试题应与所界定内容或行为范围有适度相关2)测验内容应能确切涵盖所界定对象之范围3)试题分配应能反映范围内各种变项或成分所应占的比重4)保证有一定的题量?主要用于建构或评价成就测验?依赖专家判断(基于逻辑)—定性分析?其他估计方法:复本法再测法经验法二.效度的估计第12页，共38页，星期日，202