效概念的演进新进展及效的估计方法.pptxVIP

效度概念的演进、新进展 及效度的估计方法;一、效度概念的演进及其新进展; 效度作为对测验工具的质量进行评价的一个非常重要的指标，经历了一个历史的演进过程。 伴随着测量理论和实践的发展，效度由一个单薄的相关系数发展成为一个内涵丰富的、多维的概念系统。之所以称其为概念系统是因为它涉及的不再只是测验的某一个方面或环节，而是包括了测验全过程的多个方面，从测验编制所依据的理论到测验内容本身，从分数解释的价值内涵到测验实施可能带来的社会后果，效度的概念已经逐渐演变成为一个对整个测验过程的质量进行全面监控的体系。 效度概念的变迁不仅反映了测量理论本身的发展，而且表明人们对测验的全过程所采取的态度越来越谨填、客观和科学，以及越来越精确的要求。;1.效度概念发展的第一个阶段：相关即有效 2.效度概念发展的第二个阶段：效度有多种类型 3.效度概念发展的第三个阶段：效度是一元且多维的 ;（一）第一阶段：相关即有效;（二）第二阶段：效度有多种类型; 1954年，美国心理学会《关于心理测验和诊断的技术建议》一书对当时流行的各种效度概念进行了归纳概括，列举了四种类型的效度: ①预测效度 ②同时效度 ③构想效度 ④内容效度 1966年，美国心理学会、美国教育研究学会和国家教育测量委员会联合出版的《教育与心理测验的标准和指南》中，将效度类型进一步简化为： ①效标关联效度 ②构想效度 ③内容效度 该阶段的特点：出现了各种与特定测验目的相联系的效度类型。 特点：美中效度都与特定的目的相联系——人们普遍认为，不同的测验有不同的效度要求，比如成就测验更重视内容效度，能力测验强调效标关联效度，而人格测验则突出构想效度等。;（三）第三阶段：效度是一元且多维的; 在这阶段，作出突出贡献的是美国学者Sam Messick，他于1989年提出的效度理论，极大地深化和推动了人们对效度概念的认识和理解。 Sam Messick认为，效度是一种总体性的、评价性的判断，代表了理论原理在多大程度上证明了由测验成绩所得解释的充分性和恰当性。将效度划分为多种类型??传统做法得到的效度是支离破碎的、不完整的，而且这种做法缺乏对测验成绩的价值内涵和社会后果的考虑。新的、一元的效度概念将这些方面统合起来组成一个更为全面的构想效度理论。; 第一，内容方面。主要涉及内容的相关性和代表性两个问题。 第二，实在性方面(the substantive aspect)。即测验应保证所引发生的心理加工过程有代表性，应该提供实验证据证明被试在任务完成过程中确实运用了设想的心理加工过程。 第三，结构方面。要求测验的评分模式与待测构想的内在结构相一致。即评分模式应该最大程度的反映行为表现背后所隐含的结构关系。 第四，概括化方面，即分数意义的适用范围和界限。 第五，外部方面。即测验成绩与其它测验结果之间的关系在多大程度上反映了待测构想的理论预期。 (辐合型的相关模式和区分型的相关模式)。 第六，后果方面。该方面关注测验使用的价值含义和社会含义，旨在收集用于评价分数解释和使用结果方面的各种证据。; 构想效度的这六个方面紧紧围绕着测验的各个环节展开。收集效度证据的来源包括但并不限于:基于测验内容的证据、基于反应过程的证据、基于内部结构的证据、基于测验分数与其它变量之间关系的证据，基于测验后果的证据。 总之，收集构想效度证据的过程就是对测验从编制到解释、再到使用后果的整个程序进行拷问的过程，测验的方方面面都得到了检验。; 回顾效度概念的演变历史，我们不难发现:对于效度的确认从最初作为研究过程最后环节的相关检验发展为一个持续不断的动态过程。 运用各种技术不断地评价、质疑和检查由测验结果所作推论和解释的有效性成为整个研究过程中不可或缺的组成部分。; 对于这一历程，我们可以从研究内容和研究方法两个角度加以总结： 一方面，效度研究所包括的内容越来越丰富：从测验与效标之间的简单相关到多种效度类型，再到一元且多维的构想效度，现阶段的效度已经足以容纳所有可能为分数的解释提供支持的证据。 另一方面，随着研究内容的丰富化，研究方法也日益多样化。不但要有统计学的方法以及专家的判断，甚至引人了认知心理学的方法和生理心理学的方法作为支撑。构想效度所涉及诸多方面的不同性质要求综合运用多种定性的和定量的方法加以解决。这也是近些年来越来越多的学者倡导量的研究和质的研究并重的原因之一。;二、如何分析测验的内容效度 ; 在分析内容效度时，应当特别注意以下三个问题：