[测验效度.pptVIP

心理测量学 第十一讲 测验效度 教育与心理测验标准 1999年美国教育研究协会(American Educational Research Association, AERA)、美国心理学会(American Psychological Association, APA)和美国国家教育测量学会(National Council on Measurement in Education, NCME) 3家机构共同颁布了新版的《教育与心理测验标准》(Standards for Educational and Psychological Testing )。 《标准》是教育与心理测验领域中的一份权威性文献，体现了测验领域中的行业标准，是测验工作者和测验研究人员的一本重要的参考书。 在1999年之前，颁布《标准》的3家机构曾经颁布过5个有关测验开发和使用的文件。 (3)1966年由APA出版、由APA, AERA和NCME共同编制的《教育与心理测验及手册的标准》 对效度的重新定义和分类 85年版本 ：效度被定义为“从测验所做出推论的适当性或合理性的程度” 。 根据证据来源不同，证据被划分为来自“构念(construct)”、来自内容(content)和来自标准(criterion) 3种，效度也被相应地划分为3种。 99年版本 ：效度被定义为“关于测验分数的特定解释所得到的支持程度。这种支持来自累积的证据或理论。这种解释是测验应用的基础。” “在本标准中，所有的分数都被视为对构念的测量”。 在99年版《标准》中，没有再沿用把效度分为构念、内容和效度标准的3种分类法 。 关于Construct 关于construct的解释是：“测验所测量的概念或特性(the concept or the characteristic that a test is designed to measure)。” 译为“结构” 的人并没有准确理解construct本身的涵义 效度概述 效度所要回答的问题：(1)测验测量的是什么？(2)对它所测量的东西测量到什么程度？ 效度概念的理解 效度是一个相对的概念：(1)效度是相对于一定的测量目的而言的 ；(2)只能达到某种程度上的准确 。 效度的数学定义及基本原理 一组测验分数的总变异(ó2o)包括三部分： 效度概念发展的四阶段 最初测验是用来评定个体在指定的内容领域已经学会了什么东西 在90年代出现两种主要趋向：①加强理论趋向；②心理学理论与通过经验和实验的假设检验之间密切联系。 99年的《标准》认为，就说明测验测量什么东西而言，构念效度逐渐被认为是基本的、包括一切的效度概念。 Validity / Validation 1999年的《标准》改以Validation来说明心理测验的有效性的评估。 Validation是一种用以了解测验得分的意义的科学研究（Scientific inquiry into test score meaning），并指出Validation研究的两个目的，Validity for measurement与Validity for decisions 效度与信度的关系 信度是效度的必要条件(necessary condition)而非充分条件(sufficient condition) 。效度是测验的首要条件，而信度是效度不可缺少的辅助品。 rc=rxy/ 测验的效度受它的信度制约 。 效度的估计 由于真分数方差是无法估计的，因此对测验的效度的检验就难以依靠心理计量学的理论。 内容效度 定义：content related validity,又称内容关联效度。 确定所要测量的全部内容范围 将测验目的具体化为不同层次的测验目标 确定每一层次测验目标在整个测验中所占的比重 编制测验双向细目表 按比例随机抽取测验题目 请专家对测题的代表性、测题对测验目的的适合性进行分析 内容效度的确定 题目样本与总体得分相关法 内容效度与表面效度 表面效度(face validity) 内容效度的应用 成就测验 教育测量中的标准参照测验 职业测验 效标关联效度 效标：即效度标准(validity criterion)，是指独立于测验结果，反映测验目的的行为参照，也称效标行为。 理解：用来检验效度的参照标准 ；用来显示测验所欲测量的特性的变量。 例如：智力测验 ，它的效标可以有哪些呢？ 飞行员选拔测验的效标有哪些呢？企业的招聘测验的效标。 观念效标与效标的测量 观念效标是指从概念上确定所要选择的测验效标是什么 。 效标所具有的特点： 有效性 可靠性 客观性 实用性 常用的效标 ： 学业成就(ac