第三章 效度课件.pptVIP

第三章 教育测量与评价的效度 （Validity） 第一节 效度概述 第二节 效度的估计 第三节 提高测量效度的方法 第四节 效度的应用 第一节 效度概述 一、效度所要回答的问题 二、效度的含义 三、效度与信度的关系 一、效度所要回答的问题 信度： 效度所要回答的问题： （1）测验测量的是什么东西?或者说，测验测到了它要测的东西吗? （2）测验对它所测量的东西测量到什么程度? 2。效度的性质 （1）效度是针对测验结果的 （2）效度是针对某种特定的测验目的的 （3）效度只有程度上的差别 只有程度上的差别，没有全或无的差别。 （4）效度是测量的随机误差和系统误差的综合反映 （5）判断一个测量是否有效要从多方面搜集证据 三、效度与信度的关系 根据公式S2X=S2V+S2I+S2E，可以得到信度与效度的关系如下： 1、信度高是效度高的必要而非充分条件 2、测验的效度受它的信度制约 信度高，给 S2V 增加提供可能 能否提高效度，再看S2I大小 信度高不一定效度高 效度要高，S2V须占较大比重，S2T↑ 效度高，信度必高 2.测验的效度受它的信度制约 信度系数的平方根是效度系数的最高界限 根据效度和信度的定义（r2xy= S2V/ S2X， rxx= S2T/S2X ）以及S2T= S2V + S2I 可得r2xy= （S2T - S2I ）/ S2X= rxx- S2I/S2X ） S2I0 r2xy rxx 第二节 效度的估计 要确定测验在解决某方面问题时的效度，需要收集充分的客观事实材料和证据，这种收集大量资料和证据来检验测验效度的工作过程就叫做效度验证。 1966年美国心理学会在《教育心理测验值标准》中将效度分为三大类： 1．内容效度（Content Validity） 内容效度指测验实际测到的内容与所要测量的内容之间的吻合程度。 2．结构效度(Construct Validity) 结构效度是指测验对于被称作构想的某一理论概念或特质测量的程度。 3．实证效度(Criterion related Validity) 实证效度是指一个测验对处于特定情景中的个体的行为进行估计的有效性 一、内容效度 定义：内容效度指测验实际测到的内容与所要测量的内容之间的吻合程度。 适用于成就测验、选拔和分类的职业测验，不适于能力倾向测验和人格测验。 注意与表面效度的区分 学业成就测验等往往有明确的教材内容和学习目标，试题内容从中选取，便于进行逻辑分析和判断。而对于有些特质的如“智力”、“创造力”、“人格”等，内容效度不适合，因为这些都存在外延范围不明，内部结构复杂，人们对它看法不一，不容易进行内容效度分析。 内容效度与表面效度的区别 （1）表面效度是由外行对测验做表面上的检查确定的，即主观上认为测验是否测量了所要测量的某种特性。并不是一种真正的效度。表面效度即从题目表面是否容易看出出题人的意向和答案倾向。表面效度影响被试的测验动机。人格测验要求表面效度不宜过高。而内容效度是由够资格的判断者（专家）详尽地、系统地对测验评价而建立的。 （2）表面效度不是效度的客观指标，但能对受测者的动机产生影响，因而也会影响到效度。最高行为测验（如能力测验）要求有较高的表面效度，让被试有较高的动机，尽最大努力完成；典型行为测验（如人格测验）却要求较低的表面效度，如果被试很容易看出测试目的，就可能做出假的反应。 内容效度的评估方法 1、逻辑分析法 2、统计分析法 3、再测法 内容效度的评估方法 含义 专家按测题和假设内容范围作出的符合度判断 作法与程序 明确欲测内容的范围 与双向细目表对比； 制定评定量表； 局限 无良好的数量指标描述这种符合性的程度； 不同专家对同一测验内容效度的判断可能不一致； 不同专家对内容范围会有不同的理解 双向细目表（举例） 一、教学目标(以橫轴表示) 以Bloom所提的认知领域六个教学目标为依据：知识、理解、应用、分析、综合、评价。 二、教材內容(以纵轴表示) 以出题的范围，表示出包含几个不同的单元。 以台湾学校教育文科为例 2、统计分析法 信度指标——复本信度 r高：内容效度 r低：至少一个缺乏内容效度 3、再测法 前测 后测 内容效度的评价 内容效度不但是评价学绩测验的最适合的方法，而且编制任何测验都要加