教育测量的质量指标(效度).ppt

第二章　教育测量的质量指标 第二节　效度 第二节　效度 一、效度的概念 二、效度的统计学原理及其与信度的关系 三、效度的估计 四、提高效度的方法 一、效度的概念 效度（Validity）是指测量结果的准确性和有效性的程度，亦即测量是否达到了预期的目的。 第一，效度是一个相对的概念。 1.测量的效度始终是对一定的测量目的而言的。 2.测量的效度是相对于测量的结果而言的。 第二，一种测验的效度只是高或低的问题。 第三，在教育测量中，效度问题比在其他领域的测量中更为重要。 一、效度的概念 这是因为： ⑴教育测量的对象大多是精神现象，只能通过对其具有可测性的外部表现（如语言或动作等）的测量，以间接认识其心理活动、心理特征或知识水平等。 ⑵学生的心理活动、心理特征与其外部表现之间，一般仅具有相关关系而无函数关系，外部行为并不能准确无误地反映某种心理状态。 ⑶教育测量的对象不是物而是有主观能动性的人。人能有意识地调节自己的外部行为，掩盖自己的内心活动，这就增加了认识其精神现象的难度。 二、效度的统计学原理及其与信度的关系1、效度的统计学原理 2、效度与信度的关系 三、效度的估计 效度估计就是多方寻找证据来证明一个测验的有效性程度的过程。 1974年美国心理学会发行的《教育和心理测量的标准》一书将效度分为三大类：内容效度、效标关联效度和结构效度。 （一）内容效度（Content validity） 又称合理效度或逻辑程度，是指测验内容或行为取样的代表性和适当程度；即测验的内容范围、材料与所要测量的内容范围、教育目标是否相符合；测验中测题所引起的行为是否是所要测量的属性的明确反应；测验的结果是否是一个有代表性的行为样本。 估计内容效度的方法： 估计内容效度的方法： （1）逻辑分析的方法。其工作思路是请有关专家对测验题目与原定内容范围的吻合程度作出判断。 （2）统计分析法。从同一个教学内容总体中抽取两套独立的平行测验，用这两个测验来测同一批被试，求其相关。若相关高，表明测验内容效度较高；若相关低，表示测验的内容效度较低。 采用求统计量的公式进行计算，其公式有以下三种形式： 内容效度主要应用于成就测验、学科测验、选拔和分类职业测验。 内容效度不适合用于能力倾向和人格测验。 （二）效标关联效度 又可称为经验效度或统计效度，是以测验分数和效标之间的相关系数来表示测验效度的高低的。 效标就是足以显示测验所欲测量的特性的变量或足以显示测验所欲预测的特性的变量。它是用来检验测验效度的外在的、客观的标准和尺度。 效标关联效度又可分为同时效度和预测效度。 （用全国高考的成绩作为效标来检验高中毕业生会考的成绩，计算两者之间的相关系数就是会考的同时效度；而用大学一年级的成绩作为效标来检验高考的成绩，计算两者的相关系数就是高考的预测效度。） 估计效标关联效度可采用积差相关、二列相关或点二列相关、四格相关和多元相关系数等计算各种相关系数。 1、用积差相关系数的方法估计效度 积差相关，是计算两个变量线性相关的一种方法，由英国统计学家皮尔逊提出，因此也称为皮尔逊(Pearson)相关。要使用积差相关必须同时具备如下几个条件： ①两个变量都是由测量获得的连续性数据，即等距或等比数据。 ②两个变量的总体都呈正态分布，或接近正态分布，至少是单峰对称分布，当然样本并不一定要正态。 ③必须是成对的数据，而且每对数据之间是相互独立的，即各自互不影响，本条件是难以检验的。 ④两个变量之间呈线性关系。一般用描绘散点图的方式来观察，最好是先各自转化为Z分数，单位会统一些。 二列相关 适用于两个变量就其实际含义而言是等距或等比数据，它们服从正态分布，其中一列人为地划分为两类。 点二列相关 适用于一列数据为等距或等比且总体服从正态分布（实际上只需要单峰对称分布，如Ｔ分布），另一列变量是按事物的性质划分为两类的变量，也可以是一个双峰分布，人为划分为两类，如文盲与非文盲。这种相关系数多用于测验中评价题目的区分度。对选择题、判断题在整个测量中作用作出判断。 基本计算公式： 例：有一位教师自编了一套测验题，用来预测学生一年后的某科成绩，自编测验按百分制评分，一年后考试评分只把学生分为及格者和不及格者。试就所获资料估计自编测验的预测效度。 解：1)把两次测验成绩成对排列： （三）结构效度（Construct validity） 结构效度是指一个测量能实际测量出理论上的构想或心理特性的程度。它的目的在于从心理学的理论观点就测验的结果加以解释和探讨。 这里的结构的含义是心理学理论所涉及的抽象而属假设性的概念、构想、特性或变量，如智力、焦虑、机械能力倾向、成就、动机等。 结构效度主要用于智力测验、人格测验等一些心理测验方面。 例如：人的创造力可以分解为人的思维流畅性、灵活性和创造性三大特性，并根据