第二章教育测验信度和效度.pptVIP

本章内容概览 第一节 测验的误差 第二节 信度 1．再测信度（稳定性信度） 2．复本信度 3．内部一致性信度 4．评分者信度 5．目标参照性测验的信度系数 第三节 效度 1．内容效度 2．结构效度 3．效标关联效度 第一节 测验的误差 一、定义：测验误差是指由与测量目标无关的变因所引起的不准确和不一致的效应。 测验误差包括： 1．随机误差：由偶然因素引起的无规律的误差 2．系统误差：由某些常定因素引起的有规律的变化，是对测量结果的一种偏差。 系统误差的出现是不应该的，是测验编制中出现的错误；而随机误差则是不可避免的，受一些偶然的、不可预见因素的影响产生，是我们本节内容所关注的。 二、引起测验误差的因素 （1）测验本身的误差： 如测验题目选择是否有代表性；被试对测验题目的熟悉程度和知识范围；测验是否限定时间；指导与是否清晰；测验材料是否标准；所用仪器是否精确；题目用词是否准确等等 （2）测验施测过程的误差 1．物理环境：施测现场的温度、光线、噪音、通风等；2．外界环境的干扰：卷子印刷质量差或发错、有人作弊、天气陡变等 （3）测验记分过程的误差 如评分不客观（评分者的偏好、心境、疲劳等）；计算、登分中的错误 （4）主试方面的误差 主试者效应，也叫罗森塔尔效应 （5）被试方面的误差 1．被试的应试技巧及稳定的反应倾向； 2．被试的应试动机和情绪的紧张焦虑状态 3．被试对特定测验任务的理解，在所测特定知识技能上的练习水平，在记忆或注意力上的波动等 4．被试的健康状态、疲劳因素等 （6）机遇引起的测验误差 猜测或意外干扰 第二节 信度 一、定义 信度（Reliability），是指测验的可靠性，即在不同时间，使用同一测验，或者使用两个不同项目的等值测验，抑或在其他不同的测试条件下，对同一组被试实施两次测验所得分数的一致性。 信度和误差的关系：误差越小，信度越高；误差越大，信度越小。 信度一般以两次测验的相关系数来表示。相关系数代表了两组分数之间的对应程度或关系。 二、信度的估计方法 再测信度（test-retest reliability） （1）定义：又称为稳定性系数，是指以同一个测验对同一组被试先后施测两次，所得结果的相关系数，这是计算相关系数最方便的方法。 （2）计算方法：积差相关系数 （3）说明： 1．重测时间间隔的确定，应综合考虑练习效应、记忆效应、个体成长等因素；对于任何个体，重测的时间间隔一般不应超过6个月。 2．适用于速度测验，而不适用于难度测验 3．应注意提高被试对重测的积极性和兴趣。 ◆对数据的要求： 1．成对数据 2．两列数据要呈正态分布 3．定距量表获得的数据 4．两列变量之间的关系的是线性的 ◆计算公式——用原始观测值计算 皮尔逊相关系数（Pearson） 例1：下表是10名中学生身高和体重的测量结果，问身高与体重的关系如何？ 复本信度（alternate-form reliability） （1）定义：复本信度是指同一组被试在复本测验上所得结果的相关系数。 复本测验，又称等值测验，是指在性质、内容、题型、题数、难度等方面都一致的两份或多份测验。 （2）计算方法：积差相关系数 （3）说明： 1．两个测验必须是等值的，这点比较困难。 2．测验时间间隔的确定，应综合考虑练习效应、迁移效应来确定，应尽可能短；如果有适当时间间隔，也可称作等值稳定性系数。 3．适用于速度测验，也适用于难度测验，是考察信度最可靠、使用最广泛的方法。 4．有高估信度系数的倾向。 内部一致性信度 一、二分记分法的测验（0，1，对错，有无等） （1）折半信度（split-half reliability），将每一个被试的测验分数按测题分成两部分记分，然后用每个被试在两半测验上的得分求整个测验的信度。 一般分成奇数项-偶数项；前一半-后一半。 计算方法： 1．折半 2．求出两半的积差相关系数rhh 3．用斯皮尔曼-布朗（Spearman-Brown)公式进行校正：rtt