第四章测量的信度与效度.pptVIP

3. 内容效度的应用 内容效度主要应用于成就测验以及职业选拔和分类测验。在这类测验中，测验内容是实际工作所需要的知识和技能。 使用内容效度要注意与表面效度（surface validity）的区别。表面效度是指一个测验在使用者和被试看来，直觉地认为它在测量什么，是否测到了测验所要测量的内容。表面效度不是效度。 第六十一页，共八十七页，2022年，8月28日 当评分者人数为2时，评分者信度等于两个评分者给同一批被试答卷所给分数的相关系数。如果是多个评分者，评分者信度采用肯德尔和谐系数进行估计。 第二十九页，共八十七页，2022年，8月28日 第三十页，共八十七页，2022年，8月28日 第三十一页，共八十七页，2022年，8月28日 第三十二页，共八十七页，2022年，8月28日 第三十三页，共八十七页，2022年，8月28日 三、信度的作用 （一）评价测验 信度是测量过程中所存在的随机误差大小的反映。信度低，测量随机误差大，测量结果就会与真分数发生较大偏离。 信度是衡量一个测验好坏的重要指标之一，测验的信度达到多少才可以接受呢？一般来讲，能力与成就测验的信度应该在0.90以上，人格测量信度系数应该在0.80 以上。 测量中的系统误差与信度无关。 第三十四页，共八十七页，2022年，8月28日 （二）解释分数 1. 解释个人测验分数的意义 从理论上讲，一个人的真分数本来是用同一测验对他反复施测所得的平均值，其误差则是这些实测值的标准差。但实际上，这是做不到的。实际的做法是用一个团体（人数足够多）两次施测得结果来代替对同一个人的反复施测，以估计测量误差的变异数。 第三十五页，共八十七页，2022年，8月28日 此时每个人两次测量的分数之差构成一个新的分布，这个分布的标准差就是测量的标准误，它是此次测量中误差大小的客观指标，有了这一指标，就可以对团体中任何一个人的测验成绩做出恰当的解释。 第三十六页，共八十七页，2022年，8月28日 第三十七页，共八十七页，2022年，8月28日 2．不同测验分数的比较 第三十八页，共八十七页，2022年，8月28日 四、影响测量信度的主要因素 测量信度是测量过程中随机误差大小的反映，随机误差大，信度就低，随机误差小，信度就高。因此，在测量过程中凡是能引起测量随机误差的因素都会影响测量信度。影响信度的几种主要因素为： 第三十九页，共八十七页，2022年，8月28日 （一）被试方面 就单个被试而言，其身心健康状况、应试动机、注意水平、作答态度等会影响测量信度。 第四十页，共八十七页，2022年，8月28日 就团体而言，团体的异质程度与分数的分布密切相关，一个团体越是异质，其分数分布范围越大，计算出来的信度系数值越高，这样会高估真正的信度值。当团体内部水平相差不大（同质）时，其得分分布必然会狭窄，以相关为基础计算出来的信度值必然小，可能会低估真正的信度值。此外若团体的平均数太高或太低，同样使测验的总分分布变窄，低估测验的真正信度。 第四十一页，共八十七页，2022年，8月28日 （二）主试者方面 就主试者而言，若不按指导手册中的规定施测，或故意制造紧张气氛，或给考生一定的暗示、协助等，测量信度会大大降低。 就阅卷评分者而言，若评分标准掌握不一，或前后标准不统一，甚至随心所欲，则也会降低测量信度。 第四十二页，共八十七页，2022年，8月28日 （三）施测情境方面 实施测验时，环境是否安静，光线和通风状况是否良好，所需设备是否齐全，桌面是否合乎要求等都可能影响到测量信度。 第四十三页，共八十七页，2022年，8月28日 （四）测量工具方面 测量的取样、测验的长度、难度等是影响测量信度的主要因素或关键因素。 一般来说，测验越长，信度值越高。这是因为： 测验加长，能够改进项目取样的代表性，从而能够更好地反映受测者的真实水平。测验的项目越多，每个项目上得随机误差会相互抵消。测验太难或太容易，都会降低测验的信度。 第四十四页，共八十七页，2022年，8月28日 第四十五页，共八十七页，2022年，8月28日 （五）两次施测之间的时间间隔 计算重测信度、稳定性与等值性系数时，两次测验相隔时间越短，其信度值可能会越大；两次测验相隔时间越长，其信度值可能会越小。 第四十六页，共八十七页，2022年，8月28日 五、提高测量信度的常用方法 （一）适当增加测验的长度 增加新项目必须与原试卷中的所有项目同质，新增项目必须适度。 （二）使测验中题目的难度接近正态分布，并控制在中等难度 （三）努力提高测验试题的区分度 （四）选取适当的被试团体 （五）主试者严格按照要求去做 第四十七页，共八十七页，2022年，8月28日 第二节 测量效度 一、什么是效度（validity） （一）效度的概念 效度是指一个测验或量