十、人员素质测评授课(助学班)探讨.ppt

第十章 素质测评的质量管理 一、信度分析 二、效度分析 三、项目分析 第一节 信度分析 一、信度的概念 信度就是指测评结果反映所测素质的一致性，也就是说测评结果的稳定性、可靠性程度，即在相似情境下，用同一测评工具对相同个体重复施测，所得结果的一致性程度。 1、信度测量的理论定义 （1） 传统的信度理论认为：一个人的测验分数X是由真实分数（T）和误差（E）两部分构成的，公式是X = T + E。 （2） 因此信度就被定义为：一组测量分数的真实方差与实得方差的比，或者是指真实方差占总方差的百分比。公式为：rxx= （3） 根据统计学理论，真实方差与实得方差的比是一个相关系数的平方，所以我们把这种相关系数的平方叫做信度系数。 （4）计算公式为：rxx= 该定义有两点要注意：（1）信度指的是一组测验分数或一列测量的特性，而不是个人分数的特性。（2）真分数的变异数是不能直接测量的，因此信度是一个理论上构想的概念，只能根据一组实得分数作出估计。 信度设计所解决的主要问题是对测验分数的意义的概化能力，即从一次测量来推论总体（真实分数）能达到何种正确程度。 2、信度系数r 大部分的信度指标都是用相关系数来表示，即用同一被试样本所得的两组资料的相关作为测量一致性的指标，称做信度系数。 确定测验好坏的一个指标。一般的原则是： 当rxx 0.70时，测验不能用于对个人作出评价或预测，而且不能做团体间比较。 当0.70≤rxx0.85时，可用于团体比较。 当rxx ≥0.85时，才可以用来鉴别或预测个人成绩或作用。 信度的范围：0.00——1.00 几种心理测验的信度系数 信度 测验类型 低 中 高 成套成就测验 0.66 0.92 0.98 学术能力测验 0.56 0.90 0.97 成套倾向性测验 0.26 0.88 0.96 客观人格测验 0.46 0.85 0.97 兴趣问卷 0.42 0.84 0.93 态度量表 0.47 0.79 0.98 信度系数需要注意： （1）在不同情况下，对不同样本，采用不同方法会得到不同的信度系数，因此一个测验可能会不止有一个信度系数 （2）信度系数只是对测量分数不一致性程度的估计，并没有指出不一致的原因 （3）获得较高的信度系数并不是测量追求的最终目的，它只是迈向目标的一个步骤，是使测验有效的一个必要条件 二、信度的类型和估计方法 （一）重测信度 重测信度又称为稳定性系数，它的计量方法是采用重测法：用同一测验，在不同时间对同一群体施测两次，这两次测验分数的相关系数即为重测系数。 重测信度的计算方法是积差相关法，因而rxx就是皮尔逊的积差相关系数。 r=N∑xy-∑x∑y/ 重测信度的优点是：首测和再测中使用同一套测评试题，较之编制两套等值测评题目要省时、省力；同一套试题无论施测多少次，所测评的属性是完全相同的；可作为预测被试者将来行为表现的依据，因为该方法提供了有关测评结果是否随着时间而发生变化的资料。 重测信度的缺点是：如果前后两次施测间隔的时间选择不当，则测评易受练习和记忆的影响；同一组被试者对同一测试先后两次作答相互之间是不独立的；两次施测的环境不同不会产生测评误差。 重测信度的假设： 1、所测量的特性必须是稳定的 2、遗忘与练习的效果相同 3、在两次施测期间被试者的学习效果没有差别 由于以上几条假设难以做到，所以有些测验是不宜用重测法估计信度的。 一般在没有复本可用，而现实条件又允许重复施测的情况下才采用此方法 （二）复本信度 复本信度又称为等值系数，是指在测评性质、内容、题型、题量、难度等方面均一致的两个测量。其方法是，先精心编制两个互相平行的测验复本，然后用它们测量同一群体，则被试者在这两个测验上的分数的相关系数即为等值性系数。 同重测信度相比，复本信度控制了两次施测间的相互影响，因而既适用于难度测试，也适用于速度测试。但完全等值的复本只在理论上存在，实际应用中抽样误差在所难免，而且编制复本也需要很大精力。 （三）内部一致性信度 内部一致性信度主要反映的是测验内部题目之间的关系，考察测验的各个题目是否测量了相同的内容或特质。内部一致性又分为分半信度和同质性信度。 1、分半信度 分半信度系数是通过将测验分成两半，计算这两半测验之间的相关性而获得的信度系数。 2、同质性信度（homogeneity re