人员测评测评质量检验精要.ppt

P o w e r B a r 中国专业PPT设计交流论坛 测评质量检验 一、效度 一、效度的概念 效度（Validity）即有效性，它是指测量工具或手段能够准确测出所需测量的某素质特征的程度。 效度是指所测量到的结果反映所想要考察内容的程度，测量结果与要考察的内容越吻合，则效度越高；反之，则效度越低。 或者简单地说是指一个测验的准确性、有用性。 测评过程：测评工具的研制、计分和指导语的标准化、被试作答反应、主试或评分者、测验的实施、数据整理、统计分析、结果的解释。每一步都要保证其科学性和准确性，这样才能保证测量的结果和结论是有效而正确的。 二、效度的性质 　　1.效度具有相对性 　　任何测验的效度是对一定的目标来说的，或者说测验只有用于与测验目标一致的目的和场合才会有效。 所以，在评价测验的效度时，必须考虑效度测验的目的与功能。 　　2.效度具有连续性 　　测验效度通常用相关系数表示，它只有程度上的不同，而没有“全有”或“全无”的区别。效度是针对测验结果的。 三、效度的类型 从内容性质方面分析其内容效度 从效标相关性方面分析其关联效度 从实证方面分析其结构效度 1.内容效度 定义：是指实际测评到的内容与期望测评的内容的一致性程度。 当实际测评到的内容与我们事先所想测评到的内容越一致时，则说明测评结果的内容效度越高，测评结果就越有效。 分析方法：内容效度在实际操作中的鉴定主要采用定性分析的方法, 有蓝图对照分析法与专家比较判断法。 2.结构效度 结构效度又称作构想效度、构思效度、构念效度、构建效度等。结构效度是指实际所测评的结果与想测评素质的同构程度。它表明了在多大程度上，实际测评结果能够被看作是所要测评的素质在结构上的替代物。 在素质测评中，它是人们最关心的一种效度。这是由素质测评的间接性所决定的。人们总是通过选取一些具体的行为测评来判断实际的素质水平。 3.关联效度 又称实证效度、效标效度、效标关联效度，是指测评结果与效标的一致性程度。效标是一种用来衡测评有效性的外在参照标准, 它可以是一种测评的结果, 也可以是标准测评分数。根据效标是否可以同时获得, 可将关联效度分为同时效度与预测效度。作为效标的结果与预测结果同时获得, 这种效度称之为同时效度。当作为效标的结果是后来测评中获得, 这种效度称为预测效度。它反映了现在的测评结果对未来素质发展的预测程度。 例如：两个人同时采用观察评定与问卷测验测评同一个人的工作态度，两个测评结果相关系数很高，例如0.80，那么以后在类似的情况下，可以用问卷测验代替花时太多的行为观察法。 二、信度 一、信度的概念 是测量结果的一致性( consistency)或者稳定性( stability)程度，也就是研究者对相同或者相似的测量对象进行不同形式或不同时间的测量所得结果的一致性程度。 一个人的高度在同一天测量了两次,一次是162厘米,一次是159厘米. 一个学生，参加研究生入学考试春季考了300分,秋季考了390分. 一个人参加两个不同形式的智力测验,一个测验获得智商是100,另一个测验上的智商是114. 信度的种类 目前大致有稳定系数、等值系数、分半系数、内部一致系数、评分一致性系数等。 以上几种信度都是针对常模参照测验而言的，标准参照测验中的信度计算通常使用分类一致性信度，这种信度的的常用估计方法是考察同一批被测者在两次是册或者复本测验中的分类是否一致。标准参照测验中的信度也可以使用K系数计算，较分类一致性信度在统计上更合理 1.再测信度( test-retest reliability) （与时间有关） 又称为稳定性系数，它是指对同样的一个测验在不同的时间对相同的群体测量两次，这两次测量的分数的相关系数就是再测信度。 我们通过再测信度的相关系数可以了解测量结果在经过一段时间后的稳定程度。 2.复本信度 当某个测评工具不适合重复实施时，我们可以采用与该测评工具平行对等的等值测验（即复本），然后让同一组被试接受两个复本测验，看两次测量结果之间的一致性。其计算方式也是求两次测验分数之间的相关系数（r）。所谓复本是指在内容、数量、格式、难度、区分度、指导语、时限、实施过程以及所用的例题、公式和测验的其他所有方面与原测验都应该相同或相似的测验。 3.内部一致性系数 指同一测评内部各测评项目之间的一致性，即同质性。这里的同质不是指测题内容和形式之间的一致性。而是各测题分数之间的一致性。如果各测题分数之间的相关系数很高，我们就说测题同质性很高，否则即使看起来都是测同一特质，但分数的相关很低，这测验还是异质的。求内部一致性系数，只要测一次就可以了。 （主要关注的是测验内部题目之间的关系。它所考虑的问题是一个测量工具所有的维度测量的均一性） 4.分半信度