第四章-测量信度.pptVIP

（三）效标效度（实证效度） 1.效标效度的含义、种类与作用 效标效度是指一个测验对于特定情境中的个体的行为进行估计的有效性，即根据测验所作出的预测能否被实际的结果所证实。 比如学习能力测验，如果测得某些学生的学习能力高，他们实际的学习成绩高，测得某些学生的学习能力低，实际的学习结果成绩低。测量的实证效度高。 这里被估计或预测的行为的实际结果是检验测验效度的标准，简称效标。 根据效标资料搜集的时间，效标效度可以分为同时效标和预测效标。效标资料与测验分数是同时收集的，获得的效度叫同时效度；效标资料是根据测验之后的实际业绩定的，获得的效度叫预测效度。 同时效度主要用于诊断现状，预测效度在于预测个体将来的行为。 2．效标与效标测量 估计测验效标效度首要条件是必须具有效标，什么是效标？ 效标就是衡量一个测验是否有效的外在标准，是我们所要预测的行为。 效标可以是连续变量（如分数），也可以是分类变量（如职业）；可以是自然的现成的指标（如产量、薪水），也可以是人为设计的指标（如考试测验）；可以是主观评判，也可以是客观测量。归纳起来，常见的效标主要有学业成就、等级评定、临床诊断、特殊训练的筹集、实际工作表现和其他测验成绩。 阿斯汀（A. W. Astin）将效标分为观念效标和效标测量。 观念效标是一个概念，效标测量是观念效标的量化。如对于大学入学考试这个测验来说，观念效标是“大学学习成功”，而大学学习成绩是效标测量。 好的效标测量应符合以下条件： （1）必须真实的反映观念效标的重要侧面 （2）必须可靠稳定 （3）必须客观，不存在偏见 （4）在保证有效性的前提下，尽量简单省时、代价低。 2.效标效度的确定方法 效标效度的确定方法一般有三个步骤：明确观念效标，确定效标测量，考察测验分数与效标测量的关系。 效标效度的估计方法： （1）相关法 即计算测验分数与效标测量的相关系数：积差相关、等级相关、二列相关等。 （2）分组法（区分法） 是被试接受测验后，让他们工作一段时间，再根据工作成绩（效标测量）进行等级分组，然后考察两组测验分数的差异。 （3）预期表法 是将源测验分数和效标测量绘制成双维图表，并将每个变量按水平分成若干档次，然后列出每个档次上的人数百分比。 （4）命中率法 如果预测源与效标都是二分的，可以得到一个命中预测表 （５）功利率法 代价与利益进行比较 四、影响测量效度的因素 （一）测验工具 1. 项目质量 测验项目不能够比较好的代表所要测验的内容和结构时，测量的的内容效度和结构效度必然不高。题目语义不清、指导语不明确，题目太难太易、题目安排不当等都会降低测量效度。 2. 项目数量 增加项目的数量不但能够提高测验的信度，也可以提高测验的效度，增加项目数对于效度的影响效果可以通过下面公式估计： （二）测验的实施 （三）被试 （四）效标的性质 （五）测量的信度 五、提高测量效度的方法 （一）精心编制测验量表，避免出现比较大的系统误差 （二）妥善组织测验，控制随机误差 （三）创设标准的测试环境 （四）选好效标，定好效标测量 * 第三节 提高测量信度的方法 一、影响测量信度的主要因素 （一）被试方面 身心健康状况、动机、注意力、持久性、求胜心、作答态度等。 团体的异质性 团体越是异质，分数范围越广，信度系数越大。 第一次测验 验测次二第 （二）主试方面 （三）施测情境方面 （四）测量工具方面 测验长度 一般说来，在一个测验中增加同质的题目，可以使信度提高。 （1）题目数量多，在每个题目上的随机误差互相抵消 （2）测验题目数量增多，可以改进项目取样的代表性，从而能更好地反应受测者的真实水平。 测验难度 如果测验太难，分数集中在低分段，如果测验太易，分数分布集中在高分段，这样都使分数分布的范围变窄，从而使信度降低。 （五）两次施测的时间间隔 计算重测信度、稳定性与等值性系数时，两次测验相隔时间越短，其信度值可能会越大；两次测验相隔时间越长，其信度值可能会越小。 二、提高测量信度的常用方法 （一）适当增加测验的长度 （二）使测验中题目的难度接近正态分布，并控制在中等难度 （三）努力提高测验试题的区分度 （四）选取适当的被试团体 （五）主试者严格按照要求去做 第五章 测量效度 第一节 效度概述 第二节 效度的评估 第三节 提高测量效度的方法 第一节 效度概述 一、什么是效度（validity） （一）效度的概念 效度是指一个测验或量表实际能测出其所要测的心理特质的程度。或者说实测结果与所要测查的结果的吻合或一致程度。 例如：在一项英语成就测验中，教师本来打算考察学生的语法知识，但是测题的完成需要学生掌握大量的词汇，这就存在一个系统误差，虽然前后两次测量的一致性可能很高，但这项测验可能并不能