第二章测评原理和指标.PDF

第二章 测评原理和指标 主讲教师：李悦 01 测评原理 02 测评指标 目录： 03 指标构建 第一节 测评原理 信度和效度 • 信度：测量的一致性或稳定性程度。 • 效度：测验是否测量到了它所要测量的东西。 信度高，效度未必高 效度低，信度可能高 效度高，信度必然高 估计信度的方法 • 相关指事物或现象之间的相互关系。当一个变量取一定数值 时，与之相对应的另一个变量（两者之间可以不存在因果关 系）按某种规律在一定范围内变化，变量间的这种关系被称 为相关关系。 估计信度的方法 1 重测信度 2 复本信度（先A后B，先B后A） 3 稳定-等值系数（重测+复本） 内部一致性信度（既无复本，也不可能重复 4 测量时）：项目同质性 效度 内容效度 构想效度 效标效度 内容效度 • 测题对整个测验内容范围的代表性程度。 • 如，教师为了了解学生在某一学科或某一课题上对知识的掌握情 况，若时间许可，可以进行一个全面的考试，包含所有有关的内 容，这显然行不通。于是，就从这一范围总体中选一样本，也就 是从可能的题目中取样来编测验，根据测验分数推论学生在该范 围总体的知识。若测验题目是这个范围的好样本，则推论将有效； 若选题有偏差，则推论将无效。内容效度较为适合于评价教育和 职业成就测验。在这种测验中，测验内容一般是知识和技能。 构想效度 • 构想效度是指测验能够测量到理论上的构想的程度。所 谓构想，通常是指一些抽象的、假设性的概念或特质， 如智力、个性特征、言语流畅性等。这些构想往往无法 直接观察，但是每个构想都有其心理学上的理论基础. • 例如，情绪智力可以通过情绪的自我感知、自我管理，以及对他人 情绪的感知和管理进行确定，那么构想效度关注的问题就是：测验 能否反映理论构想的特性，也就是数据结果和理论构想之间是否存 在一致性。 效标效度 • 效标效度也称为效标关联效度，它反映的是测验分数与 外在标准（效标）的相关程度，即测验分数对个体的效 标行为表现进行预测的有效性程度。 • 比如一个机械能力测验，其效度的标准可以是某人成为机械师后的工 作表现；对于一个管理能力测验而言，其效标可以是该个体将来管理 工作的绩效。 效标效度 预测效度 •效标资料是在测验实施之后收集的，中间有一定的时 滞，用于衡量测验结果对未来表现的预测能力。 同时效度 • 测验与效标资料同时收集。 项目分析：难度分析 以答对百分比（或比率）来估计难度 •1.二值记分：P （难度）=R （答对该题的人数）/N （参加测验的总数） •80个体参加测验，答对某题有32人，则该题难度为0.4 •2.非二值记分：P=Xave （全体该题平均得分）/Xmax （该题满分） •某题（问答题）20分，全体平均得分10，在该题难度为0.5 •3.