05第五章量化评价法.ppt

教育评价学 胡中锋 主编 第五章 量化评价法 量化评价方法 ：通过将评价内容化为可以量化的数量，经过测量这些相关数据，并以量化统计方法来分析结果数据，最终达到评价目的的一种方法。 信度：一种量化评价方法的稳定性和可靠性，即在同样条件下重复测量，其结果具有的一致性的程度。 效度：一种量化评价方法的有效性，即测量结果中包含欲测特质的信息量的程度。 重点问题 量化评价方法的概念 信度和效度的概念与测量 进行量化评价的具体方法及其运用 各种量化评价方法的异同 借助统计分析软件对数据进行统计 第一节 量化评价法概述? 一、量化评价的方法论来源 实证科学 第一节 量化评价法概述 二、量化评价法 量化评价方法： 通过将评价内容化为可以量化的数量，经过测量这些相关数据，并以量化统计方法来分析结果数据，最终达到评价目的的一种方法。 量化统计方法： 一般量化统计方法——频数、中位数、众数、百分比等。 进一步分析数据——运用方差分析、假设检验、因素分析、相关分析、回归分析等。 选取何种方法进行量化分析主要取决于评价内容和评价目的。 第二节 测验法 一、主要的测验类型 诊断性测验 成绩测验 学能(学习能力)测验 第二节 测验法 二、测验的信度与效度 测验的信度：测验是否有价值，就必须考察测验的质量，包括它的稳定性、可靠性，即在同样条件下重复测量，其结果的一致性。 信度的测量： 1.分半(split-half)信度 2.内部一致性（α系数） 3.重测信度（test-retest methods） 4.复本信度（alternate-form reliability） 第二节 测验法 二、测验的信度 影响信度的因素主要有： （1）测验本身所引起的误差。 （2）测验的实施所引起的误差。 （3）学生自身因素所引起的误差。 第二节 测验法 二、测验的信度与效度 测验的效度（validity）：测验结果中所包含欲测特质的信息量的程度和对所要测验的特质准确测量的程度，就是测验的有效性和准确性，即效度。 效度的测量： 1.内容效度(content validity) 2.效标关联效度(criterion-related validity) 3.结构效度(construct validity) 第二节 测验法 二、测验的效度 影响效度的因素主要有： （1）测验组成方面 （2）测验实施方面 （3）被试主观状态方面 （4）估计效度所依循的效标 （5）样本方面 三、测验的项目分析——难度与区分度 项目的难度 1.难度的概念：难度是指测验试题的难易程度 2.难度的计算 （1）客观题难度的计算 在教育测量中，客观题的难度一般用正确回答试题的人数与参加测验的总人数之比值来表示。 R P = —— N 式中，P为试题的难度，R为正确回答客观题目的人数，N为参加测验的总人数。 三、测验的项目分析——难度与区分度 （一）项目的难度 2.难度的计算 （2）主观题的难度的计算。 主观题的难度等于该题考生所得分数的平均值与该题应得的满分之比。以Pi表示试题的难度， 其计算公式是： Pi=Xi/fi(i=1,2,…,Q) 式中，Xi为各题考试分数的平均值，fi为各题的满分值，Q为试题个数。 三、测验的项目分析——难度与区分度 3.难度对测验的影响 （1）测验难度影响测验分数的分布形态 （2）测验难度影响测验分数的离散程度 （3）测验难度影响测验的鉴别能力 4.测验的适宜难度 5.控制题目难度的基本方法 三、测验的项目分析——难度与区分度 （二）项目的区分度 1.区分度的概念：区分度是指测验对考生实际水平的区分程度，区分度又叫鉴别力。它是评价试题质量，筛选试题的主要指标与依据。 区分度的计算方法有两种： （1）将学生按其考试总分排序，取高分之27%定为高分组，取低分之27%定为低分组，然后分别计算高分组和低分组考试分数的平均值，按以下公式计算各题的区分度： di=(Xhi-Xli)/fi(i=1,2,…,Q) 式中，di为第i题的区分度，Xhi为第i题高分组的平均分值，Xli为第i题低分组平均分值，fi为第i题的满分，Q为题目数。 三、测验的项目分析——难度与区分度 （二）项目的区分度 1.区分度的概念 （2）采用相关计算方法 计算学生各题得分与考试总分的相关系数r。区分度系数一般情况亦为(O≤r≤l)。r越趋向于1，说明学业水平高的学生考试成