第五章 量化评价法.pptVIP

一、与教学、考试性质有关的测验类型 1.诊断性测验 2.成绩测验 3.学能(学习能力)测验 （一）测验的信度 根据经典测验理论，在真分数模型的假设中，学生作为评价对象，在测验中的实得分数是： X = T + E X—实得分数 T—真分数 E—随机误差 根据CTT模型和假设，可以推导如下关系 S2X=S2T+S2E 在一次测量中，被试观察分数的方差等于其真分数方差与误差分数方差之和。 估计信度的方法： 1.分半信度 :将测验编写成两个尽量平行的子测验，组成一个完整的测验，可以采用随机分半或奇偶分辨，计算两半测验的相关系数。 2.内部一致性（α系数）：同质性信度也叫内部一致性系数，它是指测验内部所有题目间的一致性程度。 克隆巴赫α系数可以处理任何测验的内部 一致性系数的计算问题。 3.重测信度：是指对评价学生进行重复测验，通过计算两次测验得分之间的一致性程度来衡量信度。 4.复本信度：根据平行测验理论，设计与原测验各项指标相近或等值的平行测验，在此基础上，计算学生在两个测验上得分的相关系数。可以进行连续测验。 （4）选取恰当的被试团体，提高测验在各同质性较强的亚团体上的信度； （5）主试严格执行施测和计分程序，施测场地按测验手册的要求进行布置，减少无关因素的干扰。 2.效标关联效度：也叫实证效度，是指一个测验对处于特定情境中的个体的行为进行估计的有效性。即以实践的效果来作为检验标准。 效标：被估计的行为是检验测验效度的标准，称为效标。 同时效度：用于诊断现状。 预测效度：用于预测某个个体将来的行为。 3.结构效度：指一个测验能够测量到理论上结构或特质的程度，也就是该测验所要测量的概念能够显示科学意义并符合理论上的设想。 5.提高效度的方法： （1）控制系统误差 （2）精心编制量表 （3）妥善组织测验 （4）扩充样本的容量和代表性 （5）合理处理效度和信度的关系 （6）适当增加测验的长度 （三）问卷的用语 1.问卷的指导语要清晰、简洁，以简短的话语说明问卷的目的、作答方式以及所需要的时间。 2.问卷用语尽量本土化。 3.在问卷题目中要避免情绪性词语、负载性问题、引导性问题、一题多问、以及假设性问题。 3.积差相关 积差相关的使用条件： （1）两个变量都是有测量获得的连续性数据。 （2）两个变量的总体都呈正态分布。 （3）必须是成对的数据，而且每对数据之间是相互独立的。 （4）两个变量之间呈线性关系。 （5）排除共变关系 （6）样本容量n=30 （五）均值比较与检验 单一样本t检验 独立样本t检验 配对样本t检验 （六）方差分析 （F检验） 方差分析用于检验两个或多个样本平均数之间是否存在差异。 单因素方差分析 多因素方差分析 （七）回归分析 （2）采用相关计算方法 计算学生各题得分与考试总分的相关系数r。区分度系数一般情况亦为(O≤r≤l)。 r越趋向于1，说明学业水平高的学生考试成绩也高，学业水平低的学生考试成绩也低，即所谓正区分； r越趋向于0，说明学业水平不一的学生考试成绩没有差异即所谓零区分； 区分度系数有时会出现负相关，r0，说明学业水平高的学生反而考试成绩低，学业水平低的学生反而考试成绩高，即负区分。 2.区分度与测验信度、难度的关系 （1）区分度与信度的关系 （2）区分度与难度的关系 P接近0.5区分度越高 3.提高区分度的方法。 第一，使题目的难度适中，使整个考试难度适中。 第二，要着重考查复杂的学习结果，提高区分度。 第三节 问卷法 通过问卷（questionnaire）进行调查的研究方法，在心理学、社会学、人类学等领域都被广泛运用，因为这种方法能够在比较短的时间内收集到尽可能大的被试样本的资料和内容，可以说在量的角度上有比较大的优势。 第三节 问卷法 一、问卷设计 （一）明确评价目的 要设计问卷对学生进行评价，必须首先明确具体的评价目的，包括评价对象（即目标群体）、评价内容、相关的专家对该评价提出的好想法 。 问卷设计必须紧密围绕所要评价的问题。 （二）问题的类型 问卷中问题形式的设置可以分为开放式、封闭式和半封闭半开放式三类。 开放式问题：不向受测者提供具体的答案，受测者根据问题以自己的语言和陈述方式自由回答。 优缺点 封闭式问题：在提出问题后面附有相应的答案，供受测者选择。 优缺点 半封闭半开放式： 二、问卷数据的收集 在问卷正式使用于大量的调查之前，