教育测量与评价的质量特性培训课件(ppt 77页).pptVIP

第二章 教育测量与评价的质量特性;第二章 教育测量的质量特性;一、什么是信度 ——指测量结果的稳定性或可靠性程度。 一般地说，一个好的测量必须具有较高的信度，也就是说，一个好的测量工具，只要遵守操作规则，其结果就不应随工具的使用者或使用时间等方面的变化而发生较大的变化。;对信度的理解;问题;二、信度的种类及估计方法;（一）重测信度 ——指同一个量表对同一组被试施测两次所得结果的一致性程度。 其大小等于同一组被试在两次测验上所得分数的相关系数，一般采用皮尔逊积差相关的公式来计算。;重测信度的计算;例一;在使用重测法计算信度值时，应注意以下问题：;重测信度与时间间隔;（二）复本信度;例二;复本信度的优缺点表现：;复本信度缺点：;（三）同质性信度;估计方法;分半信度;分半信度只需要一种测验形式，实施一次测验，它比重测信度和复本信度的操作更简便。 注意：当一个测验无法分成对等的两半时，不宜使用分半信度。;分半信度的计算方法;2、当两个半测验分数的方差不相等时， 采用弗朗那根公式和卢仑公式。 弗朗那根公式：rxx=2[1-(s2a+s2b)/s2x] 卢仑公式：rxx=1-s2d/s2x 其中： rxx：测验的分半信度， s2a、s2b：两半测验上得分的方差， s2x：整个测验上得分的方差， s2d：两半测验上得分之差的方差。 ;例三;（四）评分者信度;评分者信度的计算方法;（五）标准参照测验的信度分析;总结和比较1：五种信度的误差来源;总结和比较2： 测试次数、测试卷份数与信度系数;作业;2、对10名应试者先进行某种测验X，隔适当时间后（半年），再进行内容、范围、难度类似的第二次测验Y，试求测验的复本信度？ 应试者 1 2 3 4 5 6 7 8 9 10 X 9 10 10 6 10 8 4 8 9 4 Y 4 9 7 9 4 3 5 3 2 4;3、有一个由100题构成的量表施行于10个高三学生（分数见下表）。测验一次后，学生即毕业离校，现怎样评价测验结果的信度？ 学生序号 1 2 3 4 5 6 7 8 9 10 奇X 38 37 38 41 40 36 38 39 40 35 偶Y 37 37 36 39 39 34 38 39 39 36;信度的作用;判断原则： 多年的研究结果，一般的能力测验和成就测验的信度系数都在0．90以上，有的可以达0．95；而人格测验、兴趣、态度、价值观等测验的信度一般在0．80—0．85或更高些。 R0．70：测验不能用于对个人作出评价或预测， 而且不能作团体比较； 0.70≤R＜0.85：可用于团体比较； R≥0.85：才能用来鉴别或预测个人成绩或作为。 新编的测验信度应原有的同类测验或相似测验。 ;2、信度是测量过程中随机误差大小的反映。 3、信度可以直接解释真分数与实得分数之间的关系，明确告知测验误差的大小（测量标准误可作为测量误差大小的客观指标） 4、下结论说某测验比较可靠，必须依据情境，并经多次证实。 5、信度可以解释、预测个人分数的意义。;三、提高信度的方法;（二）提高测量信度的常用方法;一、什么是效度 ——指测量结果的准确性和有效性的程度。也可以说是测量是否达到了预期的目的。 1、效度是一个相对的概念。 （1）测量的效度是相对一定的测量目的而言的 （2）测量的效度是相对测量的结果而言的 2、一种测量的效度只是高或低的问题 测量结果总是有一定效度的，只是效度高低不同罢了。;根据测量目标的不同，对测量工具进行效度验证的方法主要有三种： 内容效度（基于所测内容的效度验证方法） 结构效度（基于所测心理结构的效度验证方法） 准则关联效度（基于效标关联性的效度验证方法）;1、什么是内容效度 ——指测验题目样本对应测内容及行为领域的代表性程度。如果是教学情境下的成就测验，那么其内容效度就是看测验题目样本能体现教学目标与教材要求的程度。 例如，教师给学生做一份语文成就测验，如果该测验的题目涵盖了语文教学所达到的各项目标及教材的重要内容，那么我们便说该测验具有较高的内容效度。 为了使测验的内容具有有效性，成为所欲测量内容的一个具有代表性的行为样本，在编制测验时，就要考虑建立内容效度的问题。;2、内容效度的估计;内容效度主要应用于成就测验、学科测验、选拔和分类职业测验。 内容效度