教育测量与评价第三次课.pptVIP

教育测量与评价的质量特性 工欲善其事，必先利其器。 测量与评价的成效在很大程度上取决于评价自身的质量！ 评价是一把双刃剑。 科学的评价能对教育产生良好的促进作用，而低劣的评价不仅耗费了宝贵的教育资源，还会导致种种不良的后果。 属于教育评价再评价 问题一： 教育测量的结果是否真实、客观的反映了考生的实际水平？ 教育测量与评价的信度 信度的理论定义 实际值和测量值之间相差的程度 测量分数=真分数+测量误差 真分数如何获得？多次测量？ 教育测量与评价的信度 信度的理论公式： 获得分数方差=真分数方差+误差方差 假设： 误差是随机的，误差的平均数等于零 误差与真分数之间无相关存在 教育测量与评价的信度 测量误差的来源： 测验本身 测验的实施 被试本身 教育测量与评价的信度 决定系数： 定义：存在相关的两个变量，在因变量的方差中由自变量方差所造成的比率 值：两个变量相关系数的平方 信度系数=决定系数 ？ 教育测量与评价的信度 信度的操作性定义 同一测验对同一测试施测两次或多次，所得结果的一致性程度。 每次的测量结果实际包含被测的实际水平和测量误差两部分。 物理测量：皮尺、钢尺、台秤、天平； 教育和心理测量：各种测验量表； 测量的一致性程度越高说明测量结果越稳定，由此人们在使用所得测值时就会感觉其可靠性越高。 教育测量与评价的信度 信度的计算 在教育测量学中对信度的估计或计算，一般采用相关分析的方法，即计算出两种变量的相关系数 （例如：计算两次测验同一对象的分数的相关系数），用相关系数的大小来表示一致性程度的高低。可根据测试结果分数的形式，是连续变量还是二分变量等，可采用不同的相关系数计算公式。 根据信度计算的不同方法，可将信度分为重测信度、复本信度、同质性信度、评分者信度。 教育测量与评价的信度 重测信度 指用同一量表(测验或评价表)对同一组被试施测两次所得结果的一致性程度。其大小等于同一组被试在两次测验上所得分数的相关系数。 重测信度的基本假设：假设某测验所要测量的潜在特质，短期内不会 随时间推移而改变。故重测信度的高低和测量时间间隔长短密切相关。 间隔多久恰当呢？无固定标准，一般来说，在间隔时间内，被试的遗忘和练习的效果基本上相互抵消，即为适度的时间间隔。 再测信度的计算公式 用原始数据计算 再测信度的计算公式 用平均值、标准差计算 再测信度的计算公式 用平均值和总体标准差计算 再测信度的特点 简单 内容重复 时间间隔 被试积极性 测试环境 被试主观状态 再测信度的适用范围 适用异质性测验 适用速度测验不适用难度测验 适用于运动技能测验 教育测量与评价的信度 复本信度 有些测验不适合施测两次，这时我们可以编制两份等值但并不相同的量表对被试施测(其时距尽量短，可短到两次测验接着进行)，两个平行测验测量同一批被试所得结果的一致性程度称为复本信度，其大小等于同一批被试在两个复本测验上所得分数的相关系数。 所谓测验的等值(或平行)是指: ＆ 试题题型、题数、难度、指导语说明、施测要求等方面都相当 ＆ 用来测量相同潜在特质或属性 ＆ 试题不相同。 两种方式：同一时间连续施测；间隔一段较短的时间后施测。 复本信度的计算公式 用原始数据计算 复本信度的计算公式 用平均值、标准差计算 复本信度的计算公式 用平均值和总体标准差计算 复本信度的特点 题目多，准确性高 即反映不同时间的稳定性又反映不同试题的一致性 避免再测信度的记忆性效应 完全相同的试题比较难 相似的两套测试可能影响积极性 复本信度的适用范围 适用于难度测验 适用于速度测验 教育测量与评价的信度 重测信度和复本信度在使用的方法上分别属于跨时间和跨类型的，实际操作中存在困难，均需测验两次，复本不易做到等值，很难用同一测验对同一组被试重复进行测验等，于是引入内部一致性信度来计算测验的信度。 内部一致性信度 也叫同质性信度，是指测验内部所有题目间的一致性程度。题目间的一致性含有两层意思：其一是指所有题目测的是同一种心理特质；其二是指所有题目得分之间都具有较高的正相关。 同质性信度基于的假设是：当一个测验具有较高的同质性信度时，说明测验主要测的是某一单个心理特质，由于众多的题目测试了同一心理特质，那么实测结果就是该特质水平的反映。