第十章-设计并进行形成性评价.ppt

第十章 设计并进行形成性评价 形成性评价的几个阶段 形成性评价工具 迪克和凯里模型 评价需求确定目的 进行教学分析 分析学习者和环境 编写绩效目标 修改教学 开发评价方案 开发教学策略 设计并实施教学的形成性评价 设计并实施总结性评价 开发和筛选教学材料 背景 30年前情况： 直接将最初版本转化为成品，并直接应用于目标人群。 后果： 由于初稿的不完善，教师教学和学生学习都出现了很多问题。 当时的“评价”概念： 将新设计的材料与已有成品比较其有效性。在这种比较下，研究者经常发现使用新课程材料的学生学习效果较差。 Cronbach and Scriven提出形成性评价的概念：在教学开发过程中从目标人群中搜集关于教学材料使用及效果的数据和信息，用以提高教学效果。 形成性评价的概念 形成性评价： 教学设计者搜集数据信息以改进教学，提高教学效率 效果的的过程 形成性评价的重点： 搜集数据，分析数据，改进教学 形成性评价的三个基本阶段： 1 一对一评价 2 小组评价 3 场景评价 形成性评价可用专家 在这三个阶段之前，征求不直接参与教学开发过程但有兴趣的相关专家的意见： 领域专家（SME）：主要评价教学内容的精确性和时新性 特定类型学习方面的专家：可以就提高该类型学习效果方面对教学策略提出建议。 学习者专家：可以从目标人群的视角和反应看教学，从最终的应用环境来看材料是否合适。 一对一评价 目的：确定并消除教学中存在的最明显的不足之处，了解学习者对学习材料的最初反应和表现特点。 选择学习者：学习者是目标人群中的3个左右的典型代表。根据与学习成就高度相关的影响因素来选择。 知识准备：高于平均水平；处于中等；低于平均水平 学习态度：积极态度的；一般态度的；消极态度的 经历：有10年以上工作经验的；有2到5年工作经验的；工作经验不到一年的 一对一评价 过程：设计者向学习者进行必要说明，学习者使用材料，学习者和设计者交流 特点： 设计者要与学习者建立友好信任关系 进行有效互动 数据信息来源：学习者标注，测试成绩，态度问卷，评价者记录 一对一评价的标准： 1 清晰度：对于学习者个体而言，信息或者呈现给他们的教学内容是否明了、清楚？ 2 影响力：教学对于学习者个体的态度和达到教学目标有没有影响？ 3 可行性：如果得到所需的资源（如时间、教学情境），教学的可行性多大？ 一对一评价信息搜集 标准 教学内容 相关内容 教学过程 清晰度（合适） 词语表达 句型 导入 具体阐述 结论 过渡 背景 实例 类比 图解 示范 回顾 总结 顺序安排 教学块大小 教学块过渡 节奏快慢 变化 态度 成绩 对学习者的影响力 是否有用(relevance) 难度如何(confidence） 学习后满意程度 学习者在各个教学目标的学习成果 对学习者 资源 可行性 成熟度 独立性 动机水平 时间 设施 环境 一对一评价质量保证 卷面测试：在每一项后都询问学习者做出特定反应的原因 操作指示:要保证学习者能够明白指示内容并能根据指示操作。 评价量表:要评价的要点是否可观察；对评价要点的解释是否清楚；评价要点的次序安排是否有效 评价者的打分表 ：区分标准和所区分的等级数是否合理，为评价者所留观察，判断，记录时间是否充足 评价者判断的可靠性：可以在有时间间隔下两次或多次评价同一行为或产品 评价策略：看看所获数据是否符合逻辑，可解释 一对一评价注意事项 注意： 不要把特定学习者的反应过于一般化。 确定学习时间是一对一评价关注的一个方面，但这个从中得到的时间只是大概的，因为包含了学习者和设计者的交流时间，可以按估计减去，但比较不准确。 一对一评价后达到的效果： 教学在词汇、语言复杂度、举例、解释等方面适合学习者； 能够使学习者具有正确态度，基本达到学习目标； 适合学习者，现有资源及环境，具有可行性。 小组评价 目的： 确定在一对一评价后所作的改动是否有效，找出学习者在学习中仍然存在的问题 确定学习者在不和教师交互的情况下使用教学材料的情况 选择学习者：尽量代表目标人群各种类型，大概8－20人。 类型维度：学业水平（高，一般，低）； 习惯的学习方式； 学习者成熟度； 小组评价 过程： 评价者（或教师）首先向学习者说明教学材料处于开发的形成性评价阶段，需要获得学习者的反馈。然后按照教学材料设计的实际使用方式组织学习者使用。在整个过程中，尽可能减少教师的参与。 小组评价后应达到的效果： 能在最终教学环境中适合大部分目标人群 小组评价信息收集 通常是学习者在前测和后测中的分数，前