从量化角度谈质量监控.pptVIP

2008-11-18 闵行交流 闵行交流 从量化角度浅析质量控制 主讲：王鼎 感怀 只要涉及到人的事都是复杂的，包括教育质量控制，我们的目的只是希望将复杂问题简单化，但不一定解决所有问题. 这是一块必须用心去体会的领域，在这里我们似乎在了解他人，但问题解决的结果往往仅仅进一步了解了自己。当我们常常认为回答了某个问题的时候，我们却常常被更多的问题所困。 相关技术只有通过实践才能体现其价值，否则与垃圾无异。 我思故我在，每个学校，每个地区都有其发展的特殊性，必须结合相应发展规律，作到个性与共性的有效结合，平衡好“破”与“立”的关系。 内容结构 当前面临的问题 量化手段及相关技术指标 量化数据结果为诊断提供必要依据 在教学管理中，有待进一步思考的问题 当前面临的问题：宏观层面 问责 学生学习的改善 当前面临的问题：微观层面 如何获取、利用相关学生信息，有效为诊断、决策所用？ 涉及相关测验的合理使用 如何保证学科教研组长所提供的信息具有较大的可靠性及有效性？ 涉及数据的可靠性及评价的有效性 如何保证教育目标实施的连贯性及稳定性 涉及控制与反馈技术的使用 量化手段及技术指标 量化相关内容： 测量、评价、测验、考试的区别与联系 评价的一般常识 测量模型使用 命题的技术控制 技术指标：信度、效度、区分度、难度（注意不同考试类别，所用公式不同） 教育测量与评价的基本问题 测量的基本含义 测量的过程是赋值的过程 测量往往包含在某评价或评定中，更多的被看成一种基本的研究手段 人的心智的复杂性，决定了测量对象相关因素之间是不明确的，大量的概率模型被广泛的使用 评价的基本含义 评价是价值分析、衡量和判断的过程 测量不能代替评价，测量是一个量化过程，评价是一个定性过程 在数学教育中，评价目标往往是： 数学事实，包括定义、定义、公式，某些特殊的证明等 获得数学结果的标准方法与技能 标准的应用，即典型的非数学情境，通过明确的数学手段完美处理 教育评价相关概念分析 教育测量与教育评价 教育评价是教育测量的一种延续 测验与考试 测验是对行为样本的客观的和标准化的测量 考试一般指在比较正式场合下的测验，目的性比较强 教育评价的过程的四个步骤： 确定教育目标； 设计评价情境，这必须依据预先规定的教育目标中期望学生变化的那种行为来设计的； 选择和编制评价的工具，要求这些工具能引发教育目标所期望的那种行为； 分析评价结果，即依据既定的教育目标来分析评价学生所达到的程度 教育评价的发展趋势 教育测量的重心发生变化 现代认知理论的发展，更加关注学生在认知过程中的内部信息处理机制。 不仅仅局限于对学生未来成功与否的预测，更关注对学习目前学习状况及学科能力的诊断。 教育测量的理论有进一步发展 不仅仅满足与在试题层次上对学生的反应进行量化，同时对学生在信息加工成分层次、加工过程步骤层次上，将心理理论、统计模型、认知模型整合了起来 计算机技术的发展提高了测验的效率 提升的测量与评价的数据采集精度，提升了评价的可监控性和有效性 教育测量、评价的社会化功能逐步增强 如何保证公平公正不仅仅是相关教育测量学界关心的问题，同时社会更加关注，特别是对于高风险的评价。 评价的参照系：回答使用什么参照来解释所得相关信息 常模参照：确定学生在群体中的相对位置 类似高考、初三、高三模拟考试 标准参照：说明学生在多大程度上达到了所要求的学科标准 学校内部阶段性考试 增长参照：解释并确认学习的作用以及学习的增长也促进情况 教师和家长很看中学生在学习中的进步，但很少将其作为评分的基础，一些专家认为其可以作为常模参照和标准参照的解释的补充 经典测量理论与项目反应理论浅析 经典理论浅析 项目反应理论（IRT）浅析 注意：1、两套理论及模型的使用假设 2、各自的优点和不足 3、关注多维项目反应理论在测量上的广泛使用和开发研究 经典测量理论的假设 经典测量模型的特点与优点 理论假设是要求不高，是弱假设。从经验的判断，有较强的可接受性。 这套理论经过近六十多年的发展和实践，形成里较为完善的测验理论及对试题和试卷进行统计分析方法，方法简单，直观，易掌握。 在我国教育工作者应用中有一定的普遍性。 经典测量理论的局限性 抽样变动大 能力难比较 复本难实施 缺乏预测力 IRT的特点 基本思想：潜在特质 基本思路 确定被试的心理特质值和他们对于项目的反应之间的关系，这种关系的数学形式就是“项目反应模型”。IR