在線测试分析与数据挖掘系统的设计.doc

在线测试分析与数据挖掘系统的设计 The Design of Online Testing Data Analyzing and Mining System 余胜泉、李世亮、谢晓林 北京师范大学现代教育技术研究所（100875） 摘 要：本文阐述了一个在线测试分析与数据挖掘系统的设计与实现，本系统建立在经典测量理论的基础上，由数据接口、数据预处理、数据挖掘等八部分组成，系统通过对考试和作业过程中成绩数据进行科学统计分析，能够从学生的得分中提取大量的有关教学和学习的过程信息，为教师和学生改进教学和学习提供明确的方向和指导。同时，本系统在利用知识图分析学生的知识点掌握情况并结合对学习效果的分析，最终得出学生学习路径方面有初步的尝试和发展。 关键词：在线测试、成绩分析、在线教学评价、数据挖掘 Abstract: This paper explored the design and development of an online testing data analyzing and mining system. The system built on CTT(Classical Testing Theory), composed by eight modules including data interface, data pre-processing, data mining etc. The system can find useful information in instructing and learning process though analyze online testing grades scientifically, then provide methods and strategies for teacher improve instructing. Meantime, the system can built the knowledge map for student, it can support adaptive learning in future. Keywords: online testing, grade analyzing, online instruction evaluating, data mining 一、引言 教学评价是教学中至关重要的一个环节，它所起的作用可以概括为五个方面：反馈调节功能、诊断指导功能、强化激励功能、教学提高功能、目标导向功能。在基于Internet的网络教学中，教师的教和学生的学处于一种时空分离状态，在这种情况下就更需要通过测试（包括作业和考试）来了解学生的学习情况和教师的教学效果。 通过在线测试可以记录学生的考试成绩，但是这些只是一些杂乱、无序的数据，即使是教学经验丰富的教师也无法获得全面的反馈信息，只有通过对这些数据的科学统计分析，才能够从学生的考试得分中提取大量的有关教学和学习的信息，为教师和改进教学提供明确的方向和指导。如果不能够挖掘出测试成绩信息中包含的这些深层次的信息，那么教学评价环节对教学和学习的改进就没有什么实质性帮助。而目前几乎所有的网络教学平台的教学评价部分都只是对考试成绩本身进行了简单的描述性统计，缺乏对教学过程信息的深入发掘，更谈不上提出优化教学的建议。本系统就是要研究怎样科学的分析学生的考试结果，将隐含于其中的教育过程反馈信息清晰化、明确化，改变教师和学生不能及时得到反馈信息来调整教学和学习的状况，为教师和学生提供方便快捷的教学反馈工具。 二、理论建模 本系统基于现代教育科学的评价理论和教育信息处理技术，设立科学的评价指标体系，依靠有效的量化和非量化的数据采集，提取出学生原始得分数据中蕴藏的反馈信息，以明确的方式提供给教师和学生。 1．关键测评指标 网络测评是心理与教育测量的重要应用领域。题库数学模型的建造，包括题目参数的定义和计算，题目的使用方法，考试结果的分析，这些都需要建立在一定的教育测量理论的基础上。其中对考试结果分析时，在不同条件下如何选用适当的统计测量指标，如何对选择的统计测量指标进行合理的量化，如何对这些统计测量指标量化的结果进行科学的评价分析，都是向测量科学提出的新问题，也是我们在本研究中对理论的新探索。 本系统所选择的18个测评指标围绕着教和学两方面，指标之间存在内在联系。在处理数据对象时，简单指标可以作为复杂指标的中介。系统实现中，将简单指标设置成一个单独的组件，可供各复杂指标使用，以提高统计分析评价模块的效率，各指标之间的关联关系大致如下图所示： 图1 统计分析指标关系图 2．指标体系的数学基础 本系统选择的18个指标包括平均分、信度、效度、难度、知识点的掌握程度等。对于每个指标我们从参数说明、输入、输