基于项目反应理论计算机基础自适应考试系统.docVIP

基于项目反应理论计算机基础自适应考试系统 　　摘要： 本文针对《计算机基础》课程考试的特点和普通计算机化考试系统的不足，以项目反应理论为基础，阐述了基于局域网的计算机自适应考试系统的功能、组成和设计方法。 　　关键词： 《计算机基础》 CAT 特点和理论基础 基本组成 实现 　　 　　《计算机基础》是高等院校文、理、工科学生必修的一门公共基础课程，该课程的考核如采用传统的纸笔型考试方式，则从制卷、监考到阅卷的工作量是十分巨大的，因此引入无纸化的计算机辅助考试方式是必然的趋向。但普通的计算机上机考试系统的组卷是在考生开始答题之前生成的，即所有考生无论水平高低，接受的是相同题型、题量和难度试题的测验，对某一特定考生而言,只有部分试题真正符合他的实际能力。如何快速、准确地评估考生的真实水平是提高考试效率的关键，计算机自适应考试（Computer Adaptive Testing，简称CAT）就是一种“因人施测”的智能化考试模式。 　　 　　一、CAT系统的特点和理论基础 　　 　　计算机自适应考试与传统的纸笔型考试及普通的计算机考试系统不同，它不是向考生提供一套事先生成的试卷，而是在试题的难度和数量方面自动适应考生的具体情况，即在考试过程中不断地从题库中抽取与考生实际水平和能力相当的题目，智能组卷供考生答题并实时进行能力评估，直到满足测量精度要求为止。 　　计算机自适应考试的理论基础是项目反应理论（Item Response Theory，简称IRT），该理论是针对经典测验理论（Classical Testing Theory，简称CTT）的不足而提出来的一种新的测验理论。CTT是一种以考试实得分数为前提条件的测试理论，即用被测试题目的答对率作为试题的难度参数，以真实分数方差与观察分数方差之比作为信度参数等，由于这些试题参数的确定严重依赖于被测试样本，因而具有较大的局限性。IRT以被测试者个体潜能通过试题作答反应的可测性、被试个体潜能与其试题上可见反应函数关系的基本一致性及试题参数线性变换下的不变性为理论假设，建立了多种以被试个体在既定试题上的作答反应参数来推断其潜在特性的IRT数学模型，如目前应用较多的三参数Logistic模型： 　　 　　其中a参数为题目的区分度，b参数为题目的难度系数，c参数为题目的猜测系数，D=1.702为具有单位测度的因子，θ为考生能力估计值，P（θ）表示能力为θ的考生答对此题目的概率。IRT以被测试者回答问题的情况为依据，经题目特征函数的运算来推测被测试者的能力，其最大特点是估计出来的能力值不依赖于施测题目样本，即具有试题参数估计的不变性和能力参数估计的不变性。 　　 　　二、CAT系统的基本组成 　　 　　基于IRT的《计算机基础》自适应考试系统由题库模块、考试模块和管理模块等组成，如图1所示。 　　 　　1.题库模块 　　该模块主要实现试题库的建立和维护工作。建立一个优质、量大和可扩充的试题库是CAT系统设计中最基础也是工作量最大的工程，具体步骤如下： 　　（1）IRT模型和试题参数的确定。CAT系统的题库不是简单地将数量众多的试题存储到计算机中，而是以项目反应理论作为基础，根据一定的数学模型使题库能适应智能组卷的需要，如三参数的Logistic模型在理论和实践中都得到了充分的验证。试题的IRT参数需要对大量的试题进行大样本测试才能获取稳定的参数估计值，这在系统的初始应用阶段有较大的困难，可由专家或有经验的教师进行预评估后，再根据实测结果对参数的估计值进行修正。 　　（2）试题的选取和录入。本课程的考核主要针对学生对计算机基础知识的掌握及基本操作的应用能力，试题涵盖计算机硬件基础知识、软件基础知识、Windows操作系统、Office软件操作四个部分。试题的选取注重知识点的分布、不同难度和不同题型的结合，每道题目的属性包括试题编号、试题类型、试题分数、试题题目、标准答案、难度系数、区分度和猜测系数等IRT参数。 　　（3）试题库的维护。题库的建设是一个循序渐进的过程，随着系统的多次使用，题库中的试题数量需要不断地扩展和更新，试题的各个参数需要不断地进行调整，及时去除那些区分度低和猜测系数大的题目，以保证题库的数量和质量。为了保证题库的安全，只有系统管理员才具有此权限。 　　2.考试模块 　　该模块是CAT系统的核心，主要完成试题的选取与呈现、得分判断、参数估计及成绩提交等工作。 　　目前各高校的数字化校园建设已初具规模，以局域网（网络机房）作为考试环境，将题库、考试管理系统和成绩分析系统等放在服务器上，考试程序放在各客户机上，进行智能组卷和实时评分，考试结束后将考试成绩和相关文档上传到服务器保存。 　　考试模块主要为考生提供一个操作方便的考试界面。运行客户端程序后，首先出现登录窗口，正确输入考生的