Rasch 模型在学绩测验质量的分析中的应用.docVIP

Rasch模型在学绩测验质量分析中的应用* 何妃霞 赵守盈 刘妍 [摘 要] 学绩测验是测查学生学业成就水平的重要形式。因此，用来评估其测试结果的工具是否有效尤其重要。Rasch模型是估计题目难度和学生能力的一种数学模型，可以对测验题目难度的分布、题目得分与测验得分之间的关系以及测验目标进行精确分析，为测验质量的分析提供一个新的视角。本文使用Rasch分析软件WINSTEPS对贵州省贵阳市两所实施相同测验的学校测试数据进行分析，结果表明该测验的质量基本符合测验目标的要求，但需对少数几个和难度分布显著不同的题目做进一步分析，同时研究表明相同的测验对不同的测试目标群体作用不同，并且为该测验提供了一些可行性的改进方法。 [关键词] Rasch模型 学绩测验 质量分析 一、引言 学绩测验是测查学生学业成就水平的重要形式，对教育研究的发展做出了重要贡献。因此，如何对学绩测验质量进行全面、准确地分析有重要的研究意义。学绩测验的质量包括试题的质量和测验的选配、组合是否符合考试的测量目标两个方面。[1]20-26Rasch模型是丹麦数学家Georg Rasch（1960）提出的测验分析方法模型，在心理与教育领域有重要作用。Rasch模型通过学绩测验结果的原始数据对题目的难度水平和学生的能力水平进行估计，建立学生能力水平和测验题目难度水平之间的关系，把学生的能力水平和题目的难度水平放在同一个等距水平量尺上进行比较，[2]457-482量尺中位置之间的单位距离具有相同的价值和意义，[3]1-18同时Rasch模型可以对测验题目难度的分布、题目得分与测验得分之间的关系以及测验目标进行精确分析，为测验质量的分析提供一个新的视角。 目前，国内外学者对Rasch模型进行了深入研究。Michela Battauz，Ruggero Bellio，Enrico GoriRasch模型对英语试题中的主观评分及话语填充测试方法等进行了分析研究，指出多面Rasch模型在试题质量和分数解释方面有重要作用，[5]157-169何莲珍，张洁采（2008）用多面Rasch模型对大学英语四、六级口语考试（CET-SET）的信度进行研究，发现Rasch分析可以为考试信度提供有效的反馈信息。[6]388-398还有研究表明，Rasch模型可以用于考试开发过程中专家审题的质量控制，[7]14-18同时在试题质量分析中也有重要作用。[8]70-73 已有研究对多面Rasch模型的应用进行了深入探讨，揭示出在测验质量分析中Rasch模型具有重要作用，其中大多研究采用Rasch分析软件FACETS对主观题的测试数据进行分析。本文采用WINSTEPS对65道客观题的测验数据进行Rasch分析，为Rasch模型在测验质量分析中的应用做深入探究。 二、研究方法 （一）研究对象 贵州省贵阳市两所学校的高三学生。分析两个不同学校学生（在分析结果中用甲、乙代表两个样本学校）在参加同一个测验试题所得分数。两个学校教学中使用相同的教学大纲和教材，教学内容一致。 （二）分析工具 使用SPSS15.0、WINSTEPSSPSS15.0对两个学校在该次测验中的数据进行预处理。随后使用WINSTEPS对测验得分进行Rasch分析。 三、Rasch结果与分析 （一）甲样本学校的Rasch分析结果与讨论 1.甲样本学校的项目难度-个体能力联合分布图 图1甲样本学校的项目-个体图 Rasch模型将数据进行对数转换，转换成等距的logit，把学生能力和题目难度放到同一坐标系中进行标定，可以直接地对学生与学生、学生与题目、题目与题目的差异进行比较，清晰地呈现学生的能力水平和题目的难度水平之间的关系。图1中，左边代表学生能力水平的分布情况，右边代表题目难度水平的分布情况。从下往上，学生的能力水平增高，题目的难度水平增大。越靠近图顶端，学生的能力水平越高，题目越难。相反，越靠近底部，学生的能力水平越低，题目越简单。学生之间的距离代表学生能力水平之间的差异，题目间的距离表示题目难度水平的差异。 在图1中，右边呈现了题目难度水平的分布情况，左边呈现了学生能力水平的分布情况。可以看出，样本学生的能力水平分布宽度约为3.8个logit，测验题目的难度水平分布宽度约为4.2个logit，表明测验题目的难度水平高于学生的能力水平，测验题目的难度超过了学生的能力水平。还可以看出，在测验中间，有许多题目的难度水平较为接近。 2.甲样本学校的Rasch模型题目信息 表1 甲样本学校的Rasch模型题目信息表 Rasch模型对题目的难度和学生的能力水平进行估计后，对每个学生在每个题目上答对的理论概率进行估计，并且和实际的观测分数进行比较，用二者之间的差异来评估数据与模型的拟合情况。Rasch模型通常报告Outfit MNSQ 和Infi