现代测验多面Rasch技术在学科能力测评中的应用研究.pdf

现代测验多面Rasch技术在学科能力测评中的应用 the RaschModeltoEvaluate ApplyingMany—facet College Students’Performance 作者姓名：黄星艳 Author：HuangXingyan 指导老师：王立君 Tutor：WangLijun 学科(专业)：发展与教育心理学 andEducational Major：Developmental Psychology 申请学位类别和级别：教育学硕士 The of ofEducation degreegraduate：Master 学位授予单位：浙江师范大学 Theunit Normal grantingmaster’：Zhej iang University 201 1年5月 May,2011 ＼煳黜 现代测验多面Rasch技术在学科能力测评中的应用 摘要 学科能力评估在学校教育中扮演着重要的角色，既是对学生上一阶段学习状 况的检查，也是推动后续学习的一大动力。目前在我国的高校中主要采取闭卷考 试及开放考试的形式评估学生的学科能力水平。闭卷考试能考察学生对知识点的 记忆，命题、评分都简单易行，但很难考察学生的对知识整体的理解，难于测察 学生高层次的能力，而且学生容易死记硬背；开放式考试虽能考察学生高层次的 问题解决能力，但由于没有标准答案，评分较难，若只有一位老师评分的话，评 分的主观性很难克服，影响评分的精确性。 本研究采用PowerPoint评估及概念图两种表现性评价方法对学生学科能力 进行测评，表现性评估方法能激发学生的积极性、主动性和创造性，激励学生自 主地运用所学知识分析问题、解决问题，将学生推到学习的主体地位。研究一是 在应用心理学专业大三年级学生的《多元统计方法分析》课程中采用PowerPoint 评估法，评分采用学生自评和互评，以期学生能在比较中发现自身的优势及有待 提高的方面，促使学生进行批判性思维，也令学生对评估结果更加信服。研究二 是在教育硕士的《教育与心理统计》课程中采用概念图法进行测评，概念图法被 证实是一很好的评估方法，它不仅能评估目标测试中所能测到的知识，而且还能 评估学生对知识间关系及整体的理解；在结果的呈现上，概念图法不仅仅有量化 的形式，而且可以对概念图进行质的分析。两项研究的评分标准都采用自编的五 点量尺。 对这两项表现性评价本文采用多评分者进行评分，这样克服一人给分的主观 性，对评分结果用多面Rasch模型进行分析多面Rasch模型是处理多评分者评分 的最佳统计方法，它能提供本研究的信效度信息；它以原始得分作为学生能力指 标的不科学性，获得更为真实的学生能力估计值；多面Rasch模型分析还提供关 于评分者、学生能力、评分标准、评分量尺及评分者与各侧面交互作用的详细信 息，为改进测验提供参考。 本文主要得出以下研究结论： (1)多面Rasch模型对学生的能力估计是使用潜在特质值，而非原始得分， 潜在特质值是剔除了各种误差后获得的，更能代表学生的真实能力水平。 (2)多面Rasch模型对学科能力进行评估，不仅能考察评分者之间的严厉度