完型填空中测试方法效应.docVIP

完型填空中测试方法效应研究 摘 要: 本研究旨在考察三种完型填空中的方法效应，以及考试成绩可能反映的不同语言能力。分析结果显示：完型填空中测试方法确实影响考生成绩；选择完型主要考了考生词汇语法能力，开放完型有效测试了写作能力，集库完型则与阅读能力相关性最高。 关键词: 测试方法；选择完型；开放完型；集库完型 1. 研究背景与目的 测试方法指的是测试考生语言能力或语言知识的方法 (davies,1999)。测试方法效应则指用来测试考生语言能力的测试方法对考生成绩的影响。 上世纪60年代以来，研究者开始关注方法效应存在与否的问题。在语言测试领域，美国语言学家bachman的方法效应模式是最有影响力和综合性的。bachman (1999) 在他的测试理论专著“fundamental consideration in language testing”中指出测试方法的特点影响考生考试成绩，并在此基础上提出他自己的语言测试模式。它包括五个方面：测试环境、测试说明、测试材料的输入方式、答题方式、考试材料的输入及答题之间的关系。 完型填空从1953年产生以来，被广泛应用于语言测试领域。选择式完型、开放式完型和集库式完型是完型天空的三种题型。虽然大多数学者同意在完型填空中不同的删词方法考了不同的语言能力，但对于它们具体考察了哪些能力，学者们却一直没有定论。 本研究旨在考察完型填空的方法效应，即不同题型的完型填空对考生成绩可能造成的影响，以及考试成绩反映的不同语言能力。具体研究问题如下：1）不同完型填空中是否存在方法效应？2)三种不同题型的完型填空分别考了考生哪些语言能力？ 2.研究方法 2.1测试对象 本研究是一个实验研究。99名英语专业大学新生参加了一个水平测试。水平测试试题主要选自大学英语四级考试试题，内容包括：词汇语法、阅读理解和写作。这些学生根据测试成绩被分为高、中、低三组，每个水平组又随机分成三组，共九组。 2.2试卷设计 本研究包括三份试卷，每份试卷有三篇文章，每篇文章有20个问题。每份试卷的文章相同，测试点也相同，但测试方法不同。具体安排如下表： 3.研究步骤 本研究主要分为三个步骤：水平测试并分组、实施不同题型的完型填空测试、评分并分析结果。 在水平测试前，受试者被告知水平测试的目的仅供研究所用，并不与他们的学业成绩相关。水平测试后，99名受试者被分成高、中、低三小组，每组33人，然后各组又随机分成三小组。三份完型填空试卷随机分给每个水平组的三个小组，一小组做一份试卷。这样，每份试卷都有33个受试者，高、中、低水平组各11个人。 记分方法是每道题1分，每篇文章20分。评分方法上，选择式和集库式完型填空属客观题，原则上只有一个正确选项。开放式完型的评分则遵循可接受原则，即只要考生所给答案语义通顺语法正确就视为正确答案。 4.研究结果 4.1不同完型填空中的方法效应 考生完成完型填空之后，数据被收集并用spss进行了分析。表1列出了每篇文章各种测试方法的平均分和标准差。 table 1 mean and std. deviation of the three test methods in three passages 从上表可以看出选择式和集库式完型填空的平均分高于开放式完型填空，这说明开放式完型填空对考生来说最难。为了进一步验证不同题型的完型填空是否存在方法效应，研究者对测试数据进行了单向方差分析，结果如下表： table 2 one-way anova test of three test methods in three passages 如上表所示：f值分别为31.581, 30.177, 33.305；sig值均为.000,均低于0.05。这说明三篇文章中不同的测试方法对考生的成绩产生了显著影响。笔者对数据进行了多重比较以便明确不同测试方法的区别： table-3 post hoc of test methods 从表3我们可以看出开放式完型填空的成绩显著区别于选择式和集库式完型填空的成绩,而选择完型与集库完型的成绩则不存在显著性差异。这表明开放式完型对考生成绩影响最大。 总结表2、3可以得出以下结论：这三种不同的测试方法对考生成绩具有显著影响。当笔者对这三种测试方法进行进一步的比较与分析发现：开放完型较之其它两种题型难度较大，对考生的影响也最大，这与刘建达（1998）的研究结果一致；然而选择完型与集库完型对考生的影响相差不大。这一结果的原因可能是由于开放完型属于语言产出性质的题型，而选择式和集库式完型都是有选项可供选择的。这与swain的语言输出理论相吻合。根据swain语言输出理论，语言和语言输出是两种不同的能力(johnson. k 2001)。语言输出比语言输入更难，要求更高。 4.2不同题型与考生语言能