网络环境下任务型语言测试效度实证研究.docVIP

网络环境下任务型语言测试效度实证研究 　　摘要：本研究采用调查问卷与实证性语言测试的研究方法，专门针对网络环境下的任务型测试效度问题进行探讨。通过SPSS13.0对测试结果的分析表明，在网络环境下进行任务型测试，测试效度达到较高标准，具有统计学意义；与全国大学英语四级考试（CET4）相关性较高，属于可靠范围，任务型测试表现出与CET4较高的一致性。 　　关键词：网络环境；任务型测试；效度 　　中图分类号：H319.3 文献标识码：A 文章编号：1001-5795（2013）01-0053-0004 　　语言测试非常关注测试结果在多大程度上能够准确反映受试者在某个领域的能力，而效度验证实际上就是为检验预设从测试成绩中去探寻其证据的过程，尤其重视基于效度方面的证据。Weir（2005）认为效度验证也是一个多层面的整体概念，它需要多层面或者多种类的证据去证明，通常这些证据之间是互补关系，而不是互相替代的关系。因此，在验证测试效度时需要从基于理论、环境、效标关联以及评分效度等多角度进行验证。在实证主义框架下，效度验证在方法上更多的是采用数据，或者是通过定量的数据试验来搜集证据，通过最终的测试成绩比较来检测测试的效度。效度验证也可以采用自然主义研究的质性研究方法来检测。Weir（2005）的效标关联效度和后果效度理论指出，在进行数据验证与数据采集时，要注重搜集效度各方面，如基于理论、环境、评分以及效标关联效度等层面的相关证据的收集。 　　任务型测试实质上是把每一项任务作为最基本的分析单元，从而成为测试任务选择、测试工具构建以及评价人物表现的基本依据。因此，任务性测试理论关注点在于考查学习者在完成任务时的表现（Brown，2002）。Skehan（1998：95）也认为任务型测试的基本原则是“测试应能推断出学习者的能力，预测其能力表现以及是否可以在不同的情况下运用”。与此同时，李清华（2007、2009）、陈颖（2008）都曾就基于证据方法的效度验证进行了研究，刘建达等（2010）也针对做事测试评卷中的质量控制进行了论述。可见，通过每一项实际任务来测试学习者的语言表达能力与实际运用语言的能力这一测试方式――任务型测试越来越引起人们的关注。 　　1 研究背景 　　笔者所在学校是教育部第一、二批示范点改革院校，自2004年以来，我们在大学英语教学中普遍采用网络化教学模式、任务型学习方式（如口头练习任务、应用文写作、网上新闻阅读加阅读报告、西方文化讲座及报告、各种实用实验表格编制、英语辩论、模拟英汉或汉英同声传译活动等等）。针对这些教学模式和学习方式的检查，我们采用了新型网络型任务测试的方法，以进一步完善大学英语教学的形成性评估模式。我们设计了一系列任务型测试试题，在网络环境下对学生进行测试，并在我校分级班A、B级中进行了为时两年的研究。我们对网络环境下的任务型测试是否能保持较高的语言测试效度以及能否在模拟的语言环境中检测学生的真实语言能力进行了检测分析，并对测试结果的评分效度的相关指标解释是否合理进行了理论分析。 　　2 研究设计 　　2.1研究对象 　　我们选取了本校本科生段大学英语B级班中的学生126名，为使样本具有广泛代表性，我们主要选取了经管、人文、土木、电气等专业的学生，文理科学生比例各占一半。对所有学生都进行了问卷调查，采取现场发放现场回收的方式。 　　2.2研究工具 　　研究工具为调查问卷、任务型测试试卷和访谈。 　　访谈采取小规模形式进行，我们随机挑选了10名学生，与3位参与制定任务型测试的教师分别进行访谈。 　　调查问卷主要调查师生对任务型测试的看法，以及测试试卷的表面效度问题。调查问卷设计主要借鉴了韩宝成（2005）一文中所涉及的信息理解型任务、互动反馈型任务调查、阐述发起型任务调查等项目。 　　测试采用自编的任务型测试试题以检查教学效果。五位具有丰富大学英语教学经验的教师依照任务型测试的要求编制试题，统一试卷的难度和题量，主要测试学生的听力理解和翻译能力（Task 1）――要求学生在教室做英汉或汉英口译，利用蓝鸽语音系统进行录音，考试结束后直接拷贝学生的录音进行评阅；学生的阅读能力（Task 2）――要求学生根据所阅读的文章，完成一定的阅读理解任务；任务型写作能力（Task3）――要求学生先阅读一篇300字的英语短文，用50个左右英语单词概括文章大意，并就短文话题发表150字左右的个人观点。 　　2.3数据的搜集与整理 　　由于调查问卷与试卷都是在体验学习中心进行的，采用当场发放当场回收的形式，回收率达到100%，调查问卷与试卷回收后，运用统计软件SPSS13.0进行数据分析，对基本数据描述、试题内部各题目间的相关系数做了详细的统计分析。目的是检查网络环境下的测试效度是否具有统计学意义，并将统计结果与CET4进行相关性