TEM4听力理解项目行为锚定分析及标准参照属性.docVIP

TEM4听力理解项目行为锚定分析及标准参照属性 　　摘 要: 本文按照文本类型和项目所涉及的认知活动进行项目归类,使用Rasch模型对2007年TEM4听力理解测试做行为锚定分析,了解项目的标准参照属性。分析表明,不同水平的考生在听力技能掌握方面存在显著差异。从标准参照属性来看,所有学生基本上掌握了理解明确信息的听力技能,这类题目区分度高;而对于隐含信息的理解都较差,这类题目区分度较弱。总体来讲,明确信息最容易理解,信息整合次之,而隐含信息最难。从听力理解的体裁类型来看,所有学生基本上能理解短文类和新闻类的文章;短文类的区分度好,会话类最差。 　　关键词: 标准参照语言测试;文本类型;认知活动;行为锚定分析 　　中图分类号:H319.3文献标识码:A文章编号:1001-5795(2010)01-0042-0006 　　 　　标准参照考试需要描述考生语言行为达到教学大纲要求的程度。理论上,语言测试存在标准参照测量和常模参照测量之分,语言教学中的测试多以标准参照为最,而项目分析采用常模参照的居多。就英语专业四、八级考试而言,属于标准参考性教学检查类考试,但是从标准参照角度研究的实践并不多(邹申和杨任明,2006;邹申,2007,2008)。目前,语言测试的趋势是从标准参照能力测试的视角建立语言能力的量表(Hudson,2005),如加拿大语言等级标准,欧洲语言共同参考框架都是标准参照考试的语言行为等级量表。本研究旨在探讨中国外语测试背景下标准参照测量方法的得体性,具体来讲,从听力理解项目角度了解英语专业四级考试的标准参照属性。 　　 　　1 理论基础 　　 　　1.1 标准参照语言测试 　　Cartier(1968)阐述了标准参照语言测试的概念,详细区分标准参照语言测试和常模参照语言测试,Cziko(1982)强调语言测试采用标准参照来解释。近四十年,语言测试界探讨了标准参照语言测试和标准的界定(Brown,1989,1990;Hudson Lynch,1984;Lynch Davidson,1994),标准参照和常模参照的异同(Bachman,1990;Brown,1989,2005;Brown Hudson,2002;Cartier,1968;Hudson Lynch,1984),提出了测试开发模型和原则(Cartier,1968;Findley Nathan,1980;Lynch Davidson,1994;邹申,2008),着重探讨了经典测量理论、概化理论和项目反应理论角度来分析项目、测试信度和效度,以及分数线划分的方法(Brown,1990,2005;Brown Husdon,2002;Henning,1984;Hudson,1991)。Hudson(2005)认为当前二语/外语测试共同关心的问题是:描述语言能力的量尺和标准参照的能力测试。这种发展趋势在于实现基于可观察语言行为的交际性透明考试结果,究其根源在于对语言使用复杂性的认可,以及阐释量尺任务、特质、文本和能力潜在交互的难度。这种趋势反映了以功能和事件为支撑的语言测试的追求,以及功能和事件如何包含具体技能和可分离层级变量的。语言测试中两个互补的发展是语言能力量表的特征,以及如何从标准参照能力测试中来定义这些特征。总之,这种趋势就是从标准参照语言测试角度,采用项目反应理论,建立学习者语言行为量尺,探讨测试任务、文本和能力交互对难度的影响。但是结合标准参照语言测试,从语言行为锚定分析角度来做研究的并不多(e.g.,Perkins Brutten,1988),教学检查性质的考试从标准参照角度来研究的实例也少。 　　1.2 基于项目反应理论的语言行为锚定 　　项目反应理论以考生对题目的作答模式为依据,将考生在项目上的答对概率和潜在特质,以及项目的测量属性(如区分 　　作者简介:彭康洲:男,博士生,副教授。研究方向:语言测试。收稿日期:2009-09-09基金项目:本文为上海外国语大学“211工程”三期建设重点学科资助项目《英语专业写作教学语料库研究与建设》阶段性成果之一;项目编号:SISU211-3-1-1-032;项目负责人:邹申。 　　彭康洲: TEM4听力理解项目的行为锚定分析及标准参照属性 　　度、难度和猜测度)以概率模型的形式确定下来;把项目的难度和考生能力水平定义在同一量尺上,借助参数估计方法,以观察数据为出发点,估算出不依赖于项目样本和考生样本容量的考生能力值和项目参数;并且定义了项目信息函数和测验信息函数(彭康洲、李清华,2009)。项目反应理论的最大特点是把项目的难度和考生能力水平定义在同一量尺上,为行为锚定分析提供依据。 　　语言行为锚定分析源于美国学者史密斯和肯德尔于1963年提出的行为锚定量表法,它