基于内容效度的大学英语学业测试实证研究.docVIP

基于内容效度的大学英语学业测试实证研究 　　应用重测法，从独立学院特点的角度，对近两年大学英语学业测试内容效度进行实证研究。通过问卷、访谈、试卷分析等有效数据的分析，论证了不同因素对测试内容效度的影响及其相互关系，从而为制定符合独立学院特点保证测试效度的试卷，提供了可靠依据。 　　学业测试 内容效度 真实水平可靠信息 　　一、研究背景 　　语言测试效度研究被引入大学英语教学后，随着教学理念、教学模式的更新而快速发展。由于历史原因独立学院发展起步较晚，在教学模式、测试评估体系等方面受传统习惯影响，大学英语学业测试虽然采用了终结性评价和形成性评价相结合的方法，但仍以终结性评价为主，在测试模式上固定单一；因学生英语基础较差，两级分化严重，试卷客观题量偏大。由于客观题出题较难，有的教师在拟定客观题时直接引用现成的题目；有的甚至模仿、照搬大学英语四、六级考试，忽视了独立学院与其他学院的区别和学生特点，致使学业测试无法准确的检测大学英语教与学的实际情况。因此，进行学业测试内容效度研究，检测学业测试是否考了教学目标所规定的内容；是否达到了测试目的要求；试题题型的设计是否合理等等这些问题都关系到测试的效度。 　　二、文献综述 　　内容效度是指测试内容与预定要测试内容之间一致性的程度，包括相关性和内容覆盖面，是评价一个测试的出发点。测试的相关性即测试内容和测试的目是否一致。内容的覆盖面是指试题所代表的需要测试的范围是否充分。内容效度是检验测试质量的一个重要指标，是测试效度的一部分。 　　近半个多世纪，语言测试效度的研究取得了重大进展。自20 世纪60年代以来，效度理论发展大体划分为3个时期：（1）单一效度观时期；（2）分类效度观时期；（3）效度整体观时期，但在不同时期内容效度始终被认为是效度的一部分。90年代后效度理论发生了明显的变化。“国际心理测量学界在1999年修订的新版《教育与心理测量标准》（Standards for Educational and Psychological Testing中，效度被定义为“关于测验分数的特定解释所得到的支持程度。这种支持来自累积的证据或理论。这种解释是测验应用的基础。”（184页）这里，通过考察测验内容与测验构念之间关系的（在编制测验时，对“这个测验测什么？”问题的回答，就是“构念”）基于内容的证据仍是效度证据的重要来源。”（谢小庆2010）在收集效度证据的6种方法中的内容分析、项目（题目）或任务的实验分析、纬度分析方法均属内容效度范畴。内容效度一直被认为是检验测试的一个重要指标。内容效度的作用是考察学生对所学知识的掌握，一般要参考某种教学大纲，甚至考虑到教学法，对语法要素和技能都要有所体现。测试是否符合教学内容，试题是否适合被测试的学生，所教过的东西都应在检测范围内，并应注意具有代表性的试题应占有一定比例。因为高内容效度是良好学业测试与评价最重要的特征之一。如果测验内容效度不理想，那么它就无法准确反映学生在学习方面的信息。依据学生分数所做的解释、推论和决策也不会合理和有效。这样的测验，即使精心施测与客观评分，而且实际获得的信度、难度和区分度指标都可以接受，也不能被认为是好的测试。 　　三、研究设计 　　研究的主要问题：学业测试是否检测出了学生英语学习的实际水平。研究目的：进一步了解独立学院学生学习特点和影响测试内容效度的相关因素，提高测试效度，使其对教学发挥积极的反拨作用。研究对象为09、10、11级学生，对2010至2012学年度四个学期的大学英语期末测试内容效度的跟踪调查。研究方法：采取文献研究、访谈、问卷调查、试卷分析相结合的方法进行实证研究。被访谈、问卷者为学习相对稳定的班级、学生，以保证收集的数据真实可靠。被抽取的有效访谈、问卷为2010-2011学年度第一学期32份，2011-2012学年度第二学期51份。 　　四、数据分析 　　分析表明：1、大多数学生认为，目前的大学英语学业测试基本上反映了他们的实际水平。但在题材、体裁的选择，题目（内容）表述等方面需改进。2、2011-2012学年度第二学期比2010-2011学年度第一学期在测试内容与测试目的要求一致性提高了9%；覆盖面提高了9%；难题比例降低了8%：中等难度提高了6%；容易题比例提高了 3%；区分度有所提高，测试效度明显提高。 　　五、启示与建议 　　1、测试目的与测试内容效度 　　期末学业测试是对学生一个学期学习的成果评估。内容效度的高低决定语言测试的质量。因此，命题时必须以教学大纲为依据。一般来说独立学院的生源、教学条件等方面与其它本科院校不同，学业测试应从实际出发做到三个同步：一是制定教学目标与确定测试目的要求同步，以保证测试以教学大纲为依托。二是教学与备考同步，在教学过程中讲知识、重点难