职场英语水平考试的测试分析与反思.docVIP

职场英语水平考试的测试分析与反思 　　【摘要】本文对上海工商外国语职业学院首届职场英语水平考试，从正态性、信度效度、难度和区分度等方面进行了试卷质量分析，在此基础上对试卷各题型的设置及分值分配进行反思，以期编制出更好的职场英语水平考试试卷。 　　【关键词】职场英语 考试分析 反思 　　教育部高职高专英语教指委颁布的《高等职业教育英语课程教学要求》（试行）（2010年6月）中明确提出“高职英语课程以培养学生实际应用英语的能力为目标，侧重职场环境下语言交际能力的培养，使学生逐步提高用英语进行交流和沟通的能力”。在教学中，我们要遵循外语学习规律，结合高职教育特点，在打好语言基本功的基础上，以职场岗位需求为主线开发和构建教学内容体系，着力培养学生职场环境下的英语口头和书面交际能力。因此，我们提出并实施了“三五”教改方案，就是将大学英语教学分成三个阶段和五个学期，即：基础英语阶段（大一两个学期）、通用职场英语阶段（大二两个学期）及专业职场英语阶段（大三第一学期八周）。三阶段五学期的教学内容各有侧重，相互渗透。 　　课程考核是构建课程体系的重要一环，为进一步完善了公共英语课程体系，在大二年级第四学期期末设置职场英语水平考试，考查学生语言水平和教学效果。职场英语水平考试有两个显著的特点：一是重视考查学生的英语口语能力。口试由“微型演讲”（Mini-Talk）和“简短对话”（Short Conversation）两部分组成。通过现场演讲和即兴对话，考查学生的口语表达能力；二是注重考查职场英语应用能力。笔试部分的试题不仅涉及基础英语，还包含了职场英语内容（如词汇、翻译和应用文写作），较好体现了职业教育的特点和就业岗位对求职者英语能力的需求。 　　2012级学生在2014年6月参加了上海工商外国语学院首届职场英语水平考试。本次考试总分150分，分笔试（100分）和口试（50分）两部分，口试由班级授课老师进行一对一的口试，给出分数。笔试为2012级学生第四学期的期末统考，考试规范，成绩可信度较高。本文拟采用SPSS.19软件对1333份笔试成绩样本进行分析，并提出对职场英语水平考试题型设置及分值分配的反思。 　　一、考试分析及主要指标 　　考试分析的首要环节是试卷质量分析。根据测量学原理，在对考试成绩进行正态拟合检验的基础上，从试卷的信度效度和难度、区分度三个方面获取本次考试的相关信息。 　　1.正态拟合检验。一门课程考试的质量首先取决于作为考试工具的试卷是否能够反映学生学习的实际水平。一项符合学生试卷水平的考试，理论上，其考试成绩应该服从或近似服从正态分布。也就是说，成绩中等水平的学生占大多数，而成绩特别好和特别差的学生均为少数。因此，试卷分析首先必须检验其考试结果的分布情况。采用SPSS.19软件对1333份笔试样本进行分析后，本次考试的成绩分布频数如图一。 　　本次职场英语水平考试笔试部分的平均成绩为61.4，标准差为15.7。通过正态拟合检验发现本次考试的成绩接近负偏态分布（见图一），试卷基本上能反映学生的实际情况。 　　2.信度效度。考试信度指考试结果的一致性程度，是表明考试质量的稳定性和可靠性的一个重要指标。试卷的信度高，意味着考试结果很少受随机因素的影响，考试的结果与其他等价考试的结果是一致的，考试成绩能真实可靠地反映学生的学业水平。效度是对考试所要测量的内容所达到的程度的估计，考试是否准确地测定了要测定的内容。 　　只有信度较高的测试才能有较高的效度，但是，效度较高不能保证信度也一样高。可以说，信度和效度的关系是单方面的，信度差则效度差，但效度差不一定信度差。只有信度高的考试结果才能为试卷分析提供有意义的信息。 　　首先通过SPSS.19软件计算出试题的均值和标准差，然后通过库德?理查逊公式计算出本次考试的信度。 　　根据计算，本次考试的信度系数为0.939，可见本次考试信度较好，考试结果是稳定可靠的。 　　3.难度、区分度。试题的难度就是试题的难易程度，也是试题质量分析的一个数量指标。试题的难度与考试分数的分布有着直接的关系。如果试题太难，则考试分数成负偏态分布。如果试题太容易，则考试分数成正偏态分布。难度可用正确回答试题人数与参加测验总人数之比值作为指标，也可以采用极端分组法。试卷难度会对试卷多方面的质量产生深刻的影响。因此，难度必须适宜。本次考试分析采用极端分组法分析了试卷试题的难度，把全体考生的成绩从高分到低分排列，把处于前27%的考生列为高分组，处于后27%的考生列为低分组。 　　试题的区分度是用来判断试题具有多大能力把成绩较好和较差的学生档次区分开来的指标，也就是试题在用于考试时使水平高的学生得高分，使水平低的学生得低分的倾向。区分度是鉴定试题的重要依据。区分度不高的考试，学业优秀和