证据中心思想在学生能力评价中应用.docVIP

证据中心思想在学生能力评价中的应用 　　摘 要： 学生能力评价是我国课程实施的重要组成部分，但是现阶段的学生能力评价存在不足之处，对学生能力提高有一定的限制。本文通过对证据中心思想的介绍使读者对ECD在学生能力评价中运用有一定理论上的了解，希望对我国学生能力评价改革有一点帮助。 　　关键词： ECD 学生能力评价 研究 　　 　　学生能力评价是我国课程实施的重要组成部分，由于其本身的固有的导向和教育功能，对于促进学生的发展和成长有着重要的意义。但是从我国现行的教育实践来说，学生能力评价的目的、方法、内容、环境等方面都有不足的地方，如评价方法单一，学生一般是被动评价，侧重记忆性知识测试等［１］。所以，在我国当前的课程改革中，学生能力评价的改革成为一个关键环节。 　　能力评价的一个重要手段就是测试，测试是通过数据来推测学生能力的一种方式，因此，如何通过设计一个合适的测试模型来从这些数据中得出科学有效地评价结论就显得很重要。证据中心思想（ECD，Evidence-Centered Design）的测评设计理念应运而生。 　　1.ECD简介 　　ECD最早是ETS在1997年由一些专家提出的。Schum（1994）认为人类的活动都有其行为特色，依据观察获得信息为证据，并用推论的方式来确认其行为规则和架构［2］。Messick（1994）重视获得证据的阶段与推论所获得的结果，当研究者获得所需的行为证据时，这些证据可用来推论其目标知识的有无或程度的高低［3］；Messick（1994）主张随着对受试者特质与评量设计的复杂的了解，使用的统计模式也会随之更复杂［4］。 　　证据中心的测评设计所构建的是一个试题系统。简单来说，ECD是一种考试设计模型，它有效地把测试目的、测试内容、学生能力的证据、分析评价等方面联系在一起。ECD的框架结构使得测试的设计集中在寻找证据上，从而使得整个设计过程更趋简单化，避免了其他内容或形式性的干扰或影响。 　　2.ECD的模式 　　ECD可视为一种评量传送模式，其中包含五个子模式：学生模式、证据模式、作业模式、组合模式及呈现模式［5］。如下图所示。 　　完整的ECD模式（改编自Mislevy，et.al.，2003） 　???学生模式：主要研究的是被试者的知识、技能或者态度。其中的变量代表在评价中受试者的某种知识、技能或态度。学生模式定义一个或多个变量，包含知识、技能，以及研究者想测试得到的能力值。简单的学生模式明确指出学生在那些领域的作业能答对；较复杂的模式则可以说明学生在那几种知识、或不同作业结合的程度或种类的表现。 　　证据模式：所谓证据就是可以用来证明被试者能力的行为和表现等信息，目的是验证考试所声称的能力是否被有效测试到。具体过程如下：给受试者一定的作业，根据其作业表现来提供数据并更新学生模式变量的机率分布。证据模式包含两个部分：证据规则及测量模式。证据规则是说明什么是证据，要测量某种能力需要什么证据，需要多少证据等。测量模式解释的是在多大的几率上观测结果依赖于学生模型中的能力参数，也就是证据能在多大程度上反映学生的水平。 　　作业（或试题）是教育评量的中心，由受试者的作业表现可以产生证据，以及回馈、决定、预测等基本作用。特征值是提供一个测试题制定的框架和考生作答的规范，不仅包括具体的题目属性描述：引导性材料、指导语、帮助性介绍等，而且包括题目的形式及考生提供的答案的规范。根据这种制定的框架及被试人员的能力层次需要测试的能力点，就可以在一个能力点上制定同一类型的多个相似的题目。规定好测试题的属性，改动一些对试题的描述性词或句子，就可以得到很多个类似的题目，不是简单的修改数字，而是对整个题目的数字、条件或者描述等条件进行修改，形成不同的变式。评价人员从认知及教育心理学的观点可以了解作业的架构，并且获得相关的知识与线索。作业设计者藉由设计一个作业环境来提供情境，让受试者能在此情境中被诱发出符合评量目的所需要的行为，并使其行为表现提供证据给证据模式来使用。研究者根据这些要素来设计其作业，并利用组合模式来组成评量。 　　组合模式描述如何将学生模式、证据模式及作业模式一同运作以构成评量。其目的在于准确地测出每个学生模式的变量，以及作业如何恰当且稳定地反映出测验范围的广度及差异性。组合模式中的限制将使多种形式的作业结合在一起构成一个评量。简而言之，组合模式是将所有已知的数据组成测验，其形式可能为纸笔测验或计算机化适性测验，端视研究者的目的为何。如计算机化适性测验所要求的是要达到某种程度的精准度或者是某种程度的速度；而纸笔测验主要要决定以何种形式施测？要测几题？决定之后再组卷施测。 　　在组合评量时作业模式变量的作用在于将作业的特征集合起来，并将多种作业组成一个评量，提供受试者接受测