11 评价研究方法.docVIP

第十一讲　评价研究方法 第一节? 评价研究的基本概念 评价，就是指依据明确的目标，按照一定的标准，采用科学方法，测量对象的功能、品质和属性，并对评价对象做出价值性的判断。 在评价研究中，可以通过问卷调查、量表测量来收集资料，但它只是评价研究中的收集资料的工具，而不等同于评价研究。 　　一、评价研究的特征 评价研究的特征表现在评价的目标性与价值性的判断。　　（一）评价的目标性　　评价的目标性是指评价研究是一项具有明确的目的和目标的研究活动。评价的目的是指通过评价活动后所期望达到的结果。通常有三种不同类型的期望结果。 比较评等，这属于相对性评价，目的是通过对两个不同对象的评价，以期对这两个对象的差异性做出判断。假如用a和b代表两个不同对象，比较评等就是要判断是否存在a＞b或a＜b。 达标衡量，这属于绝对性评价，是以某一对象作为比较的标准（a0），经过对另一对象a的评价研究，对对象a做出是否达到a≥a0的判断。 发展比较，这属于自我评价，是以自身的前后状况进行比较，通过对对象a不同时期的评价研究，对对象a做出是否存在a2≥a1的判断。 评价目标是要做出上述评价结论的依据。在教育技术学研究中常用的评价依据是： 条件水平，例如拥有教学环境和资源的数量和质量。 品质水平，例如对教学软件通常是从教育性、科学性、技术性、艺术性等方面进行品质评价的。 效果水平，例如对于教学效果，是从教学目标来分类，即从认知、理解、应用、分析、综合、评价等出发，判断目标达到的程度。 管理水平，例如在教育技术学研究中，着重在对教学资源的开发、运用、流通、发展方面的管理。 （二）评价研究的价值判断性　　评价研究的价值判断性表现在评价过程中，需要根据目标分解出若干评价要素（项目），由评判者依据一定的标准，对评价对象的各项功能、品质和属性进行等级的判断。在获得逐项的评判结果之后，还要根据各项目的重要程度制定权重，把各项目的评判等级与权重综合，从而对总体做出等级比较、达标状况或发展程度的判断。 　　二、评价研究的要素　　评价研究由三个基本要素构成：??? 　　（一）评价对象??? 　　这是指被评价、被研究的人或者事物。在教育技术学研究中，评价对象主要是教学过程、教学资源、学生学习效果，教育技术事业的管理等多方面。??? 　　（二）评价指标体系??? 　　它是评价研究工作的工具，通过它有目的地进行资料的搜集、整理、分析；同时，它又是评价判断的依据，依据它作出价值性的判断。??? 　　评价指标体系包括有评价要素（指标项）、评价标准和指标权重三个部分。??? 　　（三）评判者　　评判者包括组织领导机关、研究人员、专家、同行、教师、学生以及评价对象自身。评价研究的三要素及其关系可用图11-1表示。 ?　　图11-1评价研究的要素 　　三、评价研究的基本步骤 　　评价研究的基本步骤可用图11-2来表示： ?图11-2 评价研究的基本步骤 　　（一）建立评价指标体系　　评价指标体系包括三个部分，即: 评价要素，它是反映被评对象特征的各个成分；评价标准，它是衡量事物特征各个成分的比较基准；指标权重，它是指各个成分在总体中所具有的重要程度的标志。 如果是要对于某个研究方案进行评价，则可以按照如下的步骤：识别方案的目的与目标（因变量）；用行为的词语重述目的与目标（操作定义）；构造内容有效（适当）的测验以测量在行为上陈述的目的和目标（因变量的测量）；识别和选择与测验组相对比的控制（建立自变量），如果没有这一步，就是形成性评价。 二）资料的收集　　为了进行评价，通常通过多种途径收集有关资料，主要有: 访问调查、个案调查、问卷调查、量表测量（专家评判）。 （三）资料的鉴别　　把所收集的资料按照评价指标要素分类整理，鉴别资料的可使用价值。??? 　　（四）价值判断??? 　　按照评价指标体系所给出的标准对每个成分要素资料进行比较、判断，作出价值等级的归属。??? 　　（五）评价结果的综述??? 　　综合各个要素的得分及其权重，得出评价总分，并根据总分和各要素得分率，作出对品质的等级评定或差异比较，或达标程度，或发展程度的价值性的描述和判断。?? 　　四、评价的类型 ??? 教育技术学研究中的评价，根据事物发展的进程，在不同的时期，有不同的目的和重点，大致可分为诊断性评价、形成性评价、总结性评价三类。　　（一）诊断性评价　　诊断性评价是在事物发展进程的某一阶段开始之前所作的评价。它是了解人们对这一事物某一发展阶段的兴趣、态度，以及发展所必须具备的条件存在程度等。??? 　　诊断性评价的目的是为了摸清条件、基础，发现问题，诊断原因，根据评价的结果，可以修订阶段发展目标，提