科技教育评价中主客观赋权方法比较研究.pdfVIP

1 科技教育评价中科技教育评价中主客观赋权方法主客观赋权方法比较研究比较研究 科技教育评价中科技教育评价中主主客观赋权方法客观赋权方法比较研究比较研究 俞立平 潘云涛 武夷山 中国科学技术信息研究所 北京 100038 摘要：本文利用英国 《泰晤士报高等教育增刊》2007 年世界大学排名的原始数据，分 别采用主成分分析、因子分析、TOPSIS 法、秩和比法、灰色关联法、熵权法六种客观赋权 法进行排序，然后比较了各种评价结果，并将这六种客观赋权评价结果与泰晤士报主观赋权 评价结果进行了两两比较。研究发现：客观赋权法的评价结果无法得到公认，比较适用宏观 分级评价；评价对象自身的差异程度会影响不同评价方法评价结果之间的一致性；在评价数 据呈正态分布情况下，客观赋权法评价结果与权威主观评价结果相比，处于数据中间段的评 价结果相差较大，而处于数据系列两端的评价对象会得到较为一致的评价；主客观赋权方法 相结合是综合评价的发展方向。 关键词：科技教育评价 客观赋权 主观赋权 大学排名 中图分类号：G31 1 引言引言 引言引言 科技教育评价是科教管理工作的重要组成部分，是推动国家科教事业持续健康发展，促 进科教资源优化配置，提高科教管理水平的重要手段和保障。除定性评价方法外，目前国内 外综合评价方法有数十种之多。这些评价方法各有其特点，但大体上可分为两类，其主要区 别在确定权重的方法上。一类是主观赋权，多数采取综合咨询评分确定权重，然后对无量纲 的数据进行综合，如综合指数法、模糊综合评判法、层次分析法、功效系数法等；另一类是 客观赋权，根据各指标间相关关系或各指标值变异程度来确定权数，如主成分分析法、因子 分析法、TOPSIS 法等等。 在科技教育评价领域，很多主客观赋权方法都得到了应用，目前学术界进一步的研究包 括两个方面，一是利用几种赋权方法综合进行评价；二是各种赋权方法评价结果的比较。对 于后者，刘占伟、邓四二、滕弘飞[1] （2003 ）从理论上分析了常见的几种评价方法的特点及 存在的问题，包括层次分析法、模糊评价法、灰色理论法、物元分析法、聚类分析法、价值 工程法、神经网络法以及综合评价法。陈衍泰，陈国宏，李美娟[2] （2004 ）将各学科领域的 综合评价方法归纳、分类，讨论了各类方法的基本原理、优缺点及适用领域，指出目前综合 评价存在着三大问题：多方法评价结论的非一致性问题；方法针对性不强；理论研究与实际 应用的脱节问题。吴清平、张丹[3] （2003 ）在医疗工作质量评价中对秩和比法、层次分析法、 TOPSIS法、系统聚类法的评价结果进行比较，发现秩和比法与其他方法具有一定的一致性。 总体上这方面的研究不多，实证研究更少，存在的主要问题是，针对同一评价对象，选取相 同的指标，采取同样的数据，但不同指标赋权方法得出的评价结果不一致，这个问题已被广 大学者所注意到。进一步的问题是：不同评价方法评价结果之间有何特征？它们之间的关系 如何？评价对象数量的多少和数据特征对评价结果有何影响？弄清楚这些问题有利于客观 评价不同的评价方法，从而进行评价方法的选取，并且有利于对评价结果进行总结和评估， 从而做到评价的公平公正，调动广大科研人员的积极性，促进科技教育事业健康发展。 为了对这个问题进行深入研究，必须找到完备权威的评价数据和参照标准，本文拟选取 世界大学排名数据进行分析。目前世界有影响的世界大学排名有 《美国新闻与世界报道》排 1 国家十一五支撑计划项目 （2006BAH03B05）基于海量信息的科技评价方法、技术研究与应用 （2007-2009）； 国家自然科学基金资助 ）强竞争与弱竞争环境下科技发展与科技评价的科学计量学研究。 （2006-2008 ） 作者简介：俞立平 （1967-）男，江苏泰州人，博士，扬州职业大学副教授，工商管理学院副院长。主要从 事信息经济、科学计量领域的教学科研工作。