科技项目同行评议评审结果可靠性分析.docVIP

科技项目同行评议评审结果可靠性分析 　　摘 要：科技项目评审结果的可靠性、科学性对科技决策至关重要，是合理配置科技资源的重要依据。本文在研究同行评议法的内涵以及科技项目评审过程中专家选取原则的基础上，根据某次科技?目评审实例，采用横向离散率方法，对使用同行评议法进行科技项目评审的结果的可靠性进行分析。 　　关键词：同行评议法；离散率；可靠性分析 　　中图分类号：G31 文献标识码：A 文章编号：1671-2064（2017）03-0223-01 　　近年来，科技项目评审已成为许多国家科技管理过程中不可缺少的重要环节和手段。科研管理部门进行科技评价实质上是对有限的科学资源进行合理配置，通过调整资源配置结构来影响科技的协调发展以及科学系统与其它社会系统的协调关系。同行评议法作为我国目前使用最为广泛的评审方法之一，其评审结果的准确性尤为重要，通过对采用同行评议法评审的科技项目的结果进行可靠性分析，进一步改善评审方法，可以合理配置科学资源，提高科研效率。 　　1 同行评议法 　　同行评议指由从事某领域或接近该领域的专家来评定科技项目的价值或重要性的评价方法，属非个人性决策，是一种由科技共同体来做出有关科学真理性评价的制度。科技项目同行评议专业性比较强，技术内容深而且覆盖领域广，因此评审结果往往依靠科技项目所属领域内的专家的评价意见得出。同行评审专家的参与，可以加强评审结果的科学合理性，但也具有一定的主观性。 　　2 同行评议法专家遴选原则 　　（1）回避原则。是指与被评审方存在利益关系或可能影响其公正性的其他关系的评审专家不能参与评审。已遴选出的，专家应主动提出申明并回避。 　　（2）随机原则。遴选组成的专家组，应体现不同学科、不同专业技术、不同学术观点、不同单位和不同地区的代表性，并应当有一定比例的在一线从事实际研究与发展工作的专家参加。 　　（3）合理性原则。在选择专家时，人数、年龄、知识结构和地域等方面应具有相对合理性，专家所熟悉的领域，专家组人数确定都应应根据项目的重要程度和投资额度的大小来确定专家人数。 　　3 评审结果可靠性分析 　　本文针对某次专业平台综合复审的评审结果进行可靠性分析。此次评审共有56个项目，采用同行评议法评审，设置1个综合专家组，共7位专家。根据此次评审特点，采用横向离散率分析方法对评审结果的可靠性进行分析验证。横向离散率是指用来衡量对同一个项目的评审，某位评审专家的评审结果与其他评审专家评审结果产生差异大小的指标。横向离散率的值越小，表示评审专家的评审结果与评审命中率越接近，评审结果也就越准确，评审水平就越高。 　　本文选取两组样本，一组是随机样本，另一组是同领域样本。 　　3.1 随机样本评审结果可靠性分析 　　在参加此次评审的56个项目中，随机选取5个项目作为随机样本，对其评审结果进行横向离散率分析，得出7位专家评审结果的横向离散率，如表1所示。 　　根据表1可以看出，随机样本评审结果的横向离散率比较大，随机样本的评审结果可靠性一般。其中，专家6的评审结果的横向离散率最大 。 　　3.2 同领域样本评审结果可靠性分析 　　在相同技术领域项目中，随机选取其中5个项目作为同领域样本，对其评审结果进行横向离散率分析，得出7位专家评审结果的横向离散率，如表2所示。 　　由表2可以看出，针对这组项目专家评审结果的横向离散率都比较小，同领域样本的专家评审结果可靠性较好。只有专家6的评审结果的横向离散率大一些。 　　4 结语 　　对比两组样本的横向离散率，同领域样本的离散率明显比随机样本的离散率要小很多，表明同领域样本的评审结果可靠性更好。建议在进行该类项目复审时，能够按技术领域分组，聘请相关领域的专家进行评审，提高专家评审结果的有效性。此外，建议通过建立专家信用信息库、实施信用奖惩机制、加强信息披露等方法，完善专家信用体系，提高科技评审工作的公正性和科学性。 3