论文评价中的影响因子搭便车现象.docVIP

论文评价中的影响因子搭便车现象 　　〔摘要〕影响因子IF2被广泛用于学术评价，IF2采用所有论文的被引次数计算均值，基本假设是论文被引用次数大致相当，但实际上这一假设绝大多数情况下并不成立，由此出现论文评价中的影响因子搭便车现象。以2010年JCR收录人工智能领域60本期刊数据为基础，得到同一分组期刊TM-IF5绝对值比IF2大幅度降低，最大降幅80%、多数为50%左右，表明论文被引次数不均匀分布对影响因子计算结果影响显著，换言之影响因子搭便车现象普遍。因此，影响因子只适用论文的短期评价，此外需要采取辅助措施来降低影响因子的评价误差。 　　〔关键词〕学术评价；影响因子；截尾影响因子；搭便车 　　〔中图分类号〕G255.2〔文献标识码〕A〔文章编号〕1008-0821（2013）02-0012-03 　　影响因子IF2在全球已被广泛应用于学术评价、绩效考核、学术资源配置，著名生物医学期刊《The PLoS Medicine》在2006年发表题为《The Impact Factor Game》的社论指出：“The impact factors of journals have been used to decide whether or not authors get promoted，are given tenure or are offered a position in a department，or are awarded a grant.In some countries，government funding of entire institutions is dependent on the number of publications in journals with high impact factors”。 　　从统计学角度看，影响因子指标的数学实质是以期刊发表全部论文的被引预期值（也就是均值）来替代对每一篇论文本身的直接评价。但是，统计学早已表明，均值容易受到少数偏离值影响，具体到期刊影响因子计算就是少数高被引论文拉高了大部分论文被引预期，《晶体学报A》就是一个很好的例子。 　　SCI收录期刊Acta Cryst A（中文名《晶体学报A》），2008年该期刊影响因子只有2.05，2009年却高达49.93，影响因子1年之间竟然增长24倍，堪称世界学术期刊中的奇迹。原因是德国学者Sheldrick开发的晶体结构分析程序SHELX以及Bruker SHELXTL被学术界广泛使用，2008年Sheldrick在SHELX软件主页上写到“At last there is a paper that should be cited whenever any program that begins with“SHELX…”（including the Bruker SHELXTL）is used：A short history of SHELX.Sheldrick（2008）.Acta Cryst.A64，112-122。很多程序使用者撰写论文时都按Sheldrick要求引用该文，于是2008年、2009年2年该文获得6 605次引用，而两年间《晶体学报A》发表122篇论文，6 605被引次数除以122，影响因子从2猛升到50。ACTA CRYSTALLOGR A影响因子在2012年又大幅度下降为0.6。 　　那么，《晶体学报A》现象是不是个例与孤案？本文拟从学科领域的水平与层次对此进行一个案例讨论。 　　1数据 　　1.1期刊来源 　　目前全球最有代表性的国际性引文数据库即美国ISI公司的WOS数据库、欧洲Elsiver公司的SCOPUS数据库。学科领域选择考虑本文篇幅限制，选择JCR收录期刊数量较少领域，此外还考虑与SCOPUS数据库的共同收录情况，最终选择计算机学科下的人工智能领域，计60本期刊。 　　1.2数据来源 　　2010年度JCR报告取得讨论期刊的影响因子、在SCI数据库中获得计算截尾均值影响因子值相关数据。由于工作量较大，没有扣除期刊自引以及只计算研究论文（research paper或original paper）的被引次数。 　　1.3方法 　　描述1组数据整体特征的描述统计指标很多，其中不容易受到个别偏离值影响的最常见统计量有调和均值、众数、中位数、截尾均值等。考虑到数据收集方便程度以及与影响因子计算方法的平滑衔接，选择截尾均值。本文将截尾均值比例确定为5%的原因是：统计学上一般认为5%是小概率事件，计算1本期刊发表95%论文被引次数均值已经有足够大代表性。 　　对于1本期刊去掉最高被引与最低的合计5%论文被引次数后计算的影响因子（为行文方便，以下使用英文缩写简称TM-