基于论文产出的科研绩效评价.doc

基于论文产出的科研绩效评价.doc

《基于论文产出的科研绩效评价.doc》由会员分享，可在线阅读，更多相关《基于论文产出的科研绩效评价.doc（4页珍藏版）》请在冰点文库上搜索。

〔摘要〕引文分析在科研绩效评价和科技管理中发挥着不可或缺的重要作用。

美国汤森路透科技信息集团分别于2001年和2011年推出了2个重要的引文分析工具――基本科学指标（essentialscienceindicators，esi）和incites数据库。

近年来，应用esi和incites数据库进行科研绩效评价越来越普遍，逐渐成为情报学、科学学和科学技术管理研究的热点。

对esi和incites数据库的功能和及其在科研绩效评价中的应用研究进行综述。

　　〔关键词〕基本科学指标；incites数据库；论文产出；科研绩效；科学评价

　　doi：

10.3969/j.issn.1008-0821.2016.03.028

　　〔中图分类号〕g630〔文献标识码〕a〔文章编号〕1008-0821（2016）03-0172-06

　　1esi和incites数据库的功能研究

　　esi数据库已成为当今世界范围内普遍用以评价高校、科研机构、国家和地区学术水平及影响力的重要评价工具之一[6]。

霍艳蓉[5]、王颖鑫[6]、刘雪立[7]和csajbók等[25]针对esi数据库功能和应用，详细阐述其概念、原理、指标、计算及运用。

该数据库收录近10年的论文数据，根据被引频次确定衡量研究绩效的阈值，确定位列全球前1%的研究机构、科学家、研究论文和全球前50%国家/地区以及50%期刊等。

　　21esi在国家和地区评价中的应用

　　针对esi数据库在国家和地区评价中的应用，易勇[26]统计了sci数据库2001年1月1日-2011年4月31日论文数排在前10位的国家进行比较。

从学科相对产出和引文影响两个指标比较我国与美国、德国、日本、英国、法国、加拿大、意大利、西班牙和澳大利亚等国家科研论文产出情况。

我国科研论文总量虽然排在全球第2位，但与科学技术发达国家相比论文学术影响力存在较大差距。

另外，我国研究论文产出学科分布极不均衡，材料科学、化学、工程学和物理学等领域相对产出指标排在10个国家首位，而生物学与生物化学、临床医学、分子生物学和遗传学、神经科学与行为等学科相对产出指标排在10个国家最后，且低于世界平均水平。

这一研究客观评价了我国科学发展水平及其国际地位，能够帮助我们正确认识我国科学研究中存在的问题，为我国各级科研管理部门制定科技发展计划、合理配制研究资源提供了重要参考依据。

　　22esi在机构评价中的应用

　　针对esi数据库功能，以科研机构为研究对象，朱易佳[27]统计sci数据库11年间（1998-2008）的论文数和被引频次，从esi数据库的22个学科领域，以固定被引频次法（列出近10年的年平均被引频次和近10年的总平均被引值）、百分比法（是百分点为被引基准，达到需要的引文量）评价高校和研究机构的科研水平和学术影响力；学科排名依据总被引频次的高低将22个学科进行排序，且以图表方式描述各学科的论文数、引文数、篇均被引数在5年内的变化及趋势；研究前沿运用普赖斯指数法基于5年间多学科领域内被引频次高的论文，通过聚类分析、共引分析列出各学科领域的研究前沿（该部分指标包含论文数、被引频次、篇均被引频次和平均年份）。

综合上述方法，该机构以整个学科的论文数和被引频次作基准线，在分析不同学科间的差异时，需要结合基准线数据进行分析，该方法能在跨学科分析的情况下更加全面客观地反映被评价对象的科研水平和影响力。

鲁伟[28]根据esi数据库2001年至2011年6月30日的论文总量、被引频次、高被引论文和热点论文等数据，分析了我国西部地区高校科研竞争力的现状。

结果显示，我国西部地区10所高校中四川大学论文数和总被引频次最高，兰州大学篇均被引频次最高，10所高校篇均被引频次整体低于我国平均水平。

另外，我国西部地区10所高校高被引论文数共207篇，其中高被引论文产出率仅西北大学和西安交通大学达到了中国平均水平。

热点论文的产出情况是：

四川大学（6篇）、电子科技大学（3篇）、第四军医大学（1篇）、兰州大学（1篇）和西安交通大学（1篇）。

整体来看我国西部地区高校的科研实力还不够强，各高校科研水平极不均衡。

王瑛[29]等对2004-2013年工信部直属的7所高校（哈尔滨工业大学、北京航空航天大学、南京理工大学、哈尔滨工程大学、北京理工大学、西北工业大学和南京航空航天大学）科研实力进行了比较，发现哈尔滨工业大学的论文数、论文总被引频次均领先其他6所高校，哈尔滨工程大学论文数虽然只有哈尔滨工业大学论文数的13%，但论文质量相对较高，其篇均被引频次为648，但依然低于我国科研人员论文被引频次的平均值692次。

这7所高校进入esi国际排名前1%的学科分别是：

化学、工程学、材料科学、数学、物理学、计算机科学和环境生态学等。

各高校进入esi前1%的学科数虽各不相同，但7所高校的化学、工程学和材料科学均入选了esi，哈尔滨工业大学入选学科数最多（7个）。

从各高校的综合排名说明哈尔滨工业大学的科研实力领先于工信部直属高校的其他6所。

于洁[30]等以esi数据库为基础，采用科学计量学指标对中国各高校的科研实力进行了地理分布分析及评价。

根据对论文数、引文数、学科活跃指数和相对影响力等指标对我国东部、中部和西部地区入选esi的高校进行了研究。

东部地区入选esi高校数为40所，中部14所，西部11所。

由此说明我国高校科研水平存在地区差异。

　　这些研究说明，esi数据库是高校和研究机构科研绩效评价的重要工具，能够对不同高校、高校不同学科的研究水平进行客观评价。

另外，可以同世界高水平大学进行比较，统计分析我国高校热点论文、高被引论文的产出量、入选esi学科数等，正确认识我国高校科研水平和差距，对我国现阶段创建世界一流大学和一流学科具有重要的指导价值。

　　23esi在学科评价中的应用

　　24esi在期刊评价中的应用

　　顾东蕾[45]等基于esi数据库对日本、俄罗斯、韩国和中国入选esi数据库的期刊作比较，为制定提升期刊核心竞争力的决策提供依据。

以中、日、俄、韩等四国均为非英语国家，统计其11年间（2003-01-01―2013-12-31）入选esi数据库的期刊（入选标准是期刊被引频次位于相应学科领域前50%），对各期刊论文数、被引频次、篇均被引频次等指标进行比较。

入选esi期刊中，我国共19种（105%）、日本17种（185%）、俄罗斯11种（072%）和韩国13种（046%）。

在esi数据库的22种学科领域中，中、日、俄、韩四国只有2个学科（经济与商业和精神病学与心理学）没有入选前全球前50%的期刊，其余20个学科均有入选。

入选期刊种数、百分比最高的是俄罗斯的空间学科。

　　随着科学计量学在全球科学评价中的广泛应用，基于文献计量学的期刊评价逐渐演变为整个科学评价的基础。

该研究开辟了esi应用研究的先河，从全新的视角为我们提供了一种期刊评价的新方法。

　　25esi在人才评价中的应用

　　tr通过esi数据库对全球近11年（2000-01-01―2010-10-31）化学领域顶尖科学家前100位进行排名[23]。

在这100位科学家中来自美国70位，德国7位，英国4位，加拿大、法国、丹麦、瑞士和南韩各2位，澳大利亚、比利时、瑞典、意大利、以色列、南非、巴西、日本、新加坡各1位。

另外，拥有3个以上top100科学家的机构分别是，麻省理工学院（6位）、斯克里普斯研究所（5位）、加州大学伯克利分校（5位）、哈佛大学（4位）、莱斯大学（4位）、西北大学（4位）、加州理工学院（3位）、加州大学河滨分校（3位）、芝加哥大学（3位）。

肖仙桃[39]等通过esi数据库对全球近11年（1993-2003）地球科学领域顶尖科学家前20位的排名。

石建[41]等通过esi数据库对全球近11年（2000-2010）脑膜炎科学领域顶尖科学家前20位的排名。

　　3incites在科研绩效评价中的应用

　　2011年创建的incites数据库是对esi科学评价功能的重要补充，设置了一些esi数据库中没有的指标，如学科、机构、世界范围内的相对科学评价指标，使科学评价范围更广，极大地丰富和完善了esi的科研绩效评价功能。

　　31incites在科研机构评价中的应用

　　针对incites数据库在科研机构评价中的应用，眼科新进展编辑部[46]在2012年通过该数据库的机构定制数据，检索不同机构研究人员发表的论文及被引频次，列出了2006-2010年我国眼科学sci论文20强（中国大陆高校12所、台湾高校5所和香港3所）和中国大陆眼科学sci论文被引20强，实时跟踪机构的研究产出和影响力。

刘雪立[23]采用该数据库的预置数据，对我国大陆、香港以及台湾地区高校的科研状况进行了研究。

该数据库提供40多个国家2000多所大学、研究机构在各学科领域的综合研究绩效评估指标，其中包括有中国200多所高校、研究机构的论文和引文指标。

在机构评价中发现，论文数与占全球论文总数百分比、被引频次与相对被引用率、篇均被引频次与相对影响力等3对指标的科研机构排序基本一致，因此我们在比较研究某地区科研绩效时，只需要比较其中5个指标就可以全面反映该地区的学术表现和科研水平[23，47]。

　　该数据库创立于2011年，是继esi应用10年之后汤森路透开发的又一个科研绩效评价工具，是对esi数据库的重要补充，提供了多个重要的评价指标，如论文被引率、机构相对影响力、占全球论文数的百分比、相对被引率、综合绩效指标等，能够对全球各高校和科研机构进行对比和分析，找到各自的优势和差距。

　　32incites在学科领域评价中的应用

　　lutzbornmann[48]利用该数据库比较研究了1981-2010年间中国、日本、法国、德国、美国和英国的标准化引用影响力。

结果表明，过去30年内，法国，英国，尤其是德国各学科领域的引用影响值呈显著上升趋势。

美国在这30年间引用影响值一直处于高水平。

发表年份之间有小的影响力差异，美国在工程和科技方面的引用影响值呈增加趋势，但在医学和健康科学以及农业科学方面呈降低趋势。

与美国相似，日本在不同的学科领域趋势也是不同的，但每年的变化很小。

虽然中国论文的引用影响值仍处于相对低的水平（大多数低于世界平均水平），但有上升趋势。

该数据库从3个角度提供了研究国家标准化引用影响力的方法：

（1）一个长期发表时间窗口（1981-2010年）；

（2）主题领域的差异；（3）为获得不同年份国家引文趋势调查结果，允许使用统计程序。

　　何惠芬[49]等利用该数据库比较研究了同济大学声学领域1981-2012年和2008-2012年科研产出的比较及期刊的排名。

董政娥等[50]利用该数据库跟踪监测东华大学在esi中22个学科的热点论文、高被引论文与学科的发展趋势进行相关预测。

胡忠辉等[51]利用该数据库，从引文分析的角度对国内外近11年的部分高校数学、物理学和化学等学科领域的发展情况进行了分析比较，探讨了国内外高校各学科的发展趋势。

王新霞等[52]利用该数据库，采用文献计量方法，对我国数学科学领域近10年（2001-2010）在国际学术影响力，按照论文数、被引频次、排出数学领域前10的国家，确定我国数学科学在国际的地位。

　　lutzbornmann等[53]于2013年针对incites和f1000数据库为我们提供了一个独特的方法研究同行评议评级和文献计量学指标之间的关系。

f1000是生物医学文献发表后同行评议系统。

同行评议性指标被广泛地认为是一种验证文献计量指标的方式。

基于incites数据库提供的7个指标（总被引频次、第二代被引频次、施引文献篇均二代被引频次、期刊相对影响力、学科相对影响力、学科领域百分比、期刊影响因子）分析原始引文计数指标的有效性，选取细胞生物学和免疫学领域的学科为样本。

结果显示，学科领域百分比和f1000评级相关性最高；其他3个指标（总被引频次，第二代被引频次以及学科相对影响力）与评级之间的实际相关性至少能达到中等效应值。

由于标准化指标百分比与学科相对影响力两种评价的相关性最高，在同行评议研究时应该优于其他文献计量学指标。

　　4esi和incites的联合应用

　　incites和esi联合使用这一独特功能，目前尚未被广泛认识。

作为科研管理、情报分析和预测工作者确有必要尽快了解和掌握该方法，对我国各高校不同学科发展水平进行及在全球的位次进行客观评价，并对各高校入选esi的学科进行预测，从而优化科研资源配置，完善科研管理方法，最大程度上发挥科研管理的导向作用。