摘 要: 《科學(xué)引文索引》(SCI)、《工程索引》(EI)、《科技會議錄索引》(ISTP)和《中國科技論文統(tǒng)計(jì)與引文分析數(shù)據(jù)庫》(CSTPC)是國際上廣泛承認(rèn)的、比較權(quán)威和相對客觀的科研成果評價(jià)工具。它們在科研資源配置、成果量化和人才培養(yǎng)方面具有積極作用,但在其評價(jià)過程中也存在重視文章數(shù)量而忽略文章引用率等缺點(diǎn)。為此,高??蒲谐晒u價(jià)應(yīng)堅(jiān)持各學(xué)科間同類相比;注重質(zhì)量評估;將SCI、EI、ISTP納入我國的科研綜合評價(jià)體系,并構(gòu)建和完善適應(yīng)我國的獨(dú)立科研成果評價(jià)體系,以此來提高高??蒲泄芾硭?。
關(guān)鍵詞: 科學(xué)成果; 評價(jià)工具; 高校; 科研管理
中圖分類號: G311文獻(xiàn)標(biāo)識碼: A文章編號: 1673-8381(2007)06-0068-04
收稿日期: 2007-09-18
作者簡介: 祝 瑞(1975-),女,陜西西安人,講師,工程學(xué)碩士,從事計(jì)算機(jī)應(yīng)用研究。
李 輝(1958-),男,陜西西安人,副教授,從事計(jì)算機(jī)網(wǎng)絡(luò)研究。
科學(xué)引文索引(Science Citation Index, SCI)、工程索引(Engineering Index,EI)和科技會議錄索引(Index of Scientific Technical Proceedings,ISTP)是三種國際上頗具影響力的檢索系統(tǒng),中國科技論文統(tǒng)計(jì)與引文分析數(shù)據(jù)庫(Chinese science and technology paper and citation database, CSTPC)則是檢索我國國內(nèi)科技論文的有力工具。SCI收錄了世界各國的科學(xué)論文和綜合性工程技術(shù)論文, EI和ISTP側(cè)重報(bào)道專業(yè)性較強(qiáng)的工程技術(shù)方面的文獻(xiàn),而CSTPC數(shù)據(jù)則來源于國內(nèi)各專業(yè)領(lǐng)域的科技核心期刊。通過對來自以上檢索工具的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析可以比較全面、系統(tǒng)地評價(jià)高等學(xué)校的研究水平以利于職能部門有針對性地指導(dǎo)科研,提高科研管理水平[1]。
中國科學(xué)技術(shù)信息研究所受國家科技部的委托從1987年開始每年對我國科技人員發(fā)表的國際、國內(nèi)論文數(shù)量和被引用情況依據(jù)上述檢索系統(tǒng)進(jìn)行統(tǒng)計(jì)分析和排名,并予以公布。這一措施被各高??蒲泄芾聿块T廣泛認(rèn)可并有效地促進(jìn)了我國高水平科技論文的產(chǎn)出和高層次人才的培養(yǎng)。但在具體實(shí)施過程中也有許多不盡如人意的地方,如過分強(qiáng)調(diào)SCI文章數(shù)量、文章引用率偏低和偽造科研數(shù)據(jù)等。本文通過對我國科技論文的數(shù)量、分布和各研究單位獲基金資助情況進(jìn)行分析,指出了上述科研評價(jià)工具的優(yōu)勢與不足,提出了合理運(yùn)用評價(jià)工具促進(jìn)高??蒲兴桨l(fā)展的策略,并建議構(gòu)建我國自己的科研成果評價(jià)體系。
一、評價(jià)工具簡介
目前的科研評價(jià)數(shù)據(jù)主要是對來自以下四種著名的文獻(xiàn)檢索工具的數(shù)據(jù)進(jìn)行比較分析。這四種檢索工具分別是SCI、EI、ISTP和CSTPC。
SCI是由美國科學(xué)情報(bào)研究所出版的一部期刊文獻(xiàn)檢索工具,收錄全球數(shù)、理、化、農(nóng)、林、醫(yī)、生命科學(xué)、天文、地理、環(huán)境、材料、工程技術(shù)等自然科學(xué)核心期刊約3 500種;擴(kuò)展版收錄期刊達(dá)5 800余種。科研機(jī)構(gòu)被SCI收錄的論文總量可反映出整個(gè)學(xué)術(shù)團(tuán)體的研究水平?!犊茖W(xué)期刊引用報(bào)告》為包括SCI收錄的3 500種期刊在內(nèi)的4 700種期刊定義了影響因子,論文作者可根據(jù)期刊的影響因子排名決定投稿方向[2]。
EI是美國工程信息公司出版的工程技術(shù)類綜合性檢索工具。EI選用世界上工程技術(shù)類期刊2 000余種,收錄文獻(xiàn)幾乎涉及工程技術(shù)各個(gè)領(lǐng)域。具有綜合性強(qiáng)、資料來源廣、地理覆蓋面廣、報(bào)道量大、質(zhì)量高、權(quán)威性強(qiáng)等特點(diǎn)[3]。
ISTP由美國科學(xué)情報(bào)學(xué)會編輯出版,會議錄收錄生命科學(xué)、物理與化學(xué)科學(xué)、農(nóng)業(yè)、生物和環(huán)境科學(xué)、工程技術(shù)和應(yīng)用科學(xué)等學(xué)科,其中工程技術(shù)與應(yīng)用科學(xué)類文獻(xiàn)約占35%[4]。
CSTPC全部數(shù)據(jù)來源于國內(nèi)1 600多種科技類核心期刊以及國家科技部年度發(fā)布的科技論文與引文的統(tǒng)計(jì)結(jié)果,是反映中文科技文獻(xiàn)的重要檢索工具。
二、我國科技論文的評估情況
中國科學(xué)技術(shù)信息研究所運(yùn)用以上評價(jià)工具每年末對上一年我國科技論文發(fā)表情況進(jìn)行評估。本文對2005年度數(shù)據(jù)進(jìn)行分析,并將各單位獲國家自然科學(xué)基金資助情況加以比較。
統(tǒng)計(jì)結(jié)果顯示在2005年SCI、EI、ISTP收錄的我國科技論文共有153 374篇,比2004年增加42 018篇,占世界論文總數(shù)的69%,排名在第四位,較2004年上升了一位。我國各年度發(fā)表國際論文的數(shù)量如表1所示:

主要反映基礎(chǔ)研究狀況的SCI所收錄的中國論文為68 226篇,比2004年增加了10 849篇,排名居第五。在2005年被引用論文數(shù)量從2004年的32 566篇增加到51 223篇,被引用次數(shù)由75 234次增加到133 417次。在反映工程科學(xué)情況的EI收錄期刊論文中,中國論文為54 362篇,比2004年增長了623%,僅次于美國排名世界第2位。2005年我國科技人員共參加了在72個(gè)國家和地區(qū)召開的2 148個(gè)國際會議,ISTP收錄了我國發(fā)表的論文30 786篇,目前世界排名居第五。2005年,我國科技人員在國內(nèi)科技核心期刊上發(fā)表的論文數(shù)量也有顯著增加,共發(fā)表論文355 070篇,比上一年增加了80 466篇。
從統(tǒng)計(jì)數(shù)據(jù)看,高等院校目前依然是我國高水平科技論文的主要產(chǎn)出單位。我們以SCI和EI收錄論文數(shù)為標(biāo)準(zhǔn)對前十名的發(fā)表單位排序如下(見表2、表3):
我們同時(shí)對2005年度各單位獲國家自然科學(xué)基金資助情況按資助金額和項(xiàng)目數(shù)同時(shí)排名(見表4)。2005年獲基金資助前10名單位當(dāng)年SCI論文數(shù)排名前10名內(nèi)有6所,其余4所也位于前15名內(nèi)。可見科技論文的數(shù)量和質(zhì)量有利于申請到更多的科研基金資助,而后者可利于科研持續(xù)發(fā)展,最終形成良性循環(huán),促進(jìn)高??蒲兴降奶岣吆腿瞬排囵B(yǎng)[5,6]。

三、現(xiàn)行評價(jià)工具的優(yōu)缺點(diǎn)
以上評價(jià)工具較好地解決了如何評估科研成果、效率以及科技人員水平等一系列問題,因此多數(shù)科研管理部門將其作為重要的評價(jià)工具。
該方法的優(yōu)點(diǎn)在于:(1)由對科研的“定性”評價(jià)轉(zhuǎn)為“定性加定量”評價(jià)。以往科研評價(jià)手段多采用定性,但隨著社會關(guān)系的復(fù)雜化,定性評價(jià)往往被人為因素削弱。而采用來自上述評價(jià)工具的引文數(shù)據(jù)則是一種較為客觀的方法。進(jìn)入引文數(shù)據(jù)庫的稿件均已通過國際同行評議,同時(shí)上述引文數(shù)據(jù)還對刊載文章的期刊進(jìn)行影響因子評分。因此對科研成果實(shí)際上是一種“定性加定量”評價(jià)。(2)對高??蒲衅鸬搅送苿幼饔?。上述引文數(shù)據(jù)庫有著嚴(yán)格的期刊納入和刪除標(biāo)準(zhǔn),保證了入選論文能反映本專業(yè)當(dāng)前的科研動態(tài)和最新研究成果。引導(dǎo)科技人員在選擇科研方向時(shí)抓住本領(lǐng)域最前沿的東西;同時(shí)促進(jìn)研究論文與國際同行在更廣闊的范圍內(nèi)進(jìn)行交流,有利于高校科研水平的提高。同時(shí)各高校依據(jù)公布數(shù)據(jù)每年進(jìn)行大學(xué)內(nèi)部的科研獎勵(lì)和學(xué)科發(fā)展的規(guī)劃,有力地促進(jìn)了中青年人才的培養(yǎng)。使一批真正能做出國際先進(jìn)水平研究的人才脫穎而出。(3)引導(dǎo)國家進(jìn)行資源合理配置。目前國家自然科學(xué)基金大部分投入采用政府行政撥款的方式。盡管國家投入了大量財(cái)力,但還遠(yuǎn)不能滿足需求,科研資源優(yōu)化配置問題日趨嚴(yán)重。目前國家基金委運(yùn)用同行評議方法遴選優(yōu)秀項(xiàng)目予以支持。項(xiàng)目申請一般都要經(jīng)過同行通訊評議和專家評審組會議兩級評審。在同行評議當(dāng)中,申請者既往發(fā)表的高水平研究論文是評價(jià)其科研能力的重要環(huán)節(jié)。通常擁有SCI、EI、ISTP檢索文章的申請人會獲得較高的支持率。從本文的統(tǒng)計(jì)分析看,高水平科研論文在國家自然科學(xué)基金資源配置過程中起重要作用[7]。
以上評價(jià)工具在實(shí)際運(yùn)用中也突顯出以下弊端:(1)國內(nèi)高水平科技期刊稿源萎縮。由于我國科技期刊被上述引文數(shù)據(jù)庫收錄有限,而大多數(shù)作者更愿意將論文投往國際期刊以便與更多的國際同行交流,這勢必造成國內(nèi)科技期刊高水平稿源萎縮,愈發(fā)不利于入選為上述數(shù)據(jù)庫的源期刊。(2)在某些部門SCI、EI、ISTP論文數(shù)量淪為政績工程,各單位盲目攀比,造成急功近利的短期科研行為,為了發(fā)表文章而寫,片面追求數(shù)量,甚至造假;(3)文章引用率偏低:2004年我國作者發(fā)表的國際論文中累積被引用次數(shù)超過100 次的僅有129 篇論文,論文被引用次數(shù)排在世界第14 位。2005年累積被引用次數(shù)超過100 次的有163 篇論文,論文被引用次數(shù)排在世界第13 位。可見論文的質(zhì)量有待提高[8]。
四、合理運(yùn)用評價(jià)工具的具體措施
在科研部門的管理實(shí)踐中,確實(shí)存在簡單化使用上述評價(jià)工具的問題。但要認(rèn)識到,我國是發(fā)展中國家,總體科技實(shí)力比較落后,而學(xué)術(shù)發(fā)展總要經(jīng)歷一個(gè)由量變到質(zhì)變的過程。在這個(gè)過程中某些單位和個(gè)人急功近利,過于浮躁是在所難免的。這就需要科技主管部門積極引導(dǎo),但如果因?yàn)榇嬖谶@樣一些問題就從根本上否定上述評價(jià)工具則屬于因噎廢食。至少目前還無法找到一個(gè)更為客觀、公正、科學(xué)的評價(jià)工具來替代現(xiàn)行評價(jià)體系。因此合理運(yùn)用評價(jià)工具顯得尤為重要,在使用中要注意以下幾方面:
1由于學(xué)科性質(zhì)和學(xué)科規(guī)模的不同, 不同學(xué)科的論文數(shù)和期刊影響因子存在很大的差異。例如物理、生化方面的某一新的進(jìn)展或發(fā)現(xiàn)常常引起國際同行的注意,結(jié)果會多次被引用;但是植物學(xué)或地理學(xué)等因?yàn)檠芯繉ο笥兄^強(qiáng)的地域性,論文被同行引用的較少。上述引文統(tǒng)計(jì)數(shù)據(jù)不宜在不同學(xué)科間直接比較。當(dāng)用其宏觀地評價(jià)一個(gè)國家、一所高校、一個(gè)研究機(jī)構(gòu)的基礎(chǔ)研究實(shí)力有著不可替代的作用,但用于較小范圍或研究人員個(gè)體評價(jià)則容易產(chǎn)生偏差, 甚至無法比較。因此按照學(xué)科分類并按影響因子高低對各專業(yè)的期刊進(jìn)行分區(qū)分級更加有利于科學(xué)的評價(jià)高校某專業(yè)的科研成績。同時(shí)對不同科研機(jī)構(gòu)之間進(jìn)行評比時(shí),一定要堅(jiān)持同類相比原則,才能找出差距,具有借鑒意義。目前有國內(nèi)部分高校已經(jīng)參照期刊的影響因子和該雜志在本領(lǐng)域內(nèi)的知名度對期刊進(jìn)行分級,指導(dǎo)科技人員選擇期刊,發(fā)表論文。
2從重?cái)?shù)量轉(zhuǎn)變到重質(zhì)量。目前我國大學(xué)科研評價(jià)存在過分強(qiáng)調(diào)數(shù)量的傾向。國家每年末都公布上一年度各大學(xué)被SCI、EI、ISTP等收錄的文章數(shù)量及排名,這一措施促進(jìn)了中國大學(xué)科研水平與國際接軌,但同時(shí)也造成只重論文數(shù)量而忽視科研論文水平的傾向。2002年國家發(fā)布的《關(guān)于發(fā)揮高等學(xué)??萍紕?chuàng)新作用的若干意見》指出,要合理利用SCI在科研評價(jià)方面的作用,從重視科研論文的數(shù)量向重視論文的質(zhì)量轉(zhuǎn)變,從只重視論文向論文與專利并重轉(zhuǎn)變,取消政府導(dǎo)向的SCI排名。因此,我們要對現(xiàn)行的文獻(xiàn)計(jì)量方法進(jìn)一步優(yōu)化,使其更加合理規(guī)范,同時(shí)與同行評議的方法相結(jié)合,使評價(jià)既重?cái)?shù)量又重質(zhì)量[9]。
3將SCI、EI、ISTP納入適合我國的科研綜合評價(jià)體系。對科研的評價(jià)和指導(dǎo)是一個(gè)系統(tǒng)工程,決不是簡單地通過SCI、EI、ISTP數(shù)據(jù)庫的統(tǒng)計(jì)數(shù)據(jù)就可以完成的。由于上述數(shù)據(jù)庫收錄的中國期刊有限并且以英語為主,因此在使用該數(shù)據(jù)庫進(jìn)行評價(jià)時(shí)還應(yīng)該充分考慮我國自己主辦的中文學(xué)術(shù)期刊發(fā)表論文的價(jià)值;由于受文獻(xiàn)計(jì)量學(xué)理論的局限性、國際數(shù)據(jù)采集的不完整性以及統(tǒng)計(jì)評價(jià)方法的不全面性,使用SCI、EI、ISTP評價(jià)科研也會存在偏差。因此有必要將同行專家評審和引文計(jì)量相結(jié)合,同時(shí)參考相關(guān)的中國論文統(tǒng)計(jì)源期刊數(shù)據(jù)庫綜合評定, 更有利于客觀、公正地評價(jià)科研。建立中國自己的定量與定性相結(jié)合的評價(jià)系統(tǒng)是我們當(dāng)前的迫切需求。我們需要結(jié)合我國科技發(fā)展的實(shí)際狀況,建立能滿足國家大型科技計(jì)劃的評價(jià)需求的檢索評價(jià)系統(tǒng),根據(jù)主流學(xué)科、前沿學(xué)科、交叉學(xué)科和瀕危學(xué)科的發(fā)展情況,結(jié)合學(xué)科本身的特殊性和存在的差異,提出切合實(shí)際并便于操作的指標(biāo),建立中國式評價(jià)系統(tǒng)。
總之,要根據(jù)不同科研性質(zhì)、不同研究領(lǐng)域來制定科學(xué)合理的科研評價(jià)指標(biāo)體系,簡化科研評價(jià)環(huán)節(jié),適當(dāng)延長評價(jià)周期,使評價(jià)工作與科研工作的規(guī)律和特點(diǎn)相適應(yīng),改變科研評價(jià)工作中急功近利的傾向,合理利用文獻(xiàn)計(jì)量方法,逐步培育和依托社會中介組織開展評價(jià)活動,建立獨(dú)立的社會化科研評價(jià)體系。[LL]
參考文獻(xiàn)
[1] 楊永清 論SCI在基礎(chǔ)科學(xué)研究評價(jià)中的作用[J]江南大學(xué)學(xué)報(bào), 2005, 3(3):113-115
[2] 韓麗風(fēng), 劉蜀仁 從SCI看國際檢索刊物的發(fā)展[J]情報(bào)理論與實(shí)踐, 1999, 22(3):183-185
[3] 胡 涌 SCI與EI的比較研究[J]北京林業(yè)大學(xué)學(xué)報(bào), 2002, 1(1):73-76
[4] 王靜穩(wěn), 陳春英 ISTP的檢索方法及實(shí)例[J]河北工業(yè)科技, 2002, 19(6):58-60
[5] 中國科學(xué)技術(shù)信息研究所 2004年中國科技論文統(tǒng)計(jì)與分析[R] 北京: 中國科學(xué)技術(shù)信息研究所, 2005
[6] 中國科學(xué)技術(shù)信息研究所 2005年中國科技論文統(tǒng)計(jì)與分析[R] 北京: 中國科學(xué)技術(shù)信息研究所, 2006
[7] 吳天松, 文亞峰 促進(jìn)高校發(fā)展的科技政策及管理辦法研究[J]科研管理, 2002, 23(5):130-136
[8] 王曉莉, 葉良均SCI作為科研成果評價(jià)標(biāo)準(zhǔn)的局限性研究[J]自然辯證法研究, 2001, 17(11):41-47
[9] 朱 蓓,王 穎,戎文慧客觀看待利用SCI進(jìn)行科研成果評價(jià)[J]中華醫(yī)學(xué)圖書情報(bào)雜志, 2003, 12(2):5-6
(責(zé)任編輯 張向鳳)