關(guān)于論文集中度評(píng)價(jià)的研究

陳 實(shí)，李東升

（北京師范大學(xué) 地表過程與資源生態(tài)國(guó)家重點(diǎn)實(shí)驗(yàn)室，北京 100875）

國(guó)家重點(diǎn)實(shí)驗(yàn)室是建在大學(xué)和科研院所，代表國(guó)內(nèi)一流研究水平的國(guó)家級(jí)實(shí)驗(yàn)室，是國(guó)家組織高水平基礎(chǔ)研究和應(yīng)用基礎(chǔ)研究基地的典型代表，是國(guó)家科技創(chuàng)新體系的重要組成部分。本文以3個(gè)地學(xué)領(lǐng)域的國(guó)家重點(diǎn)實(shí)驗(yàn)室為例（以下簡(jiǎn)稱為室1、室2和室3），分析了實(shí)驗(yàn)室的SCI論文學(xué)科分布情況和分區(qū)情況，說明優(yōu)秀實(shí)驗(yàn)室不僅有穩(wěn)定的產(chǎn)出，而且論文的集中性強(qiáng)，影響因子高，反映出優(yōu)秀的國(guó)家重點(diǎn)實(shí)驗(yàn)室與普通實(shí)驗(yàn)室間的重要差別。此外，借助于成果分析，也能說明對(duì)于相對(duì)成熟的國(guó)家重點(diǎn)實(shí)驗(yàn)室，多大的規(guī)模和人員梯隊(duì)構(gòu)成更為合理和有效。本文采用的數(shù)據(jù)都是以國(guó)家重點(diǎn)實(shí)驗(yàn)室為第一單位（不含依托單位）正式發(fā)表的SCI（SCIE）論文，使用的是中國(guó)科學(xué)院文獻(xiàn)情報(bào)中心提供的2010年的《JCR期刊影響因子及分區(qū)情況》（不同年份采用的同一分區(qū)表，因此影響因子會(huì)有些許偏差），個(gè)別沒有分區(qū)或沒有影響因子的SCIE論文沒有采用。

1 國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估與成果引證概況

“國(guó)家重點(diǎn)實(shí)驗(yàn)室計(jì)劃”是改革開放后我國(guó)實(shí)施的第一個(gè)從事實(shí)驗(yàn)室研究的基地建設(shè)計(jì)劃[1]，自1984年至2011年底，我國(guó)已建成259個(gè)國(guó)家重點(diǎn)實(shí)驗(yàn)室，涉及化學(xué)、地球科學(xué)、數(shù)理科學(xué)、生命科學(xué)、醫(yī)學(xué)、工程、材料科學(xué)和信息科學(xué)等8個(gè)主要的學(xué)科，對(duì)快速提升我國(guó)基礎(chǔ)研究水平發(fā)揮了重要作用。

然而，隨著國(guó)家重點(diǎn)實(shí)驗(yàn)室數(shù)量的增多和研究水平的提高，許多優(yōu)秀的實(shí)驗(yàn)室各自特色鮮明，難分伯仲。例如，以往國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估規(guī)則中要求優(yōu)秀率達(dá)到15%，但是在2004—2008年的第四輪評(píng)估周期，優(yōu)秀率已高于20%，2010年地學(xué)領(lǐng)域評(píng)估的優(yōu)秀率更是達(dá)到27%[2]，2011年，在生命科學(xué)和醫(yī)學(xué)國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估中，優(yōu)秀率也達(dá)到了23%[3]。即便是優(yōu)秀實(shí)驗(yàn)室和良好實(shí)驗(yàn)室之間的本質(zhì)性區(qū)別也不明顯，評(píng)估分?jǐn)?shù)可能只相差1～2分。

2008年推出新的《國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估規(guī)則》[4]后，國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估更加重視論文質(zhì)量，原則上與5個(gè)代表性成果密切相關(guān)的最多不超過75篇論文（每個(gè)代表性成果最多有15篇成果引證）成為評(píng)判實(shí)驗(yàn)室學(xué)術(shù)水平的主要依據(jù)。

自2008年科技部開始對(duì)國(guó)家重點(diǎn)實(shí)驗(yàn)室給予專項(xiàng)經(jīng)費(fèi)支持，加之為了鼓勵(lì)百花齊放、突出效益，科技部原則上不再明確限制國(guó)家重點(diǎn)實(shí)驗(yàn)室人員數(shù)量。一些實(shí)驗(yàn)室為了報(bào)成果、增加論文數(shù)量，單純地依靠增加實(shí)驗(yàn)室人員規(guī)模或者將各種相關(guān)學(xué)科都籠絡(luò)到一個(gè)實(shí)驗(yàn)室之中，造成了成果“豐碩”的假象，但實(shí)際上人均論文數(shù)量或者成果的專一性、集中性都不夠好。單純依靠專家的現(xiàn)場(chǎng)考證、比較和判斷，對(duì)于客觀評(píng)估實(shí)驗(yàn)室確有難度。尤其是目前國(guó)家重點(diǎn)實(shí)驗(yàn)室已經(jīng)代表了國(guó)內(nèi)學(xué)術(shù)研究的前沿，集中了國(guó)內(nèi)最優(yōu)秀的學(xué)者和專家，但是依照評(píng)估規(guī)則，參評(píng)的國(guó)家重點(diǎn)實(shí)驗(yàn)室為了避嫌，不能派本室學(xué)者參加該領(lǐng)域的評(píng)估工作，造成實(shí)際評(píng)估中一線的、優(yōu)秀的本學(xué)科領(lǐng)域?qū)＜也粔颉Ｒ虼耍黾右恍┒恐笜?biāo)對(duì)實(shí)驗(yàn)室進(jìn)行綜合評(píng)判，無疑有利于專家進(jìn)行現(xiàn)場(chǎng)比較，合理評(píng)分。鄭英姿[5]、姜涵[6]等對(duì)于這方面也有類似的分析。

此外，國(guó)家重點(diǎn)實(shí)驗(yàn)室建設(shè)雖然已近30年，但還有很多問題沒有解決好，更多的是依靠各個(gè)實(shí)驗(yàn)室的建設(shè)實(shí)踐，對(duì)于新建國(guó)家重點(diǎn)實(shí)驗(yàn)室，也非常有必要從優(yōu)秀實(shí)驗(yàn)室管理中取得經(jīng)驗(yàn)，盡快成長(zhǎng)。

2 論文的學(xué)科和分區(qū)分析

取2010、2011年室1作為第一作者單位發(fā)表的SCI論文進(jìn)行分析，得到圖1。

圖1 室1的SCI論文學(xué)科分布與分區(qū)情況

從圖1可以看到：該實(shí)驗(yàn)室是以地學(xué)為主體學(xué)科，60%～70%的SCI論文屬于地學(xué)學(xué)科，環(huán)境學(xué)科論文有所增長(zhǎng)，其他學(xué)科中包括化學(xué)、物理、生物。當(dāng)今的科學(xué)研究工作需要其他學(xué)科的輔助、交叉、互融，需要工程技術(shù)等學(xué)科的支持。圖1還顯示，該實(shí)驗(yàn)室的論文影響因子非常高，以2區(qū)和3區(qū)論文為主（占論文總數(shù)的70%），且2區(qū)論文增勢(shì)明顯。TOP級(jí)論文能達(dá)到30%，說明實(shí)驗(yàn)室在有意識(shí)地提高論文水平。雖然室1每年論文數(shù)量只有50篇左右，但少而精，不鼓勵(lì)發(fā)表低端文章。

室2作為第一作者單位發(fā)表的SCI論文情況如圖2所示。

圖2 室2的SCI論文學(xué)科分布與分區(qū)情況

室2的情況與室1的情況明顯不同，其優(yōu)勢(shì)學(xué)科為工程技術(shù)，是一個(gè)以應(yīng)用研究為主的實(shí)驗(yàn)室，地學(xué)是其另一主要學(xué)科，兩者處于此消彼漲的狀態(tài)。在其他學(xué)科中，物理學(xué)作為輔助學(xué)科不可或缺，這也與實(shí)驗(yàn)室的性質(zhì)相吻合。因?yàn)樵搶?shí)驗(yàn)室以應(yīng)用研究為主，其論文的影響因子偏低，3區(qū)和4區(qū)的論文近90%。因?yàn)楣こ碳夹g(shù)（包括遙感科學(xué)）沒有1區(qū)期刊，所以該實(shí)驗(yàn)室沒有1區(qū)論文，一年中只有1～2篇Top級(jí)論文。

室3取的是兩個(gè)評(píng)估年度中2～3年的論文總數(shù)，目的是增加樣本數(shù)量，提高數(shù)據(jù)分析的可靠性。從學(xué)科看，環(huán)境科學(xué)、地學(xué)是該實(shí)驗(yàn)室成果比較集中的2個(gè)學(xué)科，發(fā)表SCI論文約占54%（見圖3）。所反映出的問題有以下幾方面：

圖3 室3的SCI論文學(xué)科分布與分區(qū)情況

（1）地學(xué)成果不突出，作為優(yōu)勢(shì)學(xué)科的地位也不明顯；

（2）所發(fā)表的SCI論文中，環(huán)境科學(xué)約占30%，農(nóng)林科學(xué)和工程技術(shù)在2個(gè)評(píng)估周期中此消彼漲，最多均接近20%，而且以生物學(xué)為主體的其他學(xué)科（包括綜合類）也達(dá)到了近20%，反映該實(shí)驗(yàn)室的學(xué)科方向不十分明確，也不夠穩(wěn)定，論文的集中度不高。

從論文分區(qū)情況看，該實(shí)驗(yàn)室以低端論文為主，3區(qū)、4區(qū)的SCI論文約占65%。在新的評(píng)估年度中，雖然2區(qū)、3區(qū)論文有所增加，4區(qū)論文有所減少，但是1區(qū)論文下降近8個(gè)百分點(diǎn)，致使TOP級(jí)論文降低了14%。造成這種情況可能有2種原因：一是高水平論文減少了，二是低水平論文增多了。對(duì)于后一種情況，很顯然不能單純地看論文的數(shù)量。

3 國(guó)家重點(diǎn)實(shí)驗(yàn)室規(guī)模分析

以上SCI論文的學(xué)科和分區(qū)情況涉及到一個(gè)現(xiàn)實(shí)問題，也是很多新建實(shí)驗(yàn)室一直思考的問題，就是實(shí)驗(yàn)室的規(guī)模以多大為宜。目前，科技部在實(shí)驗(yàn)室的建設(shè)規(guī)模上沒有特別明確的要求，在《國(guó)家重點(diǎn)實(shí)驗(yàn)室建設(shè)與運(yùn)行管理辦法》[7]中也沒有規(guī)定。從1984年國(guó)家重點(diǎn)實(shí)驗(yàn)室開始建設(shè)起，就提倡“開放、流動(dòng)、聯(lián)合、競(jìng)爭(zhēng)”，因此實(shí)驗(yàn)室的規(guī)模可大可小，鼓勵(lì)開放和流動(dòng)。新的《國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估規(guī)則》更加強(qiáng)調(diào)科研成果的質(zhì)量，而不再簡(jiǎn)單地計(jì)算數(shù)量。目前，全國(guó)國(guó)家重點(diǎn)實(shí)驗(yàn)室已經(jīng)有259個(gè)，競(jìng)爭(zhēng)也很激烈，實(shí)驗(yàn)室必須保持一定的規(guī)模，擁有一個(gè)相對(duì)穩(wěn)定的研究團(tuán)隊(duì)，才能保證科研成果的持續(xù)性、系統(tǒng)性和集成性，才能應(yīng)對(duì)激烈的競(jìng)爭(zhēng)。

室1的固定成員并不多，大約只有26人（其中有25%的新生力量）。6年內(nèi)，固定成員發(fā)表了165篇SCI論文，占實(shí)驗(yàn)室SCI論文總數(shù)的75%，其中的核心成員（年均發(fā)表論文超過1篇）有12人，人均每年發(fā)表SCI論文1.8篇，占固定人員發(fā)表論文總數(shù)的79%、占實(shí)驗(yàn)室SCI論文總數(shù)的59%。這些數(shù)據(jù)直接反映了室1這個(gè)以基礎(chǔ)研究見長(zhǎng)的實(shí)驗(yàn)室，因?yàn)橛羞@樣一批核心成員，有著長(zhǎng)期穩(wěn)定的科研方向，其論文不僅影響因子高，而且集中度好。此外，實(shí)驗(yàn)室充分體現(xiàn)了開放性和流動(dòng)性，大約有25%的SCI論文是由學(xué)生或開放課題承擔(dān)者等非固定人員發(fā)表的，平均每年發(fā)表8～15篇的第一作者單位論文。

室2的固定人員達(dá)到46人（忽略6年間退出的成員），其中94%的成果都由固定人員產(chǎn)出，只有6%的成果由非固定人員提供。但是6年間只發(fā)表1篇SCI論文的人員占35%，發(fā)表2～5篇的占41%，發(fā)表6篇以上（含6篇）只占24%。與“室1”類似，有大約11人為實(shí)驗(yàn)室的核心成員，發(fā)表SCI論文占固定人員論文數(shù)的61%、占全實(shí)驗(yàn)室的57%。在論文影響因子分析中發(fā)現(xiàn)，室2的SCI論文影響因子并不高。從學(xué)科類別上分析，該實(shí)驗(yàn)室以應(yīng)用研究見長(zhǎng)，事實(shí)是“室2”差不多每年還會(huì)發(fā)表90篇左右的EI論文，且論文作者也以固定成員為主，說明該實(shí)驗(yàn)室確實(shí)與“室1”有不同的特點(diǎn)和研究方向，考評(píng)時(shí)不能單純地只看基礎(chǔ)研究成果，要綜合考慮應(yīng)用研究和社會(huì)服務(wù)情況。

室3在上個(gè)評(píng)估年度不到3年時(shí)間中發(fā)表了72篇第一作者單位的SCI論文，固定人員約為31人，人均發(fā)表論文1篇；在本評(píng)估年度，第一作者單位SCI論文總量增加到115篇，但新成員也增加了近一倍，大約有一半的論文由新成員發(fā)表，其中不包括學(xué)生和開放課題貢獻(xiàn)的SCI論文。無論是新成員還是老成員，其論文產(chǎn)出年均不足1篇。從TOP級(jí)論文的學(xué)科領(lǐng)域分布看，2個(gè)評(píng)估年度都是以地學(xué)為主。需要注意的是，在2個(gè)評(píng)估年度中，室3發(fā)表TOP論文的作者幾乎完全不同，說明這些作者的工作延續(xù)性有待考量，也說明實(shí)驗(yàn)室沒有特別優(yōu)勢(shì)的學(xué)科和研究方向，工作還比較分散，隨機(jī)性較大。

4 結(jié)論

按工作性質(zhì)劃分，國(guó)家重點(diǎn)實(shí)驗(yàn)室可以分為基礎(chǔ)研究實(shí)驗(yàn)室和應(yīng)用基礎(chǔ)研究實(shí)驗(yàn)室，不同類別和性質(zhì)的實(shí)驗(yàn)室不能采用同一種評(píng)價(jià)方式。尤其是以應(yīng)用基礎(chǔ)研究為主的實(shí)驗(yàn)室，還要輔助考慮其應(yīng)用成果情況以及社會(huì)服務(wù)、成果轉(zhuǎn)化情況。但是，不論何種類型和性質(zhì)的國(guó)家重點(diǎn)實(shí)驗(yàn)室，要保持一定的成果產(chǎn)出和較高的研究水平，并不需要太大的規(guī)模，其核心成員大約只需10人左右，但是這些核心成員把握了實(shí)驗(yàn)室主要的研究方向，不僅成果相對(duì)集中，數(shù)量也有保障（貢獻(xiàn)了60%的成果）。這樣一支核心隊(duì)伍的建設(shè)應(yīng)該是實(shí)驗(yàn)室隊(duì)伍建設(shè)的重心。

實(shí)驗(yàn)室核心隊(duì)伍的建設(shè)不可能一蹴而就，需要實(shí)驗(yàn)室能有所為、有所不為，進(jìn)行合理選擇和長(zhǎng)期培養(yǎng)。“室1”就是這樣一個(gè)典型代表。它作為一個(gè)有20多年建設(shè)歷史的國(guó)家重點(diǎn)實(shí)驗(yàn)室，一直保持著“優(yōu)秀”的稱號(hào)，而且科研成果質(zhì)量越來越高。

除了保證核心團(tuán)隊(duì)外，實(shí)驗(yàn)室也需要新生力量才能長(zhǎng)期成長(zhǎng)。在優(yōu)秀實(shí)驗(yàn)室中，這些新生力量是經(jīng)過一定篩選的。此外，一定要發(fā)揮學(xué)生、尤其與國(guó)外研究機(jī)構(gòu)聯(lián)合培養(yǎng)的學(xué)生的作用以及通過開放課題開展合作研究的作用，這一點(diǎn)室1也做得比較好，大約總能保持25%左右的論文是非固定人員發(fā)表的。聯(lián)合培養(yǎng)學(xué)生也許目前不是以實(shí)驗(yàn)室為第一作者單位發(fā)表論文，但是他們回國(guó)后會(huì)成為實(shí)驗(yàn)室的新生力量，也能快速出成果，出高水平成果。

在這一方面，室2和室3做得顯然不夠，SCI論文基本是依靠固定成員完成的，室3只有17%的成果是由學(xué)生和開放課題提供的，室2則更低。因此，如果固定成員的人均產(chǎn)出不高，就只能增加實(shí)驗(yàn)室規(guī)模，必然造成研究方向分散、高水平論文少、學(xué)術(shù)帶頭人不突出且不穩(wěn)定的狀況。

但是，任何事物都有一個(gè)成長(zhǎng)和成熟的過程，需要在這些問題中理清思路，學(xué)習(xí)優(yōu)秀實(shí)驗(yàn)室的經(jīng)驗(yàn)，逐步改進(jìn)。首先，要明確實(shí)驗(yàn)室的定位是基礎(chǔ)研究還是應(yīng)用基礎(chǔ)研究，強(qiáng)項(xiàng)在哪里；其次，在科學(xué)目標(biāo)下建立和穩(wěn)定一支核心研究隊(duì)伍，及早開始引進(jìn)和培養(yǎng)，在此基礎(chǔ)上注重開展廣泛的國(guó)際交流與合作，進(jìn)一步促進(jìn)研究水平的提升。

在當(dāng)前的國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估中，合理地采用論文集中度評(píng)價(jià)，可以幫助專家和管理人員認(rèn)識(shí)實(shí)驗(yàn)室的性質(zhì)，了解實(shí)驗(yàn)室的主要研究方向，評(píng)判成果的集中度和系統(tǒng)性，并間接地評(píng)價(jià)人員的產(chǎn)出效率和成果的學(xué)術(shù)水平。論文集中度評(píng)價(jià)是一個(gè)比較客觀的參考指標(biāo)，同時(shí)各實(shí)驗(yàn)室也可以通過論文的集中度評(píng)價(jià)，更清晰地認(rèn)識(shí)到與優(yōu)秀實(shí)驗(yàn)室間的差距和問題所在，從而更加明確實(shí)驗(yàn)室短期和長(zhǎng)期的努力方向。

（References）

[1]陳實(shí).中國(guó)國(guó)家重點(diǎn)實(shí)驗(yàn)室管理制度的演變與創(chuàng)新[M].北京：冶金工業(yè)出版社，2011.

[2]科學(xué)技術(shù)部.關(guān)于發(fā)布2010年數(shù)理和地學(xué)領(lǐng)域國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估結(jié)果的通知[EB／OL].（2010-10-13）.http：／／www.most.gov.cn／tztg／201010／t20101013＿82606.htm.

[3]國(guó)家科技部.關(guān)于發(fā)布2011年生物科學(xué)領(lǐng)域和醫(yī)學(xué)科學(xué)領(lǐng)域國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估結(jié)果的通知（國(guó)科發(fā)基〔2011〕274號(hào)）[EB／OL].（2011-07-19）.http：／／www.most.gov.cn／tztg／201107／t20110719＿88350.htm.

[4]科學(xué)技術(shù)部.國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估規(guī)則[EB／OL].（2008-12-31）.[2012-08-08].http：／／www.most.gov.cn／fggw／zfwj／zfwj2008／200901／P020090104361129685545.pdf

[5]鄭英姿.論文產(chǎn)出分析在國(guó)家重點(diǎn)實(shí)驗(yàn)室評(píng)估中的應(yīng)用：以三個(gè)物理類國(guó)家重點(diǎn)實(shí)驗(yàn)室論文產(chǎn)出分析為例[J].北京：科學(xué)學(xué)研究，2011，29（11）：1638-1642.

[6]姜涵.國(guó)家重點(diǎn)實(shí)驗(yàn)室H指數(shù)與H指數(shù)的人員貢獻(xiàn)Q率[J].科學(xué)學(xué)與科學(xué)技術(shù)管理，2009（9）：188-190.

[7]科學(xué)技術(shù)部.國(guó)家重點(diǎn)實(shí)驗(yàn)室建設(shè)與運(yùn)行管理辦法[EB／OL].（2008 -09-11）.http：／／www.most.gov.cn／fggw／zfwj／zfwj2008／200810／t20081017＿64389.htm