廣東省科學(xué)技術(shù)成果獎(jiǎng)勵(lì)評(píng)價(jià)指標(biāo)體系研究

吳 丹，王雅文，胡 羚

（1.廣東省科技評(píng)估中心，廣東 廣州 510033；2.廣東省科技廳科技服務(wù)與管理處，廣東 廣州 510033）

廣東省科學(xué)技術(shù)成果獎(jiǎng)勵(lì)評(píng)價(jià)指標(biāo)體系研究

吳 丹1，王雅文2，胡 羚1

（1.廣東省科技評(píng)估中心，廣東 廣州 510033；2.廣東省科技廳科技服務(wù)與管理處，廣東 廣州 510033）

本文根據(jù)廣東省科學(xué)技術(shù)獎(jiǎng)勵(lì)管理工作實(shí)踐經(jīng)驗(yàn)和實(shí)際需要，采用德?tīng)柗品ê蛯哟畏治龇▽?duì)科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系進(jìn)行研究，對(duì)廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系進(jìn)行調(diào)整，并通過(guò)回歸分析，對(duì)廣東省科學(xué)技術(shù)獎(jiǎng)綜合評(píng)價(jià)結(jié)果作了相關(guān)修正。

科學(xué)技術(shù)獎(jiǎng)；評(píng)價(jià)指標(biāo)

Abstract:Based on the practical experience and administrative requirement,the paper studies on the evaluation index of Guangdong provincial scientific and technological achievement awards by using Delphi method and analytic hierarchy process.Besides,the paper modifies the evaluation index after regression analysis.

Key words:scientific and technological awards；evaluation index

科學(xué)技術(shù)成果獎(jiǎng)勵(lì)工作是科技管理工作的重要組成部分，而一個(gè)客觀、公正、公平、合理的科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系的建立則是做好科學(xué)技術(shù)成果獎(jiǎng)勵(lì)工作的重要基礎(chǔ)和前提。為加強(qiáng)科技獎(jiǎng)勵(lì)政策的激勵(lì)和導(dǎo)向作用，對(duì)科技獎(jiǎng)勵(lì)評(píng)價(jià)指標(biāo)體系進(jìn)行系統(tǒng)深入的研究和完善非常重要。

1 科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系研究必要性

制定科學(xué)合理的科技獎(jiǎng)勵(lì)評(píng)價(jià)指標(biāo)是做好科技獎(jiǎng)勵(lì)評(píng)價(jià)工作的基礎(chǔ)和關(guān)鍵?？茖W(xué)合理的評(píng)價(jià)指標(biāo)應(yīng)該依據(jù)科技成果研究特點(diǎn)以及科學(xué)的評(píng)估方法加以制定，這樣才能科學(xué)、客觀、真實(shí)地反映科技成果綜合水平。

科技獎(jiǎng)勵(lì)評(píng)價(jià)指標(biāo)系統(tǒng)研究工作可為科技獎(jiǎng)勵(lì)管理工作宏觀決策提供理論的依據(jù)和科學(xué)的參考。科技獎(jiǎng)勵(lì)是一項(xiàng)政策性強(qiáng)、涉及面廣、十分嚴(yán)肅的工作，其激勵(lì)作用只有在開(kāi)展科技獎(jiǎng)勵(lì)的過(guò)程中遵循正確的評(píng)價(jià)原則才能收到良好的效果，否則，就很難發(fā)揮其激勵(lì)和導(dǎo)向作用?？萍吉?jiǎng)勵(lì)的本質(zhì)是對(duì)科學(xué)家、專(zhuān)家角色的判斷，即對(duì)其科研能力、水平和貢獻(xiàn)大小的承認(rèn)，而根本價(jià)值在于促進(jìn)不斷產(chǎn)生優(yōu)秀成果，并利用這些成果發(fā)展社會(huì)生產(chǎn)力，達(dá)到提高科技進(jìn)步，促進(jìn)社會(huì)進(jìn)步和經(jīng)濟(jì)發(fā)展的目的。

2 科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系研究原則與方法

科技進(jìn)步法、科技獎(jiǎng)勵(lì)條例、科技獎(jiǎng)勵(lì)辦法及科技評(píng)價(jià)辦法等法律法規(guī)的頒布施行，為科技獎(jiǎng)勵(lì)及其評(píng)價(jià)工作提供了法律依據(jù)，社會(huì)指標(biāo)及其體系的研究理論和方法則為科技獎(jiǎng)勵(lì)及其評(píng)價(jià)工作提供了理論和方法上的指導(dǎo)。

科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系的設(shè)置應(yīng)遵循科學(xué)性和可操作性原則、系統(tǒng)優(yōu)化原則、穩(wěn)定性和動(dòng)態(tài)性相結(jié)合的原則、激勵(lì)和導(dǎo)向性原則?？茖W(xué)技術(shù)獎(jiǎng)評(píng)審的目的不是單純?cè)u(píng)出名次及優(yōu)劣的程度，更重要的是引導(dǎo)和鼓勵(lì)被評(píng)價(jià)對(duì)象向社會(huì)需要的方向和目標(biāo)發(fā)展，因此，科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)應(yīng)該能充分體現(xiàn)科技政策、科技發(fā)展戰(zhàn)略要求和社會(huì)發(fā)展的整體目標(biāo)，使科學(xué)技術(shù)研究工作向著有利于社會(huì)科技發(fā)展的正確方向發(fā)展。

根據(jù)目前已有的成熟的科技評(píng)價(jià)理論和方法，依據(jù)《廣東省科學(xué)技術(shù)獎(jiǎng)勵(lì)辦法》及其《實(shí)施細(xì)則》所確立的評(píng)審標(biāo)準(zhǔn)，我們采用德?tīng)柗欠▽?duì)廣東省科技獎(jiǎng)評(píng)價(jià)指標(biāo)進(jìn)行設(shè)置；采用層次分析法并結(jié)合德?tīng)柗欠?，?duì)廣東省科技獎(jiǎng)評(píng)價(jià)指標(biāo)權(quán)重進(jìn)行設(shè)置。

3 廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系的基本構(gòu)成

根據(jù)《廣東省科學(xué)技術(shù)獎(jiǎng)勵(lì)辦法》和《廣東省科學(xué)技術(shù)獎(jiǎng)勵(lì)辦法實(shí)施細(xì)則》中的評(píng)定標(biāo)準(zhǔn)，采用德?tīng)柗品?，我們邀?qǐng)了18位參加過(guò)評(píng)獎(jiǎng)的專(zhuān)家經(jīng)過(guò)3輪咨詢后確定了廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系的基本構(gòu)成，其確定過(guò)程如下：根據(jù)指標(biāo)體系設(shè)置的原則，結(jié)合廣東省科技政策和科技發(fā)展戰(zhàn)略要求和廣東省科技獎(jiǎng)勵(lì)工作實(shí)際，初步設(shè)置省科技獎(jiǎng)評(píng)價(jià)指標(biāo)的基本框架；以問(wèn)卷調(diào)查方式，邀請(qǐng)參加過(guò)獎(jiǎng)勵(lì)評(píng)審的專(zhuān)家在規(guī)定時(shí)間內(nèi)對(duì)指標(biāo)設(shè)置提出修改建議，并對(duì)專(zhuān)家意見(jiàn)加以歸納整理，形成科技獎(jiǎng)評(píng)價(jià)指標(biāo)基本框架體系。廣東省科技獎(jiǎng)評(píng)價(jià)指標(biāo)根據(jù)不同項(xiàng)目類(lèi)型分為三類(lèi)：應(yīng)用技術(shù)類(lèi)、技術(shù)發(fā)明類(lèi)和自然科學(xué)類(lèi)。自然科學(xué)類(lèi)、技術(shù)發(fā)明類(lèi)和應(yīng)用技術(shù)類(lèi)分別確定有3個(gè)一級(jí)指標(biāo)，9個(gè)二級(jí)指標(biāo)（見(jiàn)表1、表2、表3）。

4 廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)權(quán)重的設(shè)置

我們邀請(qǐng)了18位專(zhuān)家對(duì)設(shè)置的評(píng)價(jià)指標(biāo)按重要程度進(jìn)行排序，采用層次分析法對(duì)指標(biāo)權(quán)重進(jìn)行了測(cè)算，最后將18位專(zhuān)家的測(cè)算結(jié)果進(jìn)行算術(shù)平均，得出指標(biāo)權(quán)重值。具體計(jì)算過(guò)程如下［1］：根據(jù)專(zhuān)家重要程度排序按指標(biāo)體系中所確定的層次結(jié)構(gòu)從最高層次指標(biāo)開(kāi)始建立兩兩比較判斷矩陣；將判斷矩陣兩兩比較的重要性結(jié)果量化，給判斷矩陣賦值；進(jìn)行層次指標(biāo)單排序數(shù)值計(jì)算，采用方根法計(jì)算各指標(biāo)的權(quán)重；將所有判斷矩陣的最大特征向量值取平均值，形成每個(gè)判斷矩陣各自相對(duì)的權(quán)重；與上層指標(biāo)相對(duì)權(quán)重相乘，即可得到每個(gè)指標(biāo)的絕對(duì)權(quán)重；每個(gè)專(zhuān)家的咨詢數(shù)據(jù)分析出一組權(quán)重值，對(duì)18個(gè)專(zhuān)家的咨詢數(shù)據(jù)計(jì)算所得的權(quán)重值進(jìn)行算術(shù)平均，得到最終的評(píng)價(jià)指標(biāo)權(quán)重結(jié)果。

5 廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系評(píng)分方法及其修正

廣東省科學(xué)技術(shù)獎(jiǎng)每一個(gè)類(lèi)型項(xiàng)目的各級(jí)評(píng)價(jià)指標(biāo)滿分均為100分，每級(jí)指標(biāo)單項(xiàng)滿分就是權(quán)重分，并按程度大小分5個(gè)分值段，專(zhuān)家對(duì)各個(gè)學(xué)科（專(zhuān)業(yè)）組項(xiàng)目的具體情況分析比較后進(jìn)行打分。

考慮到專(zhuān)家評(píng)分存在的個(gè)體差異性，如有的專(zhuān)家認(rèn)為80分以上就可以建議一等獎(jiǎng)，有的專(zhuān)家認(rèn)為90分以上才能建議一等獎(jiǎng)，這樣就存在一個(gè)常說(shuō)的“手松手緊”的問(wèn)題，為了減少專(zhuān)家評(píng)分的個(gè)體差異對(duì)綜合評(píng)價(jià)結(jié)果的影響，我們引入了 “專(zhuān)家建議等級(jí)”這一評(píng)價(jià)指標(biāo)，對(duì)綜合評(píng)價(jià)結(jié)果進(jìn)行修正。

5.1 “專(zhuān)家建議等級(jí)”對(duì)項(xiàng)目綜合評(píng)分影響的回歸分析

為分析“專(zhuān)家建議等級(jí)”對(duì)項(xiàng)目的綜合評(píng)分是否存在影響及影響程度如何，我們?nèi)∧衬甓?7個(gè)（學(xué)科）專(zhuān)業(yè)評(píng)審組的結(jié)果進(jìn)行回歸分析［2］，以B4組為例（該組項(xiàng)目為n=33個(gè)），每個(gè)項(xiàng)目邀請(qǐng)7個(gè)專(zhuān)家參與評(píng)審。

（1）線性方程的建立。

根據(jù) yi和 xi的數(shù)值，我們分別計(jì)算出 Sxx、Syy、Sxy的值

表1 自然科學(xué)類(lèi)科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系表2 技術(shù)發(fā)明類(lèi)科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系

表3 應(yīng)用技術(shù)類(lèi)科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系

根據(jù)公式：

因此，得到該線性回歸方程為：

（2）線性假設(shè)的顯著性檢驗(yàn)。

我們使用t檢驗(yàn)方法來(lái)進(jìn)行檢驗(yàn)。

根據(jù)公式：

一般取顯著性水平α=0.05，查表得：

根據(jù)計(jì)算結(jié)果，顯然滿足公式：

因此，認(rèn)為線性假設(shè)的回歸效果是顯著的，這說(shuō)明專(zhuān)家的綜合評(píng)價(jià)意見(jiàn)對(duì)項(xiàng)目的綜合評(píng)分存在顯著的線性關(guān)系。

5.2 對(duì)綜合評(píng)價(jià)結(jié)果的修正

由以上回歸分析可知，在科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)過(guò)程中，應(yīng)該引入“專(zhuān)家建議等級(jí)”指標(biāo)來(lái)減少專(zhuān)家個(gè)體差異對(duì)綜合評(píng)價(jià)結(jié)果的影響，從而使科技獎(jiǎng)勵(lì)評(píng)審結(jié)果更加科學(xué)和客觀公正。為此，我們?cè)谑】萍吉?jiǎng)評(píng)價(jià)指標(biāo)體系中增加了“專(zhuān)家建議等級(jí)”的綜合評(píng)價(jià)指標(biāo)，最后根據(jù)項(xiàng)目的專(zhuān)家綜合評(píng)分和專(zhuān)家綜合評(píng)價(jià)等級(jí)兩方面的情況進(jìn)行綜合考慮?？萍吉?jiǎng)的評(píng)審在經(jīng)過(guò)網(wǎng)絡(luò)評(píng)審后還要進(jìn)行會(huì)議評(píng)審，通過(guò)會(huì)議評(píng)審過(guò)程中專(zhuān)家的深入討論和全面了解后再對(duì)項(xiàng)目的評(píng)審結(jié)果進(jìn)行投票表決。投票結(jié)果表明，網(wǎng)絡(luò)評(píng)審過(guò)程中專(zhuān)家的綜合評(píng)價(jià)等級(jí)與會(huì)議評(píng)審過(guò)程中專(zhuān)家投票表決評(píng)出的等級(jí)基本一致。

［1］杜棟，龐慶華，吳炎.現(xiàn)代綜合評(píng)價(jià)方法與案例精選［M］.北京：清華大學(xué)出版社,2001.

［2］盛驟,謝式千,潘承毅.概率論與數(shù)理統(tǒng)計(jì)［M］.北京：高等教育出版社,1997.

（責(zé)任編輯張九慶）

Evaluation Index System of Scientific and Technological Achievement Awards in Guangdong Province

Wu Dan1， Wang Yawen2， Hu Ling1
（1.Guangdong Provincial Science and Technology Evaluating Centre， Guangzhou 510033， China；2.The Service and Administration Office of Guangdong Provincial Science and Technology Commission,Guangzhou 510033， China）

G311

A

廣東省科技廳“廣東省科學(xué)技術(shù)獎(jiǎng)評(píng)價(jià)指標(biāo)體系研究”課題資助（項(xiàng)目編號(hào)：2008A070700008）。

2010-02-04

吳丹（1977-），女，湖北赤壁人，工學(xué)碩士，助理研究員；研究方向：科技評(píng)估與咨詢。