汪靜 李興江 楊友文 周甄武
摘要隨著科教興國戰略的實施和國家近年來對科技投入的增加,我國高等院校的科研實力不斷增強,但是隨之而來的科研績效評價問題也日益突出。評價指標多而雜、評價標準不科學以及人為主觀因素干擾等諸多問題,已經嚴重影響了高校作為科技創新重要力量的發揮。針對這一現狀,本文在分析了高校科研工作的特點和運行機制的基礎上,應用德爾菲法建構出一套合理可靠的評價體系,為高校科研績效評價提供了一種新的方向。
關鍵詞德爾菲法高等院校科研績效評價指標體系
0 引言
績效評價體系是以實際的業績效果為考核評價依據的價值衡量體系,可廣泛地應用于現代社會行政、教育、經濟等領域,從而對被評價對象做出合理、量化的評定。①近年來,隨著我國高校科研實力的不斷提升,科研績效評價也逐步被引入到高校中來。
我國高校的科研績效評價體系起步于20 世紀70 年代,大致經過了行政評價、同行評價、指標量化評價和國際科研計量評價四個階段。②該體系評價結果不但是衡量高校科研水平、教師科研能力的重要指標,也是教師職稱評審、崗位評聘和福利津貼的主要標準。雖然該體系對教師在學術上的科學發展能起到促進和激勵作用,但是正是由于諸多利益的驅動,近年來高校內部對科研績效評價的合理性和公正性的質疑聲也愈來愈強烈,評價指標多而雜、評價標準不科學以及人為主觀因素干擾等諸多問題,已經嚴重影響了高校作為科技創新重要力量的發揮。
鑒于此,本文嘗試性地提出一種基于德爾菲法的高校科研績效評價體系,通過科學合理可靠的多層次數據分析,既避免了評價指標多而雜、評價標準不科學,又規避了諸如人情風、官本位、打壓異己以及 “馬太效應”等人為主觀干擾因素,從而構建一套科學公正合理的高校科研績效評價體系方法。
1 基于德爾菲法的高校科研績效評價體系
1.1 德爾菲法的涵義
德爾菲法是在20世紀40年代由O·赫爾姆和N·達爾克首創,經過T·J·戈登和蘭德公司進一步發展而成的。該方法屬于專家集體評價法,即專家以匿名的方式對調查者所提的問題發表意見,通過多輪次調查專家對問卷所提問題的看法,經過反復的征詢、匯總、修改,使專家小組的預測意見趨于集中,最終獲得具有統計學意義的結果,從而做出科學、公正、合理的結論,是一種利用集體智慧來確定各因素在評判問題或決策問題中的重要程度系數的有效方法之一。該方法具有較高的代表性和可靠性,被廣泛地運用于各種評價指標體系的確定過程中。③
1.2 應用德爾菲法的方法和過程
(1)組成專家小組。專家的挑選是應用德爾菲法的前提,針對高校科研工作的特點,在應用德爾菲法前,需要按照所需要進行科研績效評價的學科知識范圍來確定專家。既要考慮到專家的學術科研能力,又要兼顧其本人的基本道德水平。考慮到具體實施的復雜程度,人數一般以不超過20人為宜。
(2)篩選評價指標、編制咨詢問卷。問卷的設計是體現組織者能力的重要因素,選擇哪些評價指標,如何根據科研工作的實際情況確定評價指標的層次結構,都是決定應用德爾菲法成功與否的關鍵因素。
(3)高校科研績效評價指標體系的確立。根據德爾菲法的指標確立原則,結合高校科研工作的實際情況,本文給出了高校科研績效評價指標體系的框架。本指標體系由科研項目及經費、發表學術論文及著作、成果(專利) 獲獎情況以及參加學術活動情況4個一級指標構成。其中科研項目及經費包括縱向計劃項目和橫向合作項目兩個二級指標;發表學術論文及著作包括論文質量和論文及著作數量兩個二級指標;成果(專利) 獲獎情況包括獲獎成果和專利兩個二級指標;參加學術活動情況包括學術會議大會報告、專業學會委員、專業學術期刊評委和導師任職情況4個二級指標;每個二級指標下又設若干條三級指標。
(4)確定關鍵性指標及其權重值。在確立了高校科研績效評價指標體系的各級層次后,科研管理人員還需要根據高校科研實際情況,確定關鍵性指標及其權重值。根據表1,我們給出了4個一級指標的權重值:科研項目及經費0.3,發表學術論文及著作0.3,成果(專利) 獲獎情況0.2,參加學術活動情況0.2。
(5)具體實施德爾菲法:發放高校科研績效評價指標體系調查表給專家小組成員,收集所有專家對于每一個指標的評分值,然后進行匯總;②向專家小組成員第二次發放調查表(列有第一次調查其他人的意見),要求其根據其他人的觀點第二次對每一個指標的分值進行評估,第二次收集后再次進行匯總;向專家小組成員第三次發放調查表(列有前兩次調查匯總后其他人的意見),要求其第三次對每一個指標的分值進行評估后第三次收集匯總;組織者根據第三次收集的調查表數據計算出中間值,并作出最終評價。
2 結語
高校科研績效評價是一項涉及因素眾多、關系復雜的系統工程,因此建立一套科學、合理、公正、實用和可操作性的評價指標體系具有重要的現實意義。本文在分析了高校科研工作的特點和運行機制的基礎上,基于德爾菲法提出了一種對科研績效評價指標體系進行優化的思路和方法。該方法具有以下幾個優勢:
(1)資源利用的充分性。利用相關學科專家豐富的經驗和學識,吸收了大量不同專家的意見,充分發揮專家的作用,集思廣益,準確性高,實現了對相關學科領域資源的全面利用。
(2)指標體系的全面性。應用德爾菲法的高校科研績效評價體系涵蓋了科研項目、學術論文、著作、獲獎成果、專利以及學術交流等評價指標,最大可能地保證了指標數據的全面性。
(3)最終結論的客觀性和可信性。由于采用匿名或背靠背的方式,能使每一位專家能夠獨立地做出自己的判斷,而不會受到其他人為主觀因素的影響。因此匿名的調查方式極大地提高了咨詢結果的客觀性和可信性。
(4)最終結論的統一性。整個操作過程經過多輪次調查專家對問卷所提問題的看法,經過反復的征詢、匯總、修改,使專家小組的預測意見趨于集中,最終獲得具有統計學意義的結果,從而做出科學、公正、合理的結論。
本文基于德爾菲法對高校科研績效評價指標體系提出了一種新的方法和思路,指標體系結構和權重值的確定以及經過幾輪調查后綜合計算中間值的計分法有效地解決了其他高校科研績效評價的片面、不科學乃至不公正的問題,不但方法簡單易行,而且也克服了同行評議容易受到人為主觀因素干擾的缺點,將定性指標融入定量指標,打破了定性與定量的界限。對廣大高校科技人員起到正確的激勵和引導作用,從而達到了推動高校科研工作可持續性發展的目的。