河南理工大學 鄧茹
基于AHP的地方財政科技項目績效評價研究*
——以河南省焦作市為例
河南理工大學 鄧茹
科技項目績效評價從政府財政支出的角度對科技投入的效益進行評估,為區(qū)域科技創(chuàng)新提供了重要支撐。文章在國內外學者針對科技投入績效評價研究的基礎上,建立了科技項目績效評價體系,通過德爾菲法從業(yè)務評價和財務評價兩個方面設計9個二級評價指標、23個三級評價指標,運用層次分析法確定指標權重,結合多級綜合加權評價法構建績效評價模型,并以河南省焦作市為例進行實證分析,驗證了績效評價體系的可行性與科學性,最后根據(jù)評價結果為焦作市科技資金使用提出優(yōu)化建議。
科技項目 績效評價 評價體系 層次分析法(AHP)
財政科技投入作為地方經(jīng)濟發(fā)展的重要支撐,同時也是區(qū)域科技進步的物質保障。隨著國家對科技創(chuàng)新的重視程度不斷提高,地方財政也在逐步加大科技投入,而科技項目作為財政科技資金最微觀的載體,項目完成后所產(chǎn)生的效益、效果及資金使用效率成為政府相關決策部門普遍關注的重點。
目前,在財政科技投入績效評價指標設計及方法選擇方面,國內學者進行了許多系統(tǒng)的研究,如余振乾等(2005)提出在系統(tǒng)論的觀點下構建財政科技投入績效評價模型,并指出評價指標的設計要以科技項目為主線分類進行評價;胡興旺(2007)指出要根據(jù)科技活動內容不同,設立不同的績效目標,分別建立績效評價指標體系;尤建新等(2009)系統(tǒng)分析總結了國內外科技項目績效管理研究的相關成果并指出其不足之處,提出未來科技項目的研究重點應向績效管理模式傾斜;楊云等(2012)從科技項目績效評價與績效管理、公共績效評價的關系、科技工作績效的關系等幾個層面對科技項目績效評價進行了辨析,為科技項目績效評價的實施指明了方向;李潔(2014)以國家重大科技專項資金為例,從績效審計的角度構建績效審計的框架并進行了應用;袁旭梅等(2015)運用ANP理論構建了科技項目績效評價模型,有效解決了評價因素之間相互影響的問題。通過上述文獻研究梳理發(fā)現(xiàn),雖然眾多學者從指標設計、方法選擇等方面對財政科技投入績效進行了深入研究,但大部分研究成果還停留在理論階段,實證研究方面并不系統(tǒng),研究的切入點基本上都從國家宏觀科技投入角度出發(fā),在評價指標的設計過程中都是基于財政專項資金績效評價指標的基礎上構建的,無法體現(xiàn)科技項目的側重點與特性,進而對評價結果的應用造成了一定的影響,不利于科技部門及財政部門的決策。鑒于此,本文在前人研究的基礎上,結合科技項目資金應用的特點,通過德爾菲法設計績效評價指標,運用層次分析法(AHP)設置指標權重,通過多級綜合加權評價法構建績效評價模型,并以河南省焦作市為例進行實證研究,為地方政府財政科技項目績效評價提供借鑒和參考。

表1 財政科技項目績效評價指標體系
(一)科技項目績效評價指標設計財政科技項目資金績效評價指標是衡量、監(jiān)測和評價財政科技項目資金投入的經(jīng)濟性、效率性和有效性,揭示財政科技項目支出存在問題的重要量化手段,績效評價指標是否科學、適用是能否正確評判科技項目資金使用效率的關鍵。評價指標在設計過程中除了要考慮科學性、目的性、定量與定性相結合的原則外,還要考慮系統(tǒng)性、層次性、可操作性以及項目資金的導向性原則。
在評價指標設計過程中,筆者首先通過梳理相關文獻資料、深入相關企業(yè)進行實地走訪調研,充分了解了科技項目資金使用過程中的相關問題。然后在理論分析與實地調研的基礎上,形成初步的科技項目績效評價指標框架,運用德爾菲法,將初步設計的績效評價指標體系提請相關專家進行評判,在充分討論、反復論證的基礎上,最終從業(yè)務評價和財務評價兩個維度設計了2個一級指標、9個二級指標、23個三級指標,以此對科技項目資金使用情況進行全面、系統(tǒng)、科學的績效評價。其中業(yè)務評價指標主要包括科技項目管理情況、目標完成情況、項目的技術水平、經(jīng)濟效益、社會效益等方面;財務評價指標包括資金收支情況、財務管理制度等方面。具體指標如表1所示。
針對指標中的經(jīng)濟效益、社會和環(huán)境效益的評價,考慮到科技項目從技術研發(fā)成功到全面產(chǎn)業(yè)化的時間間隔較長,為提高評價結果的準確性,在評價過程中采用項目驗收后1-2年的相關數(shù)據(jù)進行評判。
(二)科技項目績效評價指標權重確定
(1)層次分析法的基本原理及步驟。20世紀70年代,美國著名運籌學家T.L.Santy提出了層次分析法(AHP),該方法是通過梳理各種因素之間的關系,將復雜的問題分為成不同的要素,根據(jù)各要素的關系及性質將其歸納為不同的層次,構建一個多層次的要素結構層。針對不同的層級制定不同的規(guī)則,構建同層次要素之間的判斷矩陣。在計算矩陣最大特征值和特征向量的基礎上,得出各要素層的權重值,為最優(yōu)方案的選擇提供依據(jù)。通過建立科學適用的績效評價指標體系,并運用AHP法進行權重分配,不僅有利于對科技項目資金的使用效率進行客觀評價,同時還可以從不同的角度反映各種因素對財政科技項目資金績效的影響,為政府相關部門決策提供參考。
AHP法具體操作步驟如下:
第一,構造判斷矩陣。判斷矩陣是AHP的基本信息,也是進行相對重要度計算,進行層次單排序的依據(jù)。判斷矩陣是以上一級要素Z作為評價準則,對本級的要素進行兩兩比較來確定矩陣元素的。例如,以Z為評價準則的有n個要素,其判斷矩陣形式如表2所示:

表2 判斷矩陣
在判斷矩陣B中的元素bij表示依據(jù)評價準則Z,要素bi對bj的相對重要性。bij的值是根據(jù)資料數(shù)據(jù)、專家意見和評價主體的經(jīng)驗,經(jīng)過反復研究后確定的。通常人們所采用的標度為1~9比例標度。
依據(jù)上述原理,結合科技項目資金績效評價的特點,在專家組充分論證的基礎上確定了各級指標的權重,本文以一級指標和業(yè)務評價的二級指標為例進行權重的確定計算。具體權重如表3、表4所示:

表3 一級指標權重判斷矩陣

表4 業(yè)務評價二級指標權重判斷矩陣
將上述表3、表4轉換為矩陣形式如下:

第二,將判斷矩陣中每一列元素作歸一化處理,
其中一級指標歸一化處理后得出:


第五,一致性檢驗。采用AHP法確定的比較判斷矩陣,可能會由于不同因素之間的比較差異出現(xiàn)前后矛盾的結果,特別是當判斷因素較多時,容易出現(xiàn)誤差,因此需要對判斷結果進行一致性檢驗,一致性檢驗就是要滿足隨機一致性比率CR小于0.1的條件。具體計算過程如下:

表5 平均隨機一致性指標
根據(jù)上述一致性判斷原理,本文以業(yè)務評價二級指標為例進行一致性判斷,具體解析過程如下:


通過上述計算結果判定,矩陣通過一致性檢驗,各級指標權重合理,因此業(yè)務評價二級指標權重分別為:

同理,一級指標權重分別為:A1=0.75,A2=0.25
(2)其它各層級指標權重的確定。根據(jù)上述AHP法指標權重的確定原理和步驟,計算出其它各層級指標權重。
第一,其中業(yè)務評價部分三級指標權重如下:項目管理情況三級指標權重:B11=0.33,B12=0.67項目完成情況三級指標權重:B21=0.4,B22=0.6項目技術水平三級指標權重:B31=0.625,B32=0.238,B33=0.137
經(jīng)濟效益三級指標權重:B41=0.4,B42=0.4,B43=0.2
社會與環(huán)境效益三級指標權重:B51=0.55,B52=0.24,B53=0.21
第二,財務評價二級指標權重:B6=0.492,B7=0.306,B8=0.078,B9=0.125
財務評價部分三級指標權重如下:
資金到位情況三級指標權重:B61=0.5,B62=0.5資金支出情況三級指標權重:B71=0.4,B72=0.6會計信息質量三級指標權重:B81=0.5,B82=0.25,B83= 0.25
財務管理狀況三級指標權重:B91=0.163,B92=0.54,B93= 0.297
上述二級指標及三級指標權重完全遵照AHP法的原理,經(jīng)驗證各級指標權重均通過一致性檢驗,不存在比較判斷矩陣自相矛盾現(xiàn)象。權重分配結果能夠較好的體現(xiàn)出該類指標的重要性程度,為評價結果的科學性、合理性奠定了基礎。
(三)科技項目績效評價模型構建及評價標準
(1)科技項目績效評價模型構建。通過上述運用德爾菲法和層次分析法(AHP)分別設計、確定的科技項目績效評價指標及權重,根據(jù)績效評價體系構建的特點,將運用多級綜合加權評價法構建科技項目績效評價模型。其中一級指標評價模型如下:

在上式中,YJZBi代表各個一級指標的績效評估值,其中i=1,2分別代表業(yè)務評價和財務評價兩個一級指標;Wij代表各個一級指標下二級指標的權重系數(shù);m代表各個一級指標下二級指標的個數(shù);n代表各個二級指標下三級指標的個數(shù);Wijk代表二級指標下三級指標的權重系數(shù);Vijk代表各個三級指標的評分值。
在一級指標分值確定的基礎上,根據(jù)業(yè)務評價和財務評價兩個一級指標的評價結果構建科技項目績效評價整體模型,其模型為:,式中Wi代表各一級指標的權重系數(shù)
(2)科技項目績效評價標準。績效評價采取百分制的計分方式,績效評價結果分為優(yōu)秀、良好、中等、合格、差5個等級,其中90分及以上為優(yōu)秀,80~90分為良好(含80分),70~80分為中等(含70分),60~70分為合格(含60分),60分以下為差。
在上述科技項目績效評價體系構建的基礎上,本文以焦作市為例,從宏觀和微觀兩個層面對科技資金使用情況進行績效評價。
(一)焦作市科技項目資金總體投入分析焦作市位于河南省西北部,轄5個市轄區(qū)、4個縣、代管2個縣級市。近年來,焦作市科技項目資金的投入力度不斷增強,為促進地方經(jīng)濟發(fā)展由要素驅動向創(chuàng)新驅動轉變提供了重要的支撐。焦作市財政科技項目資金投入主要包括科技計劃項目、科技獎勵、科技專項計劃三個方面,2011-2014年度科技項目資金投入具體如表6所示:

表6 2011-2014年度焦作市科技項目資金投入情況(單位:萬元)
表6中的科技計劃項目主要包括焦作市重大科技專項、創(chuàng)新人才培育、成果轉化及產(chǎn)業(yè)化、科技攻關、軟科學、貸款貼息項目等;科技獎勵主要針對省級和市級工程技術中心、院士工作站、高新技術企業(yè)在科技研發(fā)方面取得成果的獎勵;科技專項計劃主要包括星火培訓、科技特派員、專利清零行動計劃專項等。通過表6的科技項目資金投入的規(guī)模和結構可以看出,(1)近幾年來焦作市科技項目資金投入的力度不斷增強,為科技創(chuàng)新驅動發(fā)展戰(zhàn)略的實施提供了重要支撐;(2)科技計劃項目投入資金占據(jù)每年投入資金的50%以上,充分說明了焦作市對重大科技專項、科技攻關等方面的重視程度;(3)雖然資金總量相對于全省甚至國家來講比例很小,但對于焦作市科技創(chuàng)新的引導作用非常明顯。根據(jù)焦作市科技局統(tǒng)計數(shù)據(jù)顯示,2011年科技項目帶動企業(yè)投資9.85億元,新增銷售收入10.2億元,新增利稅1.1億元,獲得成果80余項,新增就業(yè)1500余人。2012年科技計劃項目帶動企業(yè)投資12億元,新增銷售收入11.7億元,新增利稅1.7億元,獲得成果100余項,新增就業(yè)1900余人。2013年帶動企業(yè)投資13億元,新增銷售收入15億元,新增利稅2.6億元,獲得成果90余項,新增就業(yè)2600余人。
(二)焦作市科技項目績效評價在科技項目總體分析的基礎上,本文選取了科技攻關、重大科技專項、國際科技合作三個類別的項目,結合上文構建的績效評價體系進行評價。

表7 項目績效評價基本情況及結果
通過運用所構建的科技項目績效評價體系,針對項目的業(yè)務評價和財務評價的相關指標進行了客觀的打分,最終得出項目A得分86.8分,等級為良好;項目B得分73.5分,等級為中等;項目C得分90.2分,等級為優(yōu)秀。通過上述績效評價體系的應用發(fā)現(xiàn),科技項目績效評價體系能夠真實的反映科技資金的績效情況,可以為地方財政、科技部門的管理提供參考。
(一)研究結論建立科學、適用的科技項目績效評價體系,全面評價財政科技項目的經(jīng)濟與技術目標完成情況、項目資金投入產(chǎn)生的各種效益及資金管理等內容,不僅有利于提高政府科技項目資金支出決策水平,提供財政資金配置有效性的測度結論,而且還有利于強化財政科技資金支出的管理與監(jiān)督,促使科技項目承擔者進行項目目標管理。本文通過設計科技項目績效評價指標、確定指標權重、建立評價模型對2011-2014年焦作市財政科技項目進行了績效評價,為相關政府部門決策提供參考。通過研究主要得出以下結論:第一,通過指標權重的確定發(fā)現(xiàn),科技項目績效評價的研究應側重于經(jīng)濟效益、社會與環(huán)境效益、資金的落實與支出幾個方面,只有加強這些方面的監(jiān)管才能更加有效的提高科技項目資金的使用效率、效益。第二,科技項目績效評價體系適用性強,通過績效評價過程,能夠深刻揭示項目單位在資金運用過程中存在的相關問題,為今后規(guī)范科技項目資金使用提供改進方向。第三,績效評價結果表明,個別項目單位在資金使用過程中存在未能設置專賬、挪用資金現(xiàn)象;但大部分項目單位能夠做到專款專用,符合財政科技項目資金的使用范圍和目的,對焦作市區(qū)域經(jīng)濟發(fā)展的帶動作用明顯,科技項目資金總體績效評價結果良好。
(二)相關建議第一,繼續(xù)加大科技項目資金投入力度。近年來,焦作市科技項目投入不斷增加,但總量仍顯不足,落實的項目單位的資金額度較少,應將科技項目投入作為預算保障的重點。建立完善的政府投入引導機制和健全的社會投入激勵機制,積極吸引社會資金,形成多元共建的科技創(chuàng)新體系。第二,優(yōu)化科技項目資金投入模式,提高資源配置效率。在科技項目資金投入過程中,可采用后補助模式,該模式是指項目單位對自主確定的研發(fā)項目先行投入資金實施,在完成計劃意向書約定目標任務,并通過驗收后,給予經(jīng)費補助的財政資助方式,從而夯實科技項目資金的使用效果和效益。同時,針對科技資金的投向要進行審慎選擇,明確資金投入的重點領域和重點行業(yè),突出產(chǎn)業(yè)化導向,共建企業(yè)與政府聯(lián)動、互動的良好局面,進而提高科技資源配置效率。第三,積極培育專業(yè)評價中介機構,完善科技績效評價的軟環(huán)境。當前,地方政府對于科技進步與創(chuàng)新、經(jīng)濟轉型發(fā)展非常重視,財政科技投入力度也在不斷增大,但由于時間和精力有限,往往存在“重投入,輕管理”現(xiàn)象,因此,應當積極培育第三方機構參與科技項目績效評價,形成獨立、公正、客觀的績效評價環(huán)境,切實保障績效評價工作的順利開展,為政府部門提供科學、詳實的決策建議。
*本文系河南省教育廳人文社會科學研究項目資助“地方財政科技投入績效評價體系構建及應用研究”(項目編號:2016-qn-129)、河南理工大學基本科研業(yè)務費專項項目“創(chuàng)新發(fā)展驅動戰(zhàn)略下地方財政科技投入效率研究”(項目編號:SKJYB2016-08)階段性研究成果。
[1]余振乾、余小方:《地方財政科技支出績效評價指標體系構建及其實施》,《中國軟科學》2005年第4期。
[2]胡興旺:《財政科技支出績效管理研究》,《財政研究》2007年第7期。
[3]尤建新、曹顥、鄭海鰲:《國內外科技項目績效管理理論研究述評》,《科技與管理》2009年第5期。
[4]楊云、龐宇、陶蕊:《辨析科技項目績效評價的四個關系》,《中國科技論壇》2012年第12期。
[5]袁旭梅、張旭、祝雅妹:《基于ANP理論的科技項目績效評價模型及應用》,《科技管理研究》2015年第21期。
[6]李潔:《科技資金績效審計框架設計及應用研究》,《中國注冊會計師》2014年第6期。
(編輯 劉姍)