基于層次分析法的企業科研項目后評價指標體系構建研究

趙 碩 張詩敏 張 南 王悠然

（中汽研汽車檢驗中心（天津）有限公司，天津 300300）

企業作為科技創新工作的主體，其重要程度不言而喻。2020年，我國各類企業研究與試驗發展經費支出18673.8億元，比上年增長10.4%，占全社會研發經費支出的比重高達為76.6%。科研經費投入力度的不斷加大，促使企業科研項目數量和科研經費投入增長趨勢明顯。但目前多數企業對科研項目的管理還僅限于事前項目立項評審、事中項目執行監督和事后項目結題等常規階段，存在“立項緊、結題松”的現象。然而對已結題驗收的科研項目在經過一段時間應用后而進行的后續評價，即科研項目后評價，在部分企業科研管理中還是一項尚待開展的工作。

科研項目后評價作為科研管理工作中的重要一環，是在科研項目結項驗收后，由第三方科研管理人員基于一定的指標體系，結合項目的研究應用情況，對項目的目標、實施過程、結果等進行客觀、系統的評估。科研項目后評價的落地實施，不僅可以對已結題的科研項目的實施效果及質量進行評價，確定預期目標是否達到，還可對后續科研項目的改進與發展提供合理化建議，更有助于優化科研資源的配置。同時，對項目的立項合理性、經費撥款決策具有指導性意義。

一、項目后評價國內外現狀和技術發展趨勢

國外項目后評價與前評價幾乎同時產生，最早產生于20世紀30年代的美國，主要為了適應當時政府對重大社會計劃項目管理的需要，作為監督政府“新政”政策性投資的手段。直到20世紀70年代，項目后評價才得到許多國家和金融機構的重視，并迅速成為西方發達國家政府管理中必不可少的組成部分。隨后，項目后評價在世界范圍內得到廣泛應用，并逐漸形成了較為完善的后評價管理體系。

我國的項目后評價相對起步較晚，開始于20世紀80年代初，一些研究機構在著手研究投資項目可行性分析方法的同時，開展了后評價方法的研究，通過與一些國家和國際機構的交流，逐步形成我國項目后評價的理論和方法基礎。2008年，國家發展改革委明確規定了中央投資的項目必須開展的后評價的相關工作，這標志著項目后評價進入了法制化、制度化、規范化的軌道。近年來，隨著社會經濟和科學技術的高速發展，政府和企業的管理部門逐漸意識到后評價管理體系的重要性。許多大型企業陸續開展科研項目后評價工作，相應的后評價管理體系及模型也逐步完善。

二、企業科研項目后評價指標體系的構建

（一）指標體系的構建原則

1.系統性

指標體系的構建應從整體出發，分級、分層、分系統地反映科研項目的整體情況。在反映項目研究的直接效果的同時，更要具體體現其所產生的間接效果，以確保評價工作的全面性。

2.科學性

指標體系應能客觀、準確地反映科研項目在研制過程和結項后的情況，評價指標的數量應適宜，并且每個指標的含義應清晰，各指標間應相對獨立，最大限度地避免各指標之間相互影響。

3.可操作性

指標體系中的各項指標應便于獲取，指標設置時應選取與科研項目均適應的指標，并且指標及計算方法要做到簡繁適中，方便長期開展相關工作。

4.定量與定性

在實際應用中，為保證完全反映項目的實際情況，后評價指標體系構建通常以定量化指標為主。但由于科研項目具有多樣性、差異性的特點，在后評價過程中，需要將定量與定性指標相結合，并明確定量指標與定性指標的權重確定，以此才能真實地反映項目的整體情況。

（二）指標體系的構建方法

1.對比分析法

對比分析法是國內外項目后評價中最常用的方法。通過把客觀事物加以比較，以達到認識事物本質并做出正確的評價，這種方法分為橫向對比法與縱向對比法。

2.邏輯框架法

邏輯框架法是一種概念化論述項目的方法。核心是項目各層次直接的邏輯關系，即如果給項目提供某種因素，就將隨之產生某種結果。

3.層次分析法

層次分析法是一種定性與定量相結合的方法，核心是問題和目標，逐層地分析項目中的問題，再根據數學模型，對其重要性進行分析。該方法最初由美國數學家Saaty教授提出，對項目后評價具有跨時代的意義。

4.德爾菲法

德爾菲法是由美國蘭德公司提出，也稱專家調查法，其本質是一種匿名反饋法。通過征得專家對所要預測問題的意見后，進行歸納與分析，再匿名反饋給專家，進行重復的意見征集，直至得到最終一致的意見。

5.成功度評價法

成功度評價法是一種相對綜合的方法，方法的關鍵在于專家的經驗，綜合各項指標評價，對項目的結果做出準確的判斷。

本文將主要采用德爾菲法和層次分析法相結合的方式，建立一套適合于企業使用的科研項目后評價指標體系，提升企業整體的科研管理和服務能力，從而實現企業的科研領域高速發展和業務轉型升級。

（三）指標體系的構建

首先通過梳理企業關于科研項目的現有考核指標、開展文獻調研和咨詢專家意見，分析科研項目后評價所要達到的總目標。再將總目標分解為四大組成因素，最后將組成因素繼續分解為17個具體的定性或定量的評價指標，從而得到一個多層次的分析結構模型。

第一，指標體系的初選。通過各梳理企業現有關于科研項目驗收的考核指標，結合文獻參閱法，了解各地的科技項目后評價指標體系，依據指標體系構建的幾大原則，初步確定后評價指標體系。

第二，指標體系的完善。主要是針對初選指標可能存在一定的主觀偏頗，在初選指標的基礎上通過一定的方法進一步完善指標體系，邀請專家對擬定的指標體系進行匿名評議，保證其科學性。

結合專家意見和建議，經過多輪的反饋與修改，基本確定了五個維度作為后評價一級指標，17個具體方向作為二級指標，各評價指標釋義見表1。

表1 科研項目后評價指標體系

（四）指標權重的確定

在已經構建后評價指標體系的基礎上，建立出該指標體系的層次結構模型。隨后，對該模型中各個指標的重要性進行排序，再利用層次分析法，同時使用數字1-9及其倒數作為標度，確定指標兩兩比較的數值，建立了判斷矩陣。

為保證判斷矩陣的科學性，在構建矩陣時，偏離一致性的程度不能過大，因此，在初步構建判斷矩陣后，需要對判斷矩陣進行一致性校驗。當所計算的一致性比例CR＜0.1時，判斷矩陣的一致性就是可以被接受的，否則，需要對判斷矩陣進行修正。

經過計算并結合專家意見對判斷矩陣進行不斷修正，最終得到各判斷矩陣一致性比例均小于0.1，通過一致性檢驗。在完成各項指標權重的綜合計算后，得到科研項目后評價體系的權重，如表2所示。

表2 后評價體系權重

本指標體系中包含主觀評價指標和客觀評價指標，其中技術水平、推廣應用情況、支撐業務轉型升級情況、社會效益、成果轉化情況為主觀評價指標，由專家進行評價；其余指標為客觀評價指標，由工作人員進行評價，專家進行核實。

三、評價指標分析

通過對評價指標進行比較分析，可得出以下結論：

第一，所占權重最大的是項目效益評價，權重為0.4，這說明在后評價中項目的效益更應被關注。企業的科研項目更應以實際效益為目的，通過技術創新等方式著力解決行業領域技術瓶頸，已實現科研工作對業務的促進作用。項目的應用應帶來一定的經濟與社會效益，并應培養出專業科研技術人才，為企業的發展和創新提供人才資源儲備。

第二，除效益評價外，所占權重較大的為技術價值和項目成果，分別為0.26和0.24。技術價值主要體現在技術水平、客觀評價和推廣應用情況三個方面，項目成果則是代表項目在研究及應用中所形成的新能力、新技術，而標準、論文、專利、軟著等則是其重要的表現形式。高水平成果的持續發表、獲獎，將為行業發展起到促進作用，同時也標志著其價值被行業、公眾所認可。

第三，項目的執行情況在后評價中同樣需要被關注，在本體系中執行情況所占權重為0.1。項目預期目標實現率、進度完成率和項目產出成果數量作為評判項目執行質量的重要維度，可以反映出項目整體是否得到有效管理。

四、結語

本文運用層次分析法、德爾菲法等構建了涵蓋項目執行情況、項目成果、技術價值、項目效益評價等4個維度、17個具體評價指標的企業科研項目后評價指標體系。通過分析發現，評價指標中項目效益評價的指標所占比例最大，項目執行情況的指標所占比例最小。

在研究過程中，將定性研究與定量研究相結合，同時結合專家和科研工作者自身科研經驗對計算得出的指標權重進行了多次修正，最大化地削弱了主觀因素對指標體系構建的影響，以提高科研項目后評價的公正性、客觀性。希望可以為企業項目的立項、驗收等管理流程提供一定的決策幫助。

然而，盡管本文借鑒了國家社科基金績效評價、地方科研項目后評價等眾多研究成果，并結合專家及科研工作者的意見進行了修正，但是，本文所選取的指標及確定的指標權重仍可能存在不足之處，需要在實踐中不斷檢驗完善。