王佳宜
貴州民族大學教育評估中心,貴州 貴陽 550025
2015 年10 月,國務院印發了《統籌推進世界一流大學和一流學科建設總體方案》,明確了“建設世界一流大學和一流學科”的目標(以下簡稱“雙一流”目標)。要求堅持以學科為基礎,以績效為杠桿,突出建設實效,構建完善中國特色的世界一流大學和一流學科評價體系。建設一流學科是一流大學建設的根本和核心。對一流學科進行績效評價是學科建設“過程管理”的重要環節。教學管理部門可在學科績效評價過程中發現并解決學科建設滯后的問題,推進教學改革、優化教學模式。目前,國內高校對學科評價大多是依據既有存量進行的絕對評估,缺少對學科建設過程的評價,無法動態監測學科建設的有效性,也無法基于量化的背景提出精準的教學改革思路和途徑。因此,本文將基于投入產出理論構建相對評估下的一流學科建設績效評價指標體系,助力學科改革,并“以點及面”推動整體教學改革,提升學校綜合實力。
學科建設績效評價是指在學科建設期間對學科在經費投入、師資隊伍以及人才培養等多個投入及產出方面進行綜合測量及定性定量分析,實現系統科學的績效評價[1]。實質是對學科建設的過程進行監測,確定學科投入是否有效、建設目標是否達成。
投入產出理論多用于分析經濟現象,進行經濟預測、經濟控制和預測等[2]。對一流學科進行績效評價,可根據一流學科評價指標將其劃分為投入和產出兩個模塊。運用數據包括分析法(DEA)等績效評價方法判別學科建設的產出相對投入是否有效,
在設計指標體系時,既要保證制定的標準能真正反映學科建設規律和效益,又要保證學科水平與世界一流學科水平對接。因此,在設計指標體系時需要遵循一定的原則:符合世界一流學科標準;合理劃分投入與產出。“雙一流”目標強調績效評價??冃е傅氖菍W科建設效率、效果,本質是學科投入與產出之間的有效程度[2];可對比性原則,學科建設績效評價指標體系的設計要考慮各個學科之間的可比性,建立具有普適意義的評價體系[3]。
依據“雙一流”目標要求,參考第4 輪學科評估指標體系,從學科建設的投入和產出角度分別選取對應的三級評價指標,初步構建一流學科建設績效評價指標體系,見表1。
如表1 所示,投入一級指標涵蓋人力、物力和財力三方面。此外,高質量的學術交流也將促進學科的發展[4]。產出指標部分主要涵蓋大學三大基本職能:科研成果、人才培養和社會服務。世界一流學科評價更偏重學科質量而不僅僅是規模,學科發展應更注重內涵式發展,因此本文選取三級指標時更傾向于選取能體現學科高質量的指標,如采用博士和正高級職稱人員代表學科高層次師資力量,引入ESI 高被引論文數。
本文應用層次分析法確定指標權重。層次分析法(AHP)是美國運籌學家T.L.Saaty 于20 世紀70 年代中期創立的一種定性與定量分析相結合的多目標決策方法[5]。本文的一流學科建設績效評價指標體系包含投入和產出兩部分,因此可以分別運用AHP 法確定二級指標和三級指標的權重。
根據AHP 法基本原理確定指標權重,要先構建遞階層次結構模型,這是應用AHP 方法解決多目標決策問題最重要的一步。本文根據評價指標的投入和產出兩部分,分別構造了投入指標層次結構和產出指標層次結構。以投入指標為目標層,準則層為經費投入、師資條件、支撐條件及學術交流指標,方案層有博士、正高、國家級人才、省級人才、國家級平臺、省部級平臺、舉辦會議、參與會議、合作項目。以產出指標為目標層,準則層為科研成果、人才培養及社會服務,方案層有擴展版ESI 高被引論文、專著專利、省部級以上科研獎、省部級以上課題、優秀博士論文、教學成果獎、就業率、成果轉化率、校企合作。
指標體系的投入和產出兩部分都有相應的層次結構,分別為目標層、準則層和方案層,即分別對應了一級指標、二級指標和三級指標。構造判斷矩陣的基本思路為在層次結構中將準則層和方案層同級指標中各因素進行兩兩比較,得出相對重要性的量化數據,并依次建立判斷矩陣,確定數學模型,進而計算出同一層次全部因素的權重[6]。為了使元素之間進行兩兩比較得到量化的判斷矩陣,本文引入1-9 的標度法構造判斷矩陣。
為了計算同一層次各因素的權重,本文使用和法進行求解。首先,將矩陣A 每一列向量進行歸一化處理,得到A,有;然后對 按行求和,得到W,即最后對W 進行歸一化處理,得到即為所求的權向量,也就是相應指標的權重系數[6]。
本文經過咨詢專家得出了投入和產出各同級指標的相對重要程度,運用1-9 標度方法量化構造了相應的判斷矩陣,并使用和法得出投入指標、產出指標下二級指標權重系數,見表2,表3。以及投入產出指標下各三級指標權重系數,見表4。

表1 一流學科建設績效評價指標體系

表2 投入指標下二級指標判斷矩陣

表3 產出指標判斷矩陣

表4 投入產出指標下各三級指標權重系數
判讀矩陣的元素是通過兩兩比較得出的,然而面對復雜事物的各因素,采用兩兩比較時不可能做到判斷的完全一致,從而存在估計誤差[5]。通常采取檢驗判斷矩陣一致性的方式減少誤差。本文使用一致性比例值CR(Consistent Radom)檢驗判斷矩陣的一致性,各判斷矩陣值均小于0.1,均通過一致性檢驗,說明本指標體系的權重具備一致性。
通過一致性檢驗后,將權重值帶入指標體系(表1)即可得到一流學科建設績效評價最終指標體系。
在使用指標體系衡量學科建設成效時,考慮到學科建設周期,需注意投入與產出指標在時間上的延后性。根據“雙一流”建設方案,每5 年一個建設周期。為了科學合理地評價一流學科建設績效,投入和產出指標應分別選取建設初期和末期的數據。
構建一流學科建設績效評價指標體系是考核一流學科建設效果的根本依據,也是學校進行教學改革的重要參考依據。結合一流學科評價指標體系和“雙一流”建設方案,學校要不斷深化教育教學改革,將教學改革與學科建設相結合,將改革途徑與績效評價相結合,提升教育改革的科學性和有效性。一流學科績效評價指標可以為學校進行教育教學改革提供量化標準及參照體系,是教學改革的“探路燈”,對雙一流背景下高校教學改革具有實際意義。