教育政策和發展規劃評估的指標體系量化分析研究

摘 要：本文以教育政策和發展規劃為研究載體，明確評估的目標、模式、原則、方法和標準；建立定性評估和定量評估相結合的綜合評估指標體系，制定評估指南，完善評估機制，理清評估思路，有效開展針對教育政策和發展規劃的動態跟蹤及在線監測，為實現評估全程監控管理提出優化措施和基礎依據，進一步提高政策規劃的實施質量。

關鍵詞：教育政策；發展規劃；定性評估；定量評估

中圖分類號：G726 文獻標識碼：A

一、教育政策和發展規劃評估的必要性

我國教育正面臨著從量向質提升的轉型，教育政策的好壞直接關系轉型成功與否。教育政策和發展規劃評估在我國是一個新興領域，其理論和方法都正在迅速發展。《國家中長期教育改革和發展規劃綱要（2010-2020）年》已明確指出提高質量作為教育改革發展的核心任務。因此，針對教育政策和發展規劃的特點，依據特定的評估主題及標準，推進評估程序科學化和制度化，亟需建立一套完善、規范化、制度化的量化評估體系。

（一）開展教育政策和發展規劃評估研究的迫切性

制定教育政策和發展規劃是政府部門的重要職責和任務之一，如何有效組織和實施，并對其運行質量和效果監控，都需要評估，以便及時調控相關教育政策和發展規劃。教育政策和發展規劃屬于多層次、多指標、結構復雜的系統工程，具有社會性、公益性、政策性和多樣性。因此，應及時設定評估方案，實現對運行中的偏離及時修正和調控。

（二）教育政策和發展規劃評估實施中的關鍵問題

教育政策和發展規劃的評估需按照一定程序，通過科學可行的方法開展定性、定量分析，對政策和規劃在一定時期內的執行情況與合理性客觀準確衡量。一是評判把握教育政策和發展規劃執行的宏觀發展趨勢，客觀評價規劃目標和任務的落實進程；二是尋找教育政策和發展規劃實施效果和既定目標間的差距，找準關鍵領域和重點薄弱環節，及時制定有效措施、調整導向；三是查找原有規劃編制不足，提出有針對性建設意見，助力于下一輪教育政策和戰略規劃編制調整。

教育政策和發展規劃實施進程中，普遍存在忽視實施評估環節中的關鍵技術問題。譬如，評估主體不明確、評估內容寬泛、評估方法缺失、評估標準不明、評估指標單一、缺少有效開展第三方機構評估等。因此，有效跟蹤監測政策和規劃的實施，亟待建立一套完善、科學、客觀的評估體系和機制。

二、國內外教育政策和發展規劃評估研究現狀

公共政策評估起源于20世紀30年代，美國社會學家史蒂芬采用“實驗設計方法”大規模系統開展對羅斯福總統的“新社會計劃”的政策評估，揭開了現代意義上的“評估”序幕。國外政策評估最早可追溯至一戰前。美國學者斯塔夫比姆指出政策評估應考慮多方要求、平衡各方利益，將近50年中常用的評估模型歸為四類：包括偽評估、問題取向的評估、決策取向的評估和社會回應取向的評估。

教育政策作為一種公共政策，具有公共屬性、工具屬性、動態屬性和系統屬性，其研究多沿用上述公共政策評估模型，按照一定教育價值標準，對教育政策對象及其環境發展變化及構成要素進行價值判斷，通過診斷政策設定、實施中存在問題推進提高。國外對教育政策的研究始于二戰后，現已成為教育研究的核心領域。加拿大學者邁克爾從設計評估的行動主體將教育政策評估分為行政評估、司法評估和政治評估。國際上，教育政策評估常通過第三方評估機構實施完成。

國內學者認為，不同級別和類型的教育政策應采用不同的評估模型。我國20世紀80年代后期，政策研究才步入教育研究者的視野。我國的教育政策評估一般主要從議題、方案、執行、反饋等角度進行評估。1986年，國務院成立國家教育發展研究中心，專門設置教育政策評估研究室，而各省市也相繼成立教育政策研究所，其中上海市教科院設置了高等教育研究所和基礎教育研究所等。

而國內的發展規劃評估起步于20世紀80年代末，結合西方既有經驗和實際國情，已做出初步嘗試。劉生龍采用差分內差分方法評估西部大開發戰略對促進西部經濟增長的作用程度。陳玉獻運用邏輯框架評估某省“十一五”環境規劃，針對規劃實施不同階段對應不同指標體系，深入分析投入產出。

三、教育政策和發展規劃評估的指標體系

教育政策和發展規劃評估是一項復雜的、系統的活動，因部門和地區差異性以及評估方式多樣，評估結果差異性也較大，需要制定動態的評估指標體系并及時監控調整。

（一）制定評估指南

制定詳細系統的評估指南，明確評估目標、確定評估模式和評估原則，依次界定評估內容。一是開展動態跟蹤評估。教育政策和發展規劃落實進程的評估必須包括實施過程中的環境變動、及時跟蹤、動態評價。二是針對教育政策和發展規劃的落實情況，及時建立執行中偏差的準確衡量和評估調整依據。國外發展規劃評估研究線路圖（如圖1），對于我國的發展規劃評估有一定的借鑒意義。

（二）明確評估標準

教育政策和發展規劃的評估標準是評估工作設定的參照系。至今，評估標準已經歷三個階段：從單一技術標準，到多元社會標準，至后續多元理性的社會政治綜合標準。首先，應遵循公共政策評估的一般標準，即效果標準、效率標準和效應標準。卡爾？帕頓和大衛？沙偉奇認為影響政策和規劃設計的因素多集中在技術可行性、政治可行性、經濟及財政可行性、行政可操性四點。20世紀70年代末期，鮑斯特提出經典的七項政策評估標準：效能、效率、充分性、適當性、公平性、反應度和執行能力。當前，國際上較普遍采用鄧恩的“多元評估標準”，綜合之前的“技術標準”和“社會政治標準”，已將評估標準分為效果、效率、充足性、公平性、回應性、適宜性六個維度。

（三）構建綜合評估指標體系

明確教育政策和發展規劃邊界，是開展相關評估的關鍵。因教育政策和發展規劃實施周期較長，效果多元復雜，須采用定量指標和定性指標相結合的全面綜合評估，建立分層級、分布式的政策和規劃評估動態網絡體系，實現科學、全面、客觀的綜合評價。

1.定性評估

教育政策和發展規劃的因素復雜，有模糊性和時變性，定性評估主要用于說明教育政策和發展規劃在一定時間內的執行進展情況及其可能所產生的相關影響，形成定量評估所需建構的量表和體系指標。該法特別適合過程評估，進一步回答“為什么”和“怎么樣”，其重點是針對政策和規劃的整體發展情況和趨勢進行目標總體性實現程度的評估。

2.定量評估

定量評估主要通過收集評估對象的定量資料，采用嚴謹的數學邏輯思維，輔以模型深入剖析，量化規劃評估結果，考查其質量效果程度，避免主觀傾向。定量評估重點考查教育政策和發展規劃任務中對應各子指標的實現程度。

3.定性評估+定量評估

我國的教育政策和發展規劃綜合性較強、涉及范圍廣，采用定性和定量相結合的方法開展獲取最佳評估結果。定量評估并非純粹客觀性，而是包含著某種“建構性”，其信度和效度分析主要依賴測量工具是否設計的精致，以及是否能有效測出所探討的現象。此外，定量指標的權重一般大于定性指標。Denzin研究表明運用各種不同方法與資料多角化可相互驗證。定量評估和定性評估都各自有優缺點，結合施用可互補。Trend也指出定性和量化資料要結合使用，有助于提高評估研究品質。

（四）確定評估主體

有效吸納多元主體，提高教育政策和發展規劃評估工作的科學性和社會參與度，體現評估的客觀性和公正性，保證評估獨立性，確保評估結論的可信度。

（五）量化評估方法

構建評估指標體系及評估方法量化是開展評估的關鍵，是改進和創新規劃評估工作的創新之源，其中涉及各因素間的交叉性、確定指標權重、不均化處理等技術難點。

1.層次分析法

把復雜總目標系統分解成若干個子目標，形成遞階層次結構。定性部分采用層次分析法，確定各級指標重要程度，判斷矩陣的特征根、特征向量，并進行一致性檢驗；定量部分則利用灰色模糊綜合評價模型，得到針對評價對象的不同級別指標的優劣等級和相應權重。

2.灰色系統法

灰色系統法重點解決系統中非透明部分，采用層次分析法圈定各影響因素的權重，鑒于專家打分時評判信息具有灰度，通過灰色評估建立白化函數，需用灰色聚類理論構造模糊隸屬度矩陣繼而進行綜合評估。

3.邏輯框架法

邏輯框架法向上逐級展開獲得政策和規劃的影響及后果，向下逐層推演找出針對原因得到“邏輯樹”；通過該邏輯樹將規劃和政策的“因果關系”轉換為相應的“目標關系”，得到“目標樹”，并進一步通過“規劃矩陣”來完成相關評估。

4.文獻研究法

基于對比分析相關文獻的基礎上，深入調研目前國內外對教育政策和發展規劃評估的現狀和需求，為后續評估工作的開展奠定基礎。

5.問卷調查法

該法不受時空限制，調查問卷一般有結構性問卷、非結構問卷、綜合型問卷三類，輔以統計、訪談等方式，調查掌握主要情況和典型事例，深入分析，實現較短時間內獲取較多有用信息。

6.信度鑒定法

在相同條件下，分別從評估者信度、重測信度、分半信度、內部一致性信度等方面對同一客觀事物測量若干次，考察測量結果的相互符合程度或一致程度。

7.效度鑒定法

用以反映評估結果與真值的接近程度，或測定工具的測定結果與預想結果的符合程度，具體包括效標關聯效度、內容效度、結構效度等測驗鑒定。

8.要素分析法

按照評估目的和要求，客觀深入分析和評判原評估中各種材料的內容要素及其有效性，主要分析內容效度、結構效度等要素。

9.專家評議法

該法操作方便，由從事或接近某領域的專家運用歸納法和演繹法來評定；形式可通過專家會議法、Delphi法以及不同專家意見相互印證和補充。

10.案例分析法

采用現實案例支撐，結合定性研究與定量研究，使得評估結論具科學性、合理性以及現實指導意義。

（六）評估調研形式

針對教育政策和發展規劃，可采用多種評估調研形式相結合，譬如，年度評估+中期評估+終期評估、綜合評估+專項評估、橫向評估+縱向評估、自主評估+第三方組織評估等，強化評估結果的客觀性和科學性。

1.年度評估+中期評估+終期評估

第一，通過年度比較，考察各項重點任務的序時進度。第二，中期評估主要是了解教育政策和發展規劃的實現情況。第三，后期評估重點是為今后制定發展規劃和公共政策提供借鑒和依據。

2.綜合評估+專項評估

除開展綜合評估外，還應結合國家教育政策和發展規劃的重點和難點開展一系列專題調研，形成專項評估。

3.橫向評估+縱向評估

為彌補縱向評估不足，橫向評估能更客觀評估教育政策和發展規劃的執行進展，及時發現執行中的問題。

4.自主評估+第三方組織評估

第三方評估是實現政府治理現代化的重要手段，有利于提高重大政策規劃實施的質量和水平。

（七）強化評估結果推廣應用、建立評估反饋機制

形成評估報告，發布評估結果，積極推廣并強化科技成果應用轉化。將該評估結果結合實際案例分析，可從多個關鍵參與者的視角看待個體或組織，將對評估實踐推廣更具實際指導意義。

評估反饋機制是構建由評估到及時調控的橋梁，形式靈活，可通過網絡、年度專題白皮書等定期發布和及時反饋，確保建立規劃“滾動”的修訂機制，為后續決策分析做充足數據支撐。

參考文獻

[1]李志軍.重大公共政策評估理論、方法與實踐[M].北京：中國發展出版社，2016.

[2]袁振國.教育政策學[M].南京： 江蘇教育出版社，2001.

[3]胡伶.教育政策評估標準體系的架構研究[J].教育理論與實踐，2008（12）.[4]張金馬.公共政策分析：概念、過程、方法[M].北京：人民出版社，2004.

[5]威廉N鄧恩：公共政策導論（第2版）[M].北京：中國人民大學出版社，2002.

[6]屈芳，馬旭玲，羅林明.調查問卷的信度分析及其影響因素研究[J].繼續教育，2015（1）.

[7]楊永恒.發展規劃：理論、方法和實踐[M].北京：清華大學出版社，2012.

[8]張小玲.國外政府績效評估方法比較研究[J].軟科學，2004（5）.

[9]楊偉民.規劃體制改革的理論探索[M].北京：中國物價出版社，2003.

[10]李允杰，丘昌泰.政策執行與評估[M].北京：北京大學出版社，2008.

[11]Walker，Robert.An introduction to applied qualitative research[M].Applied Qualitative Research，Robert Walker，ed.，Brookfield， Vermont： Grower Publishing Company，1985.

[12]Denzin，Norman K.The Research Act，Chicago：Aldine Publishing Co，1970.