應用多項指標綜合評價學校教育質量

●姚春艷　張　勇

?

應用多項指標綜合評價學校教育質量

●姚春艷張勇

應用多項指標，綜合評價學校教育質量，是本輪教育評價改革要完成的任務之一。然而，如何應用多項指標綜合評價學校的教育質量以及如何對評價結果進行解釋？筆者在指導實驗區教育質量綜合評價改革的過程中，找到了一種較為適用的方法?，F通過案例加以說明，僅供各實驗區參考借鑒。

案例介紹

某縣于2015年年底，選取了本縣8年級全體學生作為實驗群體，開展了一次教育質量綜合評價工作。本次教育質量綜合評價采用的評價模型為“學業發展水平評價+綜合素質評價+發展潛能評價+學業負擔評價”。其中學業發展水平評價包含學科知識、技能和能力3個二級指標，綜合素質則包括行為習慣、公民素養、人格品質、實踐能力、創新意識、情緒行為調控、好奇心求知欲7個二級指標。發展潛能包括認知能力傾向、認知過程以及認知項目3個二級指標，學業負擔則包括負擔事實、主觀感受、身體影響和心理影響4個二級指標，本次綜合評價共使用了17個指標。這意味著，參與測試的每所學校都會獲得17個分數，如何通過17個分數對各學校的教育質量作出一個科學、客觀的判定，無疑直接考驗我們教育評價人員的專業能力。

傳統做法，我們會將所有的分數進行簡單的相加或者是加權相加，根據總分進行排名，并據此對各學校的教育質量進行評價。之所以說傳統評價并不科學，原因在于簡單相加或者加權相加只適用于分數所代表的屬性為基本同質。如果多個分數所代表的屬性并不同質，簡單相加會使分數的含義模糊不清，導致結果無法解釋，而不能解釋的分數是無法做出有效價值判斷的。教育質量綜合評價的多個指標，有的是指向學生認知的，有的是指向學生情感偏好的，有的是指向學生行為的，還有的是指向外部學習環境的，指標性質差異較大，所獲得分數的含義也不盡相同，因此，指標分數簡單相加的結果根本無法解釋。而統計學中聚類分析是將多變量數據進行分類的有效方法之一，用在教育質量綜合評價結果處理上是比較恰當的。按照個體或樣品的特征將它們分類，使同一類別內的個體具有盡可能高的同質性，而類別之間則應具有盡可能高的異質性。

該縣共有14所學校參與了本次綜合評價。按照學業發展水平（知識、技能、能力與總成績的平均得分率）、綜合素質評價（二級指標：人格品質、情緒行為調控、創新意識、實踐能力、行為習慣、公民素養的平均得分率）、發展潛能評價（認知能力傾向、認知過程、項目的平均得分率）和學業負擔評價（負擔事實、主觀感受、身體影響、心理影響的平均得分率）分別進行聚類分析。14所學校在不同評價內容上，基本都被分成了3類：高分組、中分組和低分組。根據評價內容的性質以及各組的分數特征，對每組加以命名，得到如下量表：

表1 4類評價內容的聚類分組命名

將上述4種評價內容、3類分組結果與14所學校進行一一對應后，得到如下表格：

表2 14所學校在不同評價內容上的分組情況

4 5 6 7 8 9 1 0 11 12 13 14中學科成績組中學科成績組中學科成績組中學科成績組中學科成績組低學科成績組低學科成績組低學科成績組低學科成績組低學科成績組低學科成績組綜合素質低分組綜合素質中分組綜合素質低分組綜合素質低分組綜合素質低分組綜合素質低分組綜合素質低分組綜合素質低分組綜合素質低分組綜合素質高分組綜合素質低分組發展潛能中分組發展潛能中分組發展潛能中分組發展潛能低分組發展潛能低分組發展潛能中分組發展潛能低分組發展潛能低分組發展潛能低分組發展潛能低分組發展潛能低分組中度超標（高）組輕度超標組中度超標（高）組中度超標（低）組中度超標（低）組中度超標（高）組中度超標（低）組中度超標（低）組中度超標（低）組輕度超標組中度超標（低）組

通過上面的分組表，我們可以對該縣各個學校的教育質量情況作出以下判斷：

第一，該縣高學科成績組中只有3所學校，而低學科成績組有6所學校，低學科成績組的學校數量是高學科成績組學校數量的2倍，意味著該縣整體學科水平不高。

第二，14所學校中，12所學校都屬于綜合素質低分組，表明該縣絕大多數學校對綜合素質的重視程度不夠。

第三，發展潛能低分組的學校數量達到7所，而高分組只有3所，表明該縣生源整體水平欠佳；潛能高分組的學校同時也是學科成績高分組學校，表明這三所學校是集中了全縣優質生源的學校，該縣存在明顯的擇?，F象。

第四，學業負擔中度超標（高）組有6所學校，表明近一半的學校學生的學業負擔是較重的。

如果將每所學校在4類評價內容上的分組情況對比來看，則會發現以下問題：

一是學科成績位于該縣前列的3所學校，位于發展潛能高分組，但同時也是綜合素質低分組和學業負擔中度超標（高）組，表明這些學校雖然取得了良好的學科成績，但學科成績的獲得，一方面源于生源好，另一方面也與高學業負擔有關，恰恰因為學生的學業負擔重，用于發展綜合素質的時間少，就導致了綜合素質分數偏低，顯然，這并非是我們所期待的教育質量。

二是表中“學校13”的學科成績和發展潛能均位列低分組，但綜合素質卻是全縣唯一的一所位列高分組的學校，學業負擔也是全縣少有的輕學業負擔的學校之一，表明該學校在生源和教學均不占優勢的情況下，另辟蹊徑，將重點放在了學生綜合素質的培養與發展上。

三是表中“學校9”的發展潛能位于中分組，但學科成績，綜合素質均位于低分組，且學校學業負擔重，學科成績與學生潛能不匹配，由此可以推斷學校的教學形式與方法可能過于機械、呆板，不利于學生的成長，從而導致他們的潛能發揮受到一定限制。

四是表中“學校7、8”的發展潛能位于低分組，但學科成績位于中分組，且學業負擔相對較輕，學校在教學方面應該有其獨到之處，教學成效明顯。但是對綜合素質部分的關注還是不夠，導致學校位于綜合素質低分組，學科教育質量值得肯定，但綜合素質培養方面還需大力加強。

聚類分析方法的其他優勢與限制條件

在多指標的教育質量綜合評價中，應用聚類分析方法，不僅可以解決多項指標之間相互比較的問題，還可以解決以往根據分數排名，導致學校之間相互競爭的問題。聚類分析得到的結果相對模糊，將相似度高的學校歸為一組，而不強調組內各校之間的分數，每組只需要對照本組的平均水平來發現本校的優勢與存在的差距，這樣既不會導致分分計較的惡性競爭，也可以避免低水平的學校和高水平的學校相比較，進而出現越比越灰心喪氣的情況。

使用聚類分析方法需要一個先決條件，即測試工具的信度要達到一定的標準，這對于測試工具的編制提出了較高要求。換言之，若想聚類分析結果比較理想，可明確指導我們改進工作，則需要從源頭上把基礎性工作做好。

姚春艷

公眾教育研究副院長，公眾考試研究院執行院長；

張勇

公眾教育研究院、公眾考試研究院院長。

（責任編輯曾憲波）