誰編制了PISA項目報告？

方樂

摘? 要：經(jīng)濟合作與發(fā)展組織（OECD）被公認為教育領域高效能的國際組織，其開展的一系列項目受到國際社會廣泛關注，其旗艦項目國際學生測評項目（PISA）更是引領了全球教育的變革和發(fā)展的潮流。PISA項目報告主要有OECD秘書處的PISA項目團隊撰寫，并得到了參與項目國家和經(jīng)濟體代表以及專業(yè)測評公司的支持。文章梳理總結了PISA項目的以下組織效能建設策略：植根OECD已有經(jīng)驗;吸納外部人才與經(jīng)驗;基于績效和需求選人與用人;積極加強共同體建設;匯聚多方力量與資源;推動項目持續(xù)創(chuàng)新。

關鍵詞：PISA;教育;組織效能;建設策略

一、引言

作為經(jīng)濟合作與發(fā)展組織（Organization for Economic Cooperation and Development，以下簡稱“經(jīng)合組織”/“OECD”）的旗艦項目，國際學生測評項目（Programme for International Students Assessment，以下簡稱“PISA”）旨在通過學生測試成績和問卷調查，為各國政府和教育政策制定者提供多方面教育信息，了解本國教育發(fā)展狀況，分析造成當下教育狀況的各種原因，從而為各國制定正確有效的教育決策及推進教育改革發(fā)展提供國際參照數(shù)據(jù)和成功經(jīng)驗。1 自2000年PISA項目首次測評以來，全球累計已經(jīng)有90多個國家和經(jīng)濟體的大約300萬名15歲學生參加了PISA測評。其中最近一次測評（PISA 2018）來自79個國家和經(jīng)濟體（其中非經(jīng)合組織成員國/經(jīng)濟體42個）的60萬15歲學生參加，他們代表了這些國家3200萬同齡學生。2 2009年以來，我國包括上海在內的四個省市3 作為整體測評對象先后參加了PISA測評，在參測國家（地區(qū)）中多次取得第一名的優(yōu)異成績。由此引起了世界對中國基礎教育的高度關注，充分反映了中國基礎教育的成就，也引發(fā)了針對性改革。PISA已成為世界上比較教育體系質量、公平和效率的首要標準，也是各國和經(jīng)濟體用來調整教育政策的有力工具。1 聯(lián)合國教科文組織（UNESCO）指出：“在過去20年，OECD在國際教育領域所做的創(chuàng)新性貢獻，鮮有國際組織能與之媲美，其眾多項目中PISA項目備受關注?！?

經(jīng)合組織既沒有法規(guī)約束手段，也沒有經(jīng)費激勵杠桿。有專家指出，經(jīng)合組織“從來沒有能夠依靠除了‘好論點之外的任何東西”3，但“它通過統(tǒng)計數(shù)據(jù)和研究報告等形成了一個無可爭辯的品牌”。4 經(jīng)合組織內部工作人員也指出：“經(jīng)合組織的合法性和影響力在很大程度上取決于人們對其信息和分析質量的感知。”5 這些表明經(jīng)合組織主要依靠知識產(chǎn)品發(fā)揮影響，而知識生產(chǎn)的關鍵在于人才及其團隊建設。因為任何組織的效能都在很大程度上取決于團隊成員的態(tài)度和行為以及團隊成員業(yè)務能力的充分發(fā)揮。6 經(jīng)合組織秘書長安赫爾·古里亞（Angel Gurría）指出：“在追求卓越過程中，經(jīng)合組織的最優(yōu)資產(chǎn)是其工作人員;他們的技術、能力、經(jīng)驗和專業(yè)精神是完成組織核心使命和戰(zhàn)略目標的關鍵?！? 故本文試圖從組織效能的視角，探究PISA項目團隊，尤其是初步報告和深度報告的主要編制人員的特點和效能建設策略，以期對包括學校在內的公共組織效能建設提供借鑒。

二、PISA項目知識產(chǎn)品

1.主要類型

PISA項目面向15歲學生，每3年開展一次，每次從閱讀、數(shù)學、科學中選擇一門作為主要科目，另外兩門作為次要科目。此外，每次PISA也在不斷探索可選擇參加的領域，如協(xié)作問題解決能力和全球勝任力等。PISA不僅考查學生是否重現(xiàn)所學知識，還考查他們在校內和校外的陌生環(huán)境中應用知識的能力。PISA項目提供以下主要知識產(chǎn)品（見表1）：（1）歷次測評的結果數(shù)據(jù)，包括SASTM 和SPSS?兩種格式的數(shù)據(jù);（2）有關整體情況的初步報告和利用PISA數(shù)據(jù)進行專題探討的深度報告;（3）測評框架、技術報告、數(shù)據(jù)分析手冊等技術類報告;（4）針對具體國家或地區(qū)的解讀，如針對部分國家的注釋和《教育系統(tǒng)中的成功者與變革者》系列報告，涵蓋美國、日本、希臘和墨西哥等國家;（5）2011年開始推出《聚焦PISA》系列簡報，基本上每月一期，篇幅控制在4頁，結合PISA數(shù)據(jù)針對具體政策問題進行簡要論述;（6）描述作者階段性研究成果的工作論文，出版是為了激發(fā)對經(jīng)合組織有關工作的廣泛討論，但這些工作論文不代表經(jīng)合組織的官方觀點;（7）通過門戶網(wǎng)站、社交媒體、報紙期刊和會議論壇等，宣講或探討PISA項目的信息資料。其中，第7項是前面6項的衍生和宣傳，并且散布范圍比較廣，這里不再贅述。

2.項目報告

經(jīng)合組織的知識產(chǎn)品均可以在其網(wǎng)站開放式獲取。截至2020年底，除了測評結果數(shù)據(jù)，能夠在經(jīng)合組織網(wǎng)上圖書館找到的有關PISA項目報告為236份。這些報告版權屬于OECD，但在序言或致謝中會明確提及主要執(zhí)筆人員。依據(jù)主要執(zhí)筆人所在單位劃分，這些報告可以分為：主要由PISA項目團隊撰寫、委托外部專家撰寫和雙方合作撰寫（見表2）。整體上來看，PISA項目團隊產(chǎn)出了大多數(shù)項目報告和簡報等出版物，但數(shù)據(jù)或技術報告主要依靠外部專家。從連續(xù)性和完整性來看，初步報告和深度報告是經(jīng)合組織PISA項目團隊的核心知識產(chǎn)品。57份初步報告和深度報告中大多數(shù)（超過70%）由PISA項目團隊完成。對這些初步報告附錄“PISA項目合作與開發(fā)：一項合作的努力”當中的秘書處人員清單進行整理，可得知PISA項目團隊工作人員共143人次，其中承擔分析服務職責人員，即數(shù)據(jù)分析和報告編制人員有90人次;去重之后團隊工作人員和分析服務人員分別為81人和47人;其中作為第一作者執(zhí)筆撰寫報告的有16人。

進一步梳理57份初步報告和深度報告的主要執(zhí)筆人員、采用的測評數(shù)據(jù)輪次和發(fā)布報告年份方面信息（見表2），可以看出：PISA2000和PISA2003大多數(shù)報告由外部專家編制，并且完成測評報告的年數(shù)較多;PISA2006和PISA2009有關報告大多數(shù)由PISA項目團隊完成，完成分析報告年數(shù)有所減少;PISA2012和PISA2015有關報告全部由PISA項目團隊完成，完成分析報告的年數(shù)穩(wěn)定在4年左右（見圖1）。1另外需要指出，《教育系統(tǒng)中成功者和變革者》系列報告和《聚焦PISA》月度系列簡報等都是2011年以后推出的。這些表明：PISA項目團隊組織效能在不斷提升，尤其是2011年之后更加穩(wěn)定和高產(chǎn)。

三、PISA項目報告編制者

PISA項目報告編制者主要有以下三種力量：經(jīng)合組織秘書處PISA項目團隊、參與PISA項目的國家代表和專業(yè)測評公司等。其中PISA項目團隊主要發(fā)揮統(tǒng)籌協(xié)調作用;參與PISA項目的國家和經(jīng)濟體主要有三類代表：進入PISA項目董事會的代表主要負責項目決策和指導，有關專家代表可以對項目設計和工具開發(fā)提供咨詢意見，國家PISA項目經(jīng)理主要負責項目在本國的實施和管理;專業(yè)測評公司主要負責項目開發(fā)與實施工作等。具體情況如下：

1.PISA項目團隊

PISA項目團隊正式人員為國際公務員，主要來自經(jīng)合組織成員國;學科背景涉及經(jīng)濟學、教育學、社會學等，其中經(jīng)濟學背景人數(shù)最多，達到1/3以上。非正式人員如實習生、顧問和借調人員等，可以來自非成員國，并且托馬斯·亞歷山大學者獎學金項目2 更注重鼓勵新興和發(fā)展中國家人員申請。人員的多元化背景為PISA項目團隊提供了豐富多樣的知識和經(jīng)驗，有助于形成一個更有活力、彈性和高效的團隊，從而更好地應對全球化經(jīng)濟和社會發(fā)展帶來的挑戰(zhàn)。經(jīng)合組織在人員遴選方面注重基于核心勝任力的擇優(yōu)錄用，尤其關注以下三類核心能力：成果導向類能力、人際關系構建能力和面向未來的戰(zhàn)略規(guī)劃能力。PISA項目團隊核心成員相對穩(wěn)定，如自1995年籌備以來負責人一直沒有變更，在16位擔任報告撰寫第一作者的人員中，12人（占比75%）依然留在PISA項目團隊，這保障了項目的穩(wěn)定性和連續(xù)性。

2.參與PISA項目國家和經(jīng)濟體代表

參與PISA項目國家和經(jīng)濟體可以采用三種方式塑造項目：（1）任命代表參與PISA項目董事會，這些人員一般為教育部高級官員或國家測評與考試機構負責人等，他們可以直接參與國內有關決策;他們在PISA項目董事會1 根據(jù)經(jīng)合組織目標，確定有關規(guī)劃和任務優(yōu)先事項以及工具開發(fā)工作等。（2）推薦本國進入閱讀、數(shù)學和科學學科和問卷設計等方面的專家，由秘書處進行遴選和任命。他們主要負責把PISA項目政策目標與國際上現(xiàn)有的最佳專業(yè)知識聯(lián)系起來，并在PISA項目總體目標和框架內就學科事項和技術問題在各國之間達成共識。（3）安排評估/調研方面的專家擔任本國PISA項目經(jīng)理，他們在利用國內現(xiàn)成的教育行政和管理網(wǎng)絡，按照商定的程序實施項目，并在核實和評價調查結果、分析和出版物等方面發(fā)揮重要作用。2 需要指出的是，每次參與PISA項目的不僅包括經(jīng)合組織成員國，還有眾多非成員國。巴西和泰國等國還以關聯(lián)成員身份參與了PISA項目董事會3，即在董事會當中除了回避審議新成員加入等特殊事項，可以和OECD成員國一樣參與有關決策。4

3.專業(yè)測評公司

為了使有限資源發(fā)揮最大效用，PISA項目團隊通過招標的方式，外包給專業(yè)測評公司負責PISA項目的設計、實施和初步數(shù)據(jù)整理等。這些承包商需要在 PISA理事會確立的框架內開展活動。PISA 2000—2012年承包商聯(lián)合體主要由澳大利亞教育理事會（ACER）牽頭。PISA自2015年以來承包商主要有美國教育測試服務中心和英國培生集團，其中前者負責調查的管理和監(jiān)督、工具開發(fā)、調整和分析以及電子平臺的開發(fā)等，后者負責制定主測學科和問卷框架的框架等。還有一些公司長期參與PISA項目有關工作，如比利時絞盤語言質量控制公司（cApStAn Linguistic Quality Control）負責有關測評用語言的質量保障。承包商牽頭單位建立了技術咨詢小組，以促進各技術支撐單位之間的互動和協(xié)同，并確保技術質量。

四、PISA項目的效能建設策略

PISA項目具有較強的國際影響力和較高的組織效能，這與其多年來推進以下效能建設策略密不可分：

1.植根于自身經(jīng)驗

PISA項目由教育系統(tǒng)指標項目（Indicators Education Systems，以下簡稱INES）孕育而來。INES成立于1988年，下設五個網(wǎng)絡小組，主要為《教育概覽》開發(fā)教育指標。其中網(wǎng)絡A組由美國牽頭，負責開發(fā)學生成績方面的指標。當時經(jīng)合組織并沒有相應的國際學生成績方面的數(shù)據(jù)采集系統(tǒng)，不得不采用國際教育成就評價協(xié)會（IEA）的測評數(shù)據(jù)。在使用過程中，A組發(fā)現(xiàn)這些測評數(shù)據(jù)在指標覆蓋范圍、有效性、可比性和及時性等方面存在缺陷。5 為了更好地回應決策者對于學生學習成績及其國際比較方面的信息需求，網(wǎng)絡A組于1995年開始規(guī)劃經(jīng)合組織的學生成績數(shù)據(jù)收集方案，并在1997年得到經(jīng)合組織理事會批準。首任PISA項目董事會主席是時任INES網(wǎng)絡A組主席的美國國家教育統(tǒng)計中心國際事務部主任尤金·歐文（Eugene Owen）。6

1990年代初，經(jīng)合組織、加拿大統(tǒng)計局、美國教育考試服務中心以及多個國家合作開展國際成人素養(yǎng)調查（International Adult Literacy Survey，以下簡稱IALS）。1 IALS于1994—1998年進行了三次數(shù)據(jù)收集工作，涉及22個國家。這為PISA項目開發(fā)和實施提供了許多寶貴經(jīng)驗，包括但不限于以下方面：（1）以百分比形式報告某一指標測試結果的精熟度水平;（2）結合學校場景調整使用IALS有關測試條目;（3）借鑒IALS的管理模式，利用成員國的優(yōu)勢以及國家和國際層面現(xiàn)有基礎設施，并鼓勵國家教育統(tǒng)計機構的合作與發(fā)展等。2

2.吸納外部人才與經(jīng)驗

號稱“PISA項目發(fā)起者”3 的安德烈亞斯·施萊希爾（Andreas Schleicher）在1994年之前，曾擔任國際教育評價協(xié)會（IEA）分析部主任。國際教育成就評價協(xié)會（IEA）自1958年成立以來開展了眾多大規(guī)模國際學生測評項目，積累了豐富經(jīng)驗，其中包括1980年代的第二次國際數(shù)學研究（SIMS）、國際自然科學研究（SISS）和1990年代的第三次國際數(shù)學和科學研究（TIMSS）等。施萊希爾把自己對教育的洞察力歸功于在IEA結識的三位國際比較與測評方面杰出專家的影響：IEA首任主席托爾斯騰·胡森（Torsten Husen），IEA第二任主席內維爾·波斯爾思韋特（Neville Postlethwaite），IEA第二次國際科學研究（SISS）項目理事會主席和IEA技術執(zhí)行小組主席約翰·基夫斯（John Keeves）。此外，PISA的許多專家也是TIMSS專家4，PISA主要承包機構如澳大利亞教育理事會（ACER）和美國韋斯特統(tǒng)計公司（Westat）等也是TIMSS服務機構。這在一定程度上表明：PISA項目較好地吸納了IEA有關人才和社會關系網(wǎng)絡等。但同時PISA注重和TIMSS存在的差異，從而逐步形成自身特色，例如，PISA數(shù)學測評有別于TIMSS數(shù)學測評，側重以知識為線索的測評框架設計，體現(xiàn)出以問題解決和核心素養(yǎng)為重心的測評框架設計模式等。5

3.基于績效和需求選人用人

經(jīng)合組織在人員遴選方面按需設崗，注重基于核心勝任力的擇優(yōu)錄用。司局負責人在咨詢人力資源部門負責人之后，可決定部門主管以下級別的人員選用;秘書長在咨詢相關司局負責人和人力資源主管部門負責人之后，可決定部門主管及以上級別人員選用。6 經(jīng)合組織對正式人員采用固定期限和非固定期限兩種合同，并依據(jù)績效和需求進行多次遴選：（1）初次在經(jīng)合組織就業(yè)的正式人員簽固定期限合同，一般不超過3年;經(jīng)合組織將依據(jù)工作績效決定是否予以續(xù)簽，續(xù)簽最長不超過2年，即整個固定期限合同最長不超過5年。（2）在固定期限合同將滿5年時，可以申請轉為非固定期限合同。7 申請是否獲得批準取決于個人工作業(yè)績和發(fā)展?jié)摿Γ?jīng)合組織戰(zhàn)略定位、項目人才需求以及可獲得經(jīng)費等。（3）部門負責人以上領導人員一律采用固定期限合同。非固定期限合同相對穩(wěn)定，但并不意味著終身雇用，也可因為經(jīng)合組織人才需求變化、預算緊縮或者績效不足等予以解雇。8這些使得組織可以更加準確遴選和使用符合其需求的高素質人才，使各級各類人員保持一定的動力和壓力，并給優(yōu)秀人才提供相對穩(wěn)定的發(fā)展預期，從而提升整個隊伍的組織效能。

4.加強共同體建設

PISA項目團隊成員具有相似的文化背景和知識結構：主要來自經(jīng)合組織成員國，并且集中在七國集團國家;大多數(shù)人是在西歐和北美接受的教育;學科背景集中在經(jīng)濟學、教育學和社會學等領域。經(jīng)合組織積極推進學習型組織建設，主要包括：開設有關經(jīng)合組織運作管理、議事程序、行為規(guī)范等方面的入職培訓;提供統(tǒng)計分析、溝通技巧和報告撰寫等方面的常設培訓課程;支持團隊成員參與橫向跨學科項目和進行輪崗和外派等;通過云盤開放共享數(shù)據(jù)和文獻資料;定期開展績效評價和反饋，使工作人員認識自己的優(yōu)勢和挑戰(zhàn)等。PISA項目團隊還努力創(chuàng)造寬松、融洽的工作環(huán)境：通過形式多樣的學術和文體活動，促進同事之間的交流互動;團隊成員可以自主確定達成工作目標的途徑和方法;可以申請靈活的工作時間或地點等。1 在相似的文化背景、知識結構、價值觀念和溝通交流等作用下，PISA項目團隊形成了認知共同體，即Peter M. Haas所定義的：“一個由某一特定領域有公認的專長和能力、具有該領域政策上知識權威的專家所組成的網(wǎng)絡。”2 共同體的形成有助于工作人員收獲歸屬感，有助于形成默契的合作關系，提升整體效能。

5.匯聚多方力量與資源

經(jīng)合組織是一個政府間國際組織，有關項目得到了參與國/經(jīng)濟體政府尤其是歐美等發(fā)達成員國政府的大力支持。具體到PISA項目，參與國/經(jīng)濟體教育部高級官員或國家考試或測評機構負責人參與董事會，負責有關決策和管理，并為在國內實施提供了合法性和權威性;PISA項目經(jīng)理可以借助國內現(xiàn)有教育行政和管理網(wǎng)絡，較為順暢地推進項目實施工作;在參與國/經(jīng)濟體推薦基礎上，PISA項目有效匯聚和調動了一批國際一流專家，他們不僅參與了項目開發(fā)和實施工作，并在PISA項目早期階段擔任了報告撰寫的主力。與這些專家的合作帶動了PISA項目團隊人員的能力建設，形成了分析報告撰寫的基本模式。當然，委托專家報告也存在一些問題，如部分報告存在拖延現(xiàn)象，個別報告被認為學術性過強而沒有發(fā)布，或者經(jīng)過PISA項目團隊調整才發(fā)布。3 這在一定程度上也迫使PISA項目團隊加強自身能力建設，并逐步全面承擔有關報告的撰寫工作。另外，PISA項目團隊通過招標方式遴選國際知名的專業(yè)測評機構，其在PISA項目整體框架內，具體承擔一些工具開發(fā)、組織實施和數(shù)據(jù)清理等工作。

6.推動項目持續(xù)創(chuàng)新

一般來說，持續(xù)進行的周期性項目在多次輪回后容易讓人產(chǎn)生倦怠，但是PISA項目參與國家和經(jīng)濟體的數(shù)量卻在不斷增長。團隊在保持整體穩(wěn)定性和可比性的同時，也在不斷地推動創(chuàng)新。PISA不僅有閱讀、數(shù)學和科學三大主測科目，還增設了項目可選擇參加的“新領域”，如2003年問題解決能力、2006年基于計算機的學生能力、2009年數(shù)字技術、2012年財經(jīng)素養(yǎng)、2015年協(xié)作問題解決能力、2018年全球勝任力、2022年創(chuàng)新能力和2025年外語能力等;除了占據(jù)重要位置的質量和公平主題，還分析了學生福利、教師政策、家長參與、財經(jīng)教育和環(huán)保等主題;PISA項目團隊也在積極開發(fā)面向發(fā)展中國家的PISA測評和基于PISA數(shù)據(jù)的學校測評;除了國際層面的分析，還針對美國、墨西哥、日本等國家做了深入剖析;建立了與經(jīng)合組織其他測評項目，如國際教師教與學調查（TALIS）和國際成人素養(yǎng)調查（PIAAC）等數(shù)據(jù)關聯(lián)與協(xié)同分析，從而提升解釋能力。PISA項目團隊也在積極牽頭部分測評框架的研制工作，而此前這些工作主要由承包機構完成。這些創(chuàng)新性工作不斷向PISA項目團隊成員不斷提出新的挑戰(zhàn)，促使他們提升工作能力;同時把更多的重要環(huán)節(jié)納入自我控制當中，加強整個項目的系統(tǒng)設計，有助于實現(xiàn)全價值鏈的增值，從而持續(xù)提升PISA項目的吸引力和影響力。

五、結語

PISA項目是經(jīng)合組織最具影響力的項目，其知識產(chǎn)品和人員團隊建設也卓有成效。盡管經(jīng)合組織是一個國際組織，但其PISA項目團隊以上效能建設策略，對教育領域有關國際組織和我國學校等公共組織效能建設，提供了以下可資借鑒的思路和舉措：（1）新項目的開發(fā)盡可能立足于已有的比較優(yōu)勢和良好經(jīng)驗基礎之上;（2）開放視野，積極借鑒外部相關經(jīng)驗，引進關鍵人才，并融入成熟的社會網(wǎng)絡，同時注重錯位競爭，形成特色;（3）推進學習型組織建設，推動形成認知共同體，積極創(chuàng)造寬松、融洽和公平的內部環(huán)境;（4）匯聚多方力量進行合作共建，對于非核心業(yè)務或量大重復的環(huán)節(jié)進行服務外包，并注重做好框架設計和監(jiān)控管理;（5）基于績效和需求選用人才，構建靈活的彈性用人機制;（6）在保持整體穩(wěn)定性基礎上，積極探索并推進多種形式的創(chuàng)新實踐，形成一定挑戰(zhàn)性和新鮮感，激發(fā)團隊人員的活力和動力。