誰編制了PISA項目報告？

方樂

摘? 要：經濟合作與發展組織（OECD）被公認為教育領域高效能的國際組織，其開展的一系列項目受到國際社會廣泛關注，其旗艦項目國際學生測評項目（PISA）更是引領了全球教育的變革和發展的潮流。PISA項目報告主要有OECD秘書處的PISA項目團隊撰寫，并得到了參與項目國家和經濟體代表以及專業測評公司的支持。文章梳理總結了PISA項目的以下組織效能建設策略：植根OECD已有經驗;吸納外部人才與經驗;基于績效和需求選人與用人;積極加強共同體建設;匯聚多方力量與資源;推動項目持續創新。

關鍵詞：PISA;教育;組織效能;建設策略

一、引言

作為經濟合作與發展組織（Organization for Economic Cooperation and Development，以下簡稱“經合組織”/“OECD”）的旗艦項目，國際學生測評項目（Programme for International Students Assessment，以下簡稱“PISA”）旨在通過學生測試成績和問卷調查，為各國政府和教育政策制定者提供多方面教育信息，了解本國教育發展狀況，分析造成當下教育狀況的各種原因，從而為各國制定正確有效的教育決策及推進教育改革發展提供國際參照數據和成功經驗。1 自2000年PISA項目首次測評以來，全球累計已經有90多個國家和經濟體的大約300萬名15歲學生參加了PISA測評。其中最近一次測評（PISA 2018）來自79個國家和經濟體（其中非經合組織成員國/經濟體42個）的60萬15歲學生參加，他們代表了這些國家3200萬同齡學生。2 2009年以來，我國包括上海在內的四個省市3 作為整體測評對象先后參加了PISA測評，在參測國家（地區）中多次取得第一名的優異成績。由此引起了世界對中國基礎教育的高度關注，充分反映了中國基礎教育的成就，也引發了針對性改革。PISA已成為世界上比較教育體系質量、公平和效率的首要標準，也是各國和經濟體用來調整教育政策的有力工具。1 聯合國教科文組織（UNESCO）指出：“在過去20年，OECD在國際教育領域所做的創新性貢獻，鮮有國際組織能與之媲美，其眾多項目中PISA項目備受關注。”2

經合組織既沒有法規約束手段，也沒有經費激勵杠桿。有專家指出，經合組織“從來沒有能夠依靠除了‘好論點之外的任何東西”3，但“它通過統計數據和研究報告等形成了一個無可爭辯的品牌”。4 經合組織內部工作人員也指出：“經合組織的合法性和影響力在很大程度上取決于人們對其信息和分析質量的感知。”5 這些表明經合組織主要依靠知識產品發揮影響，而知識生產的關鍵在于人才及其團隊建設。因為任何組織的效能都在很大程度上取決于團隊成員的態度和行為以及團隊成員業務能力的充分發揮。6 經合組織秘書長安赫爾·古里亞（Angel Gurría）指出：“在追求卓越過程中，經合組織的最優資產是其工作人員;他們的技術、能力、經驗和專業精神是完成組織核心使命和戰略目標的關鍵。”7 故本文試圖從組織效能的視角，探究PISA項目團隊，尤其是初步報告和深度報告的主要編制人員的特點和效能建設策略，以期對包括學校在內的公共組織效能建設提供借鑒。

二、PISA項目知識產品

1.主要類型

PISA項目面向15歲學生，每3年開展一次，每次從閱讀、數學、科學中選擇一門作為主要科目，另外兩門作為次要科目。此外，每次PISA也在不斷探索可選擇參加的領域，如協作問題解決能力和全球勝任力等。PISA不僅考查學生是否重現所學知識，還考查他們在校內和校外的陌生環境中應用知識的能力。PISA項目提供以下主要知識產品（見表1）：（1）歷次測評的結果數據，包括SASTM 和SPSS?兩種格式的數據;（2）有關整體情況的初步報告和利用PISA數據進行專題探討的深度報告;（3）測評框架、技術報告、數據分析手冊等技術類報告;（4）針對具體國家或地區的解讀，如針對部分國家的注釋和《教育系統中的成功者與變革者》系列報告，涵蓋美國、日本、希臘和墨西哥等國家;（5）2011年開始推出《聚焦PISA》系列簡報，基本上每月一期，篇幅控制在4頁，結合PISA數據針對具體政策問題進行簡要論述;（6）描述作者階段性研究成果的工作論文，出版是為了激發對經合組織有關工作的廣泛討論，但這些工作論文不代表經合組織的官方觀點;（7）通過門戶網站、社交媒體、報紙期刊和會議論壇等，宣講或探討PISA項目的信息資料。其中，第7項是前面6項的衍生和宣傳，并且散布范圍比較廣，這里不再贅述。

2.項目報告

經合組織的知識產品均可以在其網站開放式獲取。截至2020年底，除了測評結果數據，能夠在經合組織網上圖書館找到的有關PISA項目報告為236份。這些報告版權屬于OECD，但在序言或致謝中會明確提及主要執筆人員。依據主要執筆人所在單位劃分，這些報告可以分為：主要由PISA項目團隊撰寫、委托外部專家撰寫和雙方合作撰寫（見表2）。整體上來看，PISA項目團隊產出了大多數項目報告和簡報等出版物，但數據或技術報告主要依靠外部專家。從連續性和完整性來看，初步報告和深度報告是經合組織PISA項目團隊的核心知識產品。57份初步報告和深度報告中大多數（超過70%）由PISA項目團隊完成。對這些初步報告附錄“PISA項目合作與開發：一項合作的努力”當中的秘書處人員清單進行整理，可得知PISA項目團隊工作人員共143人次，其中承擔分析服務職責人員，即數據分析和報告編制人員有90人次;去重之后團隊工作人員和分析服務人員分別為81人和47人;其中作為第一作者執筆撰寫報告的有16人。

進一步梳理57份初步報告和深度報告的主要執筆人員、采用的測評數據輪次和發布報告年份方面信息（見表2），可以看出：PISA2000和PISA2003大多數報告由外部專家編制，并且完成測評報告的年數較多;PISA2006和PISA2009有關報告大多數由PISA項目團隊完成，完成分析報告年數有所減少;PISA2012和PISA2015有關報告全部由PISA項目團隊完成，完成分析報告的年數穩定在4年左右（見圖1）。1另外需要指出，《教育系統中成功者和變革者》系列報告和《聚焦PISA》月度系列簡報等都是2011年以后推出的。這些表明：PISA項目團隊組織效能在不斷提升，尤其是2011年之后更加穩定和高產。

三、PISA項目報告編制者

PISA項目報告編制者主要有以下三種力量：經合組織秘書處PISA項目團隊、參與PISA項目的國家代表和專業測評公司等。其中PISA項目團隊主要發揮統籌協調作用;參與PISA項目的國家和經濟體主要有三類代表：進入PISA項目董事會的代表主要負責項目決策和指導，有關專家代表可以對項目設計和工具開發提供咨詢意見，國家PISA項目經理主要負責項目在本國的實施和管理;專業測評公司主要負責項目開發與實施工作等。具體情況如下：

1.PISA項目團隊

PISA項目團隊正式人員為國際公務員，主要來自經合組織成員國;學科背景涉及經濟學、教育學、社會學等，其中經濟學背景人數最多，達到1/3以上。非正式人員如實習生、顧問和借調人員等，可以來自非成員國，并且托馬斯·亞歷山大學者獎學金項目2 更注重鼓勵新興和發展中國家人員申請。人員的多元化背景為PISA項目團隊提供了豐富多樣的知識和經驗，有助于形成一個更有活力、彈性和高效的團隊，從而更好地應對全球化經濟和社會發展帶來的挑戰。經合組織在人員遴選方面注重基于核心勝任力的擇優錄用，尤其關注以下三類核心能力：成果導向類能力、人際關系構建能力和面向未來的戰略規劃能力。PISA項目團隊核心成員相對穩定，如自1995年籌備以來負責人一直沒有變更，在16位擔任報告撰寫第一作者的人員中，12人（占比75%）依然留在PISA項目團隊，這保障了項目的穩定性和連續性。

2.參與PISA項目國家和經濟體代表

參與PISA項目國家和經濟體可以采用三種方式塑造項目：（1）任命代表參與PISA項目董事會，這些人員一般為教育部高級官員或國家測評與考試機構負責人等，他們可以直接參與國內有關決策;他們在PISA項目董事會1 根據經合組織目標，確定有關規劃和任務優先事項以及工具開發工作等。（2）推薦本國進入閱讀、數學和科學學科和問卷設計等方面的專家，由秘書處進行遴選和任命。他們主要負責把PISA項目政策目標與國際上現有的最佳專業知識聯系起來，并在PISA項目總體目標和框架內就學科事項和技術問題在各國之間達成共識。（3）安排評估/調研方面的專家擔任本國PISA項目經理，他們在利用國內現成的教育行政和管理網絡，按照商定的程序實施項目，并在核實和評價調查結果、分析和出版物等方面發揮重要作用。2 需要指出的是，每次參與PISA項目的不僅包括經合組織成員國，還有眾多非成員國。巴西和泰國等國還以關聯成員身份參與了PISA項目董事會3，即在董事會當中除了回避審議新成員加入等特殊事項，可以和OECD成員國一樣參與有關決策。4

3.專業測評公司

為了使有限資源發揮最大效用，PISA項目團隊通過招標的方式，外包給專業測評公司負責PISA項目的設計、實施和初步數據整理等。這些承包商需要在 PISA理事會確立的框架內開展活動。PISA 2000—2012年承包商聯合體主要由澳大利亞教育理事會（ACER）牽頭。PISA自2015年以來承包商主要有美國教育測試服務中心和英國培生集團，其中前者負責調查的管理和監督、工具開發、調整和分析以及電子平臺的開發等，后者負責制定主測學科和問卷框架的框架等。還有一些公司長期參與PISA項目有關工作，如比利時絞盤語言質量控制公司（cApStAn Linguistic Quality Control）負責有關測評用語言的質量保障。承包商牽頭單位建立了技術咨詢小組，以促進各技術支撐單位之間的互動和協同，并確保技術質量。

四、PISA項目的效能建設策略

PISA項目具有較強的國際影響力和較高的組織效能，這與其多年來推進以下效能建設策略密不可分：

1.植根于自身經驗

PISA項目由教育系統指標項目（Indicators Education Systems，以下簡稱INES）孕育而來。INES成立于1988年，下設五個網絡小組，主要為《教育概覽》開發教育指標。其中網絡A組由美國牽頭，負責開發學生成績方面的指標。當時經合組織并沒有相應的國際學生成績方面的數據采集系統，不得不采用國際教育成就評價協會（IEA）的測評數據。在使用過程中，A組發現這些測評數據在指標覆蓋范圍、有效性、可比性和及時性等方面存在缺陷。5 為了更好地回應決策者對于學生學習成績及其國際比較方面的信息需求，網絡A組于1995年開始規劃經合組織的學生成績數據收集方案，并在1997年得到經合組織理事會批準。首任PISA項目董事會主席是時任INES網絡A組主席的美國國家教育統計中心國際事務部主任尤金·歐文（Eugene Owen）。6

1990年代初，經合組織、加拿大統計局、美國教育考試服務中心以及多個國家合作開展國際成人素養調查（International Adult Literacy Survey，以下簡稱IALS）。1 IALS于1994—1998年進行了三次數據收集工作，涉及22個國家。這為PISA項目開發和實施提供了許多寶貴經驗，包括但不限于以下方面：（1）以百分比形式報告某一指標測試結果的精熟度水平;（2）結合學校場景調整使用IALS有關測試條目;（3）借鑒IALS的管理模式，利用成員國的優勢以及國家和國際層面現有基礎設施，并鼓勵國家教育統計機構的合作與發展等。2

2.吸納外部人才與經驗

號稱“PISA項目發起者”3 的安德烈亞斯·施萊希爾（Andreas Schleicher）在1994年之前，曾擔任國際教育評價協會（IEA）分析部主任。國際教育成就評價協會（IEA）自1958年成立以來開展了眾多大規模國際學生測評項目，積累了豐富經驗，其中包括1980年代的第二次國際數學研究（SIMS）、國際自然科學研究（SISS）和1990年代的第三次國際數學和科學研究（TIMSS）等。施萊希爾把自己對教育的洞察力歸功于在IEA結識的三位國際比較與測評方面杰出專家的影響：IEA首任主席托爾斯騰·胡森（Torsten Husen），IEA第二任主席內維爾·波斯爾思韋特（Neville Postlethwaite），IEA第二次國際科學研究（SISS）項目理事會主席和IEA技術執行小組主席約翰·基夫斯（John Keeves）。此外，PISA的許多專家也是TIMSS專家4，PISA主要承包機構如澳大利亞教育理事會（ACER）和美國韋斯特統計公司（Westat）等也是TIMSS服務機構。這在一定程度上表明：PISA項目較好地吸納了IEA有關人才和社會關系網絡等。但同時PISA注重和TIMSS存在的差異，從而逐步形成自身特色，例如，PISA數學測評有別于TIMSS數學測評，側重以知識為線索的測評框架設計，體現出以問題解決和核心素養為重心的測評框架設計模式等。5

3.基于績效和需求選人用人

經合組織在人員遴選方面按需設崗，注重基于核心勝任力的擇優錄用。司局負責人在咨詢人力資源部門負責人之后，可決定部門主管以下級別的人員選用;秘書長在咨詢相關司局負責人和人力資源主管部門負責人之后，可決定部門主管及以上級別人員選用。6 經合組織對正式人員采用固定期限和非固定期限兩種合同，并依據績效和需求進行多次遴選：（1）初次在經合組織就業的正式人員簽固定期限合同，一般不超過3年;經合組織將依據工作績效決定是否予以續簽，續簽最長不超過2年，即整個固定期限合同最長不超過5年。（2）在固定期限合同將滿5年時，可以申請轉為非固定期限合同。7 申請是否獲得批準取決于個人工作業績和發展潛力，經合組織戰略定位、項目人才需求以及可獲得經費等。（3）部門負責人以上領導人員一律采用固定期限合同。非固定期限合同相對穩定，但并不意味著終身雇用，也可因為經合組織人才需求變化、預算緊縮或者績效不足等予以解雇。8這些使得組織可以更加準確遴選和使用符合其需求的高素質人才，使各級各類人員保持一定的動力和壓力，并給優秀人才提供相對穩定的發展預期，從而提升整個隊伍的組織效能。

4.加強共同體建設

PISA項目團隊成員具有相似的文化背景和知識結構：主要來自經合組織成員國，并且集中在七國集團國家;大多數人是在西歐和北美接受的教育;學科背景集中在經濟學、教育學和社會學等領域。經合組織積極推進學習型組織建設，主要包括：開設有關經合組織運作管理、議事程序、行為規范等方面的入職培訓;提供統計分析、溝通技巧和報告撰寫等方面的常設培訓課程;支持團隊成員參與橫向跨學科項目和進行輪崗和外派等;通過云盤開放共享數據和文獻資料;定期開展績效評價和反饋，使工作人員認識自己的優勢和挑戰等。PISA項目團隊還努力創造寬松、融洽的工作環境：通過形式多樣的學術和文體活動，促進同事之間的交流互動;團隊成員可以自主確定達成工作目標的途徑和方法;可以申請靈活的工作時間或地點等。1 在相似的文化背景、知識結構、價值觀念和溝通交流等作用下，PISA項目團隊形成了認知共同體，即Peter M. Haas所定義的：“一個由某一特定領域有公認的專長和能力、具有該領域政策上知識權威的專家所組成的網絡。”2 共同體的形成有助于工作人員收獲歸屬感，有助于形成默契的合作關系，提升整體效能。

5.匯聚多方力量與資源

經合組織是一個政府間國際組織，有關項目得到了參與國/經濟體政府尤其是歐美等發達成員國政府的大力支持。具體到PISA項目，參與國/經濟體教育部高級官員或國家考試或測評機構負責人參與董事會，負責有關決策和管理，并為在國內實施提供了合法性和權威性;PISA項目經理可以借助國內現有教育行政和管理網絡，較為順暢地推進項目實施工作;在參與國/經濟體推薦基礎上，PISA項目有效匯聚和調動了一批國際一流專家，他們不僅參與了項目開發和實施工作，并在PISA項目早期階段擔任了報告撰寫的主力。與這些專家的合作帶動了PISA項目團隊人員的能力建設，形成了分析報告撰寫的基本模式。當然，委托專家報告也存在一些問題，如部分報告存在拖延現象，個別報告被認為學術性過強而沒有發布，或者經過PISA項目團隊調整才發布。3 這在一定程度上也迫使PISA項目團隊加強自身能力建設，并逐步全面承擔有關報告的撰寫工作。另外，PISA項目團隊通過招標方式遴選國際知名的專業測評機構，其在PISA項目整體框架內，具體承擔一些工具開發、組織實施和數據清理等工作。

6.推動項目持續創新

一般來說，持續進行的周期性項目在多次輪回后容易讓人產生倦怠，但是PISA項目參與國家和經濟體的數量卻在不斷增長。團隊在保持整體穩定性和可比性的同時，也在不斷地推動創新。PISA不僅有閱讀、數學和科學三大主測科目，還增設了項目可選擇參加的“新領域”，如2003年問題解決能力、2006年基于計算機的學生能力、2009年數字技術、2012年財經素養、2015年協作問題解決能力、2018年全球勝任力、2022年創新能力和2025年外語能力等;除了占據重要位置的質量和公平主題，還分析了學生福利、教師政策、家長參與、財經教育和環保等主題;PISA項目團隊也在積極開發面向發展中國家的PISA測評和基于PISA數據的學校測評;除了國際層面的分析，還針對美國、墨西哥、日本等國家做了深入剖析;建立了與經合組織其他測評項目，如國際教師教與學調查（TALIS）和國際成人素養調查（PIAAC）等數據關聯與協同分析，從而提升解釋能力。PISA項目團隊也在積極牽頭部分測評框架的研制工作，而此前這些工作主要由承包機構完成。這些創新性工作不斷向PISA項目團隊成員不斷提出新的挑戰，促使他們提升工作能力;同時把更多的重要環節納入自我控制當中，加強整個項目的系統設計，有助于實現全價值鏈的增值，從而持續提升PISA項目的吸引力和影響力。

五、結語

PISA項目是經合組織最具影響力的項目，其知識產品和人員團隊建設也卓有成效。盡管經合組織是一個國際組織，但其PISA項目團隊以上效能建設策略，對教育領域有關國際組織和我國學校等公共組織效能建設，提供了以下可資借鑒的思路和舉措：（1）新項目的開發盡可能立足于已有的比較優勢和良好經驗基礎之上;（2）開放視野，積極借鑒外部相關經驗，引進關鍵人才，并融入成熟的社會網絡，同時注重錯位競爭，形成特色;（3）推進學習型組織建設，推動形成認知共同體，積極創造寬松、融洽和公平的內部環境;（4）匯聚多方力量進行合作共建，對于非核心業務或量大重復的環節進行服務外包，并注重做好框架設計和監控管理;（5）基于績效和需求選用人才，構建靈活的彈性用人機制;（6）在保持整體穩定性基礎上，積極探索并推進多種形式的創新實踐，形成一定挑戰性和新鮮感，激發團隊人員的活力和動力。