數據第一：第三方評估的靈魂

何懷金 龔春燕 田海林

作為第三方評估機構，重慶市教育評估院（重慶市基礎教育質量監測中心）堅持專業化發展，堅持“數據·創新·智慧”戰略，樹立大數據思維，堅持讓數據說話、讓數據發聲，走“監測是事實判斷、評估是價值判斷、評估基于監測”的道路，組織開展了涵蓋學前、義務、普高、中職、高等、教師教育、家庭教育等多領域、多層次的教育質量監測工作，有效采集、挖掘了重慶市的教育大數據、發布了專業的監測評估報告，促進了教育的改革發展。

黨的十八屆五中全會明確提出“實施國家大數據戰略”，為教育評估監測事業，尤其是第三方教育評估的創新發展、智慧化發展指明了前進的方向。

我們已身處大數據的時代，基于數據的教育評估是教育最前沿的課題。數據，是第三方教育評估的靈魂。大數據具有“5V”的特點，即體量大（Volume）、類型雜（Variety）、速度快（Velocity）、價值高（Value）和真實性強（Veracity）。作為第三方評估機構，要想在管辦評分離的改革進程中有所作為，就必須要緊緊圍繞數據做文章，必須擁有專業的技術、發布專業的報告、堅守專業的價值。

專業性工具：第三方評估的“開山斧”

1.構建監測工具庫

工具是我們評價的基礎，我們從7年前“借”工具，到獨立研發工具，這是一個從量到質的飛躍。工具研發專家團隊按照國際上通行的程序，組建了語文、數學、英語、科學及創造力、閱讀能力、學生心理發展和教師發展、學校發展等若干專家小組，通過召開各類研討會、分析會、工作會，調研、訪談，保證了工具研究的實效性和科學性。研制出了涵蓋學前、義務、普高、中職、高職、本科、教師教育、家庭教育8類共60余套教育教學質量評價工具。2015年，我們還與世界經合組織OECD進行戰略合作，開展了PISA工具的中國化實踐研究。

2.運用工具采集數據

重慶市每年都堅持開展基礎教育質量監測，還對職業教育、學前教育、高等教育的就業狀況和人才培養情況、家庭教育狀況等進行了監測，初步建成了涵蓋基礎教育、職業教育、高等教育、家庭教育等領域的全方位教育大數據庫。

實時采集學生綜合素質評價數據。實時采集學生成長、教師教育教學、學校管理等信息，建立綜合評價大數據模型，診斷教育中存在的問題，定量地評價教學質量。2012年以來，評估院累計為重慶市考試院提供了累計近100萬份高中學生綜合素質報告，為高校招生錄取提供了重要依據。同時，我們還開展了義務教育、中職教育階段學生綜合素質評價工作。

信息化平臺：第三方評估的“夢工廠”

為提高監測效率，建立了重慶市基礎教育質量監測數據庫，同時，自主研發了信息化監測評價平臺，減少了大量人力、物力的投入。研發數據分析軟件平臺。通過廣泛調研不同類型、不同層次的學校，選取了不同經濟發展水平的3個區縣和20所學校作為測評實驗基地，兩年后推廣到全市使用。通過對這些實驗基地的教育質量監測與評價的實踐和追蹤，編寫了用于監測評價的軟件平臺，提高了工作效率，實現了分析及報告生成自動化，主要解決了以下幾個方面的問題。

采用圖像識別技術，實現紙質數據采集自動化。針對相關軟件售價太高、無法實現對題卡合一問卷識別自動化、使用成本高的情況，自主研發了網上閱卷掃描識別系統，實現了監測所需的多題本合一、題卡合一、主觀題分段評分的特殊功能。

采用網絡問卷填答，實現教師數據采集有序化。紙質問卷填答方式具有填答時空限制，且后期處理復雜，成本高，因此，研發了易于操作和使用的并與后臺數據分析清理相結合的網絡問卷系統。

采用人工智能技術，實現超量數據清理精準化。通過研發監測數據清理軟件，將原本借助于其他軟件進行清理的工作，由20余人一個月完成的工作量縮短為1個人一周完成，提高了工作效率。

構建常用分析模型，實現分析生成報告自動化。要使評價結果有針對性和準確性，需要科學的分析方法和完善的指標體系。該研究通過挖掘和提煉采集到的數據，構建了一系列分析模型，并在此基礎上編寫分析軟件，自動生成近千份學校和區縣報告，數十萬份學生成長報告。

智慧化服務：第三方評估的“生命線”

1.建立監測評估三級機制

建立了市級評價、區縣評價和學校評價三級監測評估機制。市級評價旨在統籌城鄉均衡，通過抽樣采集全市數據，建立數據庫，分析數據，向各級教育行政部門提供政策建議，促進教育資源的合理配置，統籌城鄉教育均衡發展。區縣評價關注縣域均衡，配合完成國家和全市教育評價的組織和協調工作；在市監測中心指導下，組織實施針對本區縣的教育評價工作。學校評價關心校際均衡，減少傳統意義上的統考統測，樹立新的質量關，對學生進行過程性評價，逐步實現以特色辦學為前提的校際發展的均衡。

評價結果會反饋給多個對象，如教育行政部門、學校、教師和學生。為教育行政部門提供決策依據，促進學校管理體制改革，促進教師教育教學能力發展，促進學生健康全面成長。

2.建立監測評估方法模型

結合重慶市的實際情況，我們研究出了一系列教育教學質量測評模型，如義務教育均衡系數測算模型、城鄉一體化教育資源配置模型、教育現代化監測模型、學校辦學規模測算模型的多維模型等，并將這些數學模型用于實際評價和數據分析。構建的一系列模型在多個區縣得到了檢驗，在提升教學質量、教師專業能力等方面成效明顯。其中，義務教育均衡發展測算系數得到國務院領導的批示，相關計算模型被教育部采納。數十個兄弟省市督導或評估監測單位到重慶市就本研究進行深度交流和學習。我們就研究出的一系列模型在教育部和國務院教育督導委員會辦公室舉辦的全國督導或評估監測工作會上做了專題發言，引起廣泛關注，并在多個省市推廣。

第三方評估助推教育發展

1.服務政府教育決策

7年來，我們為重慶市教育行政部門提供教育質量監測評估報告40余份、區縣報告200余份。針對報告提出的問題和建議，重慶市出臺了《重慶市教育委員會關于印發減輕義務教育階段學生過重課業負擔，深入推進素質教育十項規定的通知》（簡稱“減負十條”）等10余個教育行政決策文件，有效地減輕了學生學業負擔，改革了課程設置，改變了教師教學行為，提升了教育質量。

我們依據監測的結果制定了《重慶市義務教育階段學校質量標準》（以下簡稱《標準》）。《標準》通過對數億個數據的分析、提煉，初步構建了可測、可評的教育質量指標體系，確定了20個測評學校質量的指標，包含5個指數、8個滿意度百分比、7個學校常規指標，包含過程性質量和結果性質量兩個板塊，十項內容。其中，過程性質量包括組織管理、德育工作、教師隊伍、課程建設和課堂教學；結果性質量包括學生品行、學業水平、身心健康、興趣特長和學業負擔。

區縣教育行政部門使用評價報告改變了決策。例如，重慶市某區通過解讀近600頁的評價報告，不論是在學生的品德素養、學業成就、身心健康、實踐創新方面，還是在教師教學的行為、對培訓的感受、職業倦怠等方面，該區教育行政部門都從報告中找到若干需要改進的問題，如針對區教師培訓中“39.6%的教師認為系統性不夠，29.8%的教師認為針對性不強”的現狀，區教師培訓單位實施“先調查再設計培訓菜單”的方式加以改進。

2.促進學校教學改革

大數據庫中存儲了來自教師、學生、家長的海量數據，信息化分析平臺通過模型自動分析這些數據之間的相互關系和對學生學習質量的影響，獲得對學生學習質量有顯著影響的行為指標，總結其規律，并存儲到教育教學規律結果庫中，供校長和一線教師研究和學習。

隨著數據庫里數據的動態變化，教育教學規律結果庫里的信息也隨時更新。學校的領導根據監測結果，改變了管理方式，有針對性地實施了一系列措施。重慶市教育評估院為學校做的評價報告圖文并茂，有效診斷了教育質量現狀，既有學業質量，也有學生的品德、體育、心理、興趣方面的情況；既有學校管理的診斷報告，也有教師教學行為的評估，為學校管理、教師教育教學、學生成長提供了科學依據。