監測評估：“互聯網+”時代職業教育質量評估體系創新

李鵬 朱德全

摘要：為探索“互聯網+”時代職業教育質量評估體系的變革創新，該文從國家戰略需求出發，以現代化治理為目標，借助互聯網技術優勢設計并建設職業教育質量監測評估的現代化治理體系。從時間、空間和價值三個維度建構職業教育質量監測評價體系的宏觀架構，基于互聯網技術的數據收集、數據分析、數據加工與數據決策等技術，整合職業教育質量紅線預警、智慧決策和科學管理的“三位一體”功能，并從評價目標、評價組織、評價內容、評價模式與評價問責等方面明確了監測評估的實踐保障措施。

關鍵詞：“互聯網+”；職業教育；監測評估；評估體系

一、引言

科學實施職業教育質量評估是有效保障“互聯網+”時代的職業教育質量的重要途徑之一?！秶抑虚L期教育改革和發展規劃綱要（2010-2010年）》明確提出大力發展職業教育就要“把提高質量作為重點……建立健全職業教育質量保障體系”，同時“整合國家教育質量評估機構及資源，完善監測評估體系?！北O測評估是“互聯網+”時代職業教育質量評估的現代化革新?！盎ヂ摼W+”時代，云計算、大數據、移動互聯、人工智能等推進了互聯網與教育深度融合，對教育環境、課程、教學、學習、評價、管理、教師發展、學校組織等產生了革命性的影響。因此，職業教育系統發生了深刻的大變革，其質量評估體系需要因時而變，不斷創新。為探索“互聯網+”時代職業教育質量評估體系的變革創新，本文從“互聯網+”時代職業教育質量評估體系的變化與問題出發，借助互聯網技術設計并建構職業教育質量監測評估體系。

二、“互聯網+”時代職業教育質量評估體系變革的動因與方向

“互聯網+”時代，職業教育質量評估體系創新勢在必行。在國家戰略發展規劃上，自《國家中長期教育改革和發展規劃綱要（2010-2020年）》倡導實施教育監測評估以來，《關于全面深化改革若干重大問題的決定》再次要求“深入推進管辦評分離……委托社會組織開展教育評估監測?！薄秶医逃聵I發展“十三五”規劃》更是明確指出要“積極發展‘互聯網+教育……鼓勵行業企業根據職業技能標準開展職業教育質量監測，分行業定期對職業教育質量進行監測評估?！薄蛾P于深化教育體制機制改革的意見》進一步明確“建立健全教育評價制度，建立貫通大中小幼的教育質量監測評估制度，建立標準健全、目標分層、多級評價、多元參與、學段完整的教育質量監測評估體系?！辈粌H如此，在職業教育質量評價的實踐層面，現行評價體系還依舊存在著諸多問題。因此，在“互聯網+”時代，變革職業教育質量評估體系既是國家戰略的導向需求，也是職業教育質量評價自身適應時代發展的內在需求。

（一）新變革：“互聯網+”時代職業教育質量評估系統的轉型發展

“互聯網+”時代，職業教育發生了“大變革”，同時也影響了職業教育質量評估體系的變革。首先，“互聯網+”的“技術革命”是生產方式的轉變。在社會生產領域，各行各業勞動者的生產方式和勞動素質結構發生了改變，要求職業教育人才培養的目標與過程相應發生轉變，這也是職業教育質量目標的改變。在職業教育自身生產領域，職業院校的人才培養、技術研究和社會服務也因為“互聯網+”技術而不斷變革，這是職業教育質量過程的轉變。其次，“互聯網+”讓“萬物互聯”，是事物關系的轉變?！盎ヂ摼W+”時代的事物關系變得更加開放自由和復雜多元，對職業教育而言，產教融合、校企合作、院校聯動更加頻繁，與職業教育質量緊密相關的學生、家長、學校、用人單位等利益向相關者會以更加密切的關系參與職業教育治理，進而引起職業教育質量因子發生變化。再次，“互聯網+”的“用戶中心”理念，是人與技術的力量的重新定位?！盎ヂ摼W+”職業教育“以學習者為中心”的教育理念影響了職業教育的質量取向，進而職業教育的學生培養質量需要從招生到就業實施持續性改革與轉型。

（二）新挑戰：“互聯網+”時代職業教育質量評估體系的問題分析

“互聯網+”時代，隨著職業教育辦學規模不斷擴大、辦學元素日益豐富精細，依靠傳統方式對職業教育質量施行管理與評價也日益困難，主要問題表征為三個方面：首先，缺乏頂層設計，現行職業教育質量評估體系的協同性較差。一方面質量評估的組織機構各自為政、各行其是，而且政出多門，相互掣肘；另一方面，技術平臺互不兼容，不僅重復投入，而且效益較低，影響了評估績效。其次，缺乏基礎建設，現有職業教育質量評估體系的保障性較差。主要體現為評估技術與設備的落后，數據采集、分析和公布相當落后；同時評估人員的專業性欠佳，評估工作欠水準，保證不了評估結果的公信力。再次，缺乏統一標準，現存職業教育質量評估體系的效率與解釋力較差。由于評估系統的協同性較差，各種評估體系缺乏統一數據標準，既影響了評估工作的效率又降低了評估結果的可比性與解釋力。最后，由于傳統職業教育質量評估體系多方面問題的交互作用，阻礙了職業教育質量評估治理現代化。職業教育質量評估制度建設不健全，也沒有形成科學的評估文化，所以，當前職業教育質量評估并不能為職業教育決策提供支撐，對于職業教育質量提升的貢獻也相當有限。

（三）新方向：“互聯網+”時代職業教育質量評估體系的應然表征

“互聯網+”時代誕生了新的數據生成方式和新的數據獲取力式，同時也誕生了新的測量方法。因此，路易斯·亞納爾和尼克·史密斯認為，隨著技術的發展、人們關注度的提高，評估結果的有效周期會越來越短，所以需要采用高效率、低成本的監測技術進行實時評估。在“互聯網+”時代，職業教育質量監測評估的理想模型如圖1所示。具體來說，一是能夠建立成熟的評估制度，實現職業教育質量評估工作常態化，能夠比較穩定、持續地反映職業教育質量狀態；二是能夠升級優化評估硬件平臺，實現職業教育質量評估技術信息化，基于信息化技術的應用，全息性、高效率監測職業教育質量水平；三是能夠精進和優化評估的過程，確保職業教育質量評估過程專業化，以專業的人員、技術確保評估結論的公信力；四是能夠實現數據分析智能化，助推職業教育質量評估結果呈現直觀化，避免過于專業、晦澀的數據結果表達，用容易讓大眾理解的方式表達結論；五是利益相關者能夠參與自由、參與民主，實現職業教育質量評估的價值判斷多元化，增強評估過程的體驗性和開放性。六是能夠充分運用評估結論，實現職業教育質量評估效用最大化，以評估結論促進職業教育質量改進。

三、“互聯網+”時代職業教育質量監測評估體系的設計與創新

從“互聯網+”職業教育質量系統的技術變革、現實問題和功能需求來看，基于“互聯網+”新興技術的職業教育質量監測評估是比較理想的戰略選擇。監測評估在評估工作常態化、評估技術信息化、評估過程專業化、評估結果直觀化、價值判斷多元化和評估效用最大化的特征正好彌合了國家戰略規劃與當前職業教育質量評估體系的問題改進需求。

（一）“互聯網+”時代職業教育質量監測評估的理念

監測評估是信息時代質量評價的新技術，監測（Monitor）、評估（Evaluation）、指標（Indicator）、標準（Criterion）等共同構成了職業教育質量監測評估的體系。在評價內容上，監測評估對職業教育的全面質量和各種質量要素。監測評估充分運用現代信息技術對職業教育辦學條件、教育經費、師資隊伍、學生規模、學校管理、專業設置、課程開設、教學管理、實習實訓、校企合作、學生就業等質量因素的狀態信息進行持續采集、動態跟蹤、客觀描述、智能分析與及時反饋，協助多元主體進行價值判斷和科學決策，進而依據教育目標對職業教育活動進行監控、預警和修正，從而確保職業教育目標有效實現。在評價方式上，職業教育質量監測評估基于樣本和證據的質量保障體系變成涵蓋所有相關方、全樣本和源數據的體系，獲得更真實、詳細的質量評價信息庫，形成一個自我調整、自我完善、高度智能化的職業教育質量保障體系。在價值訴求上，職業教育質量監測評估反映了教育評估理論革新發展的時代需求，滿足了教育質量評價制度與管理模式不斷完善的客觀要求，也滿足了各種利益相關者對教育治理參與權和知情權的內在需求。因而，可以說，職業教育質量監測評估是過程性和目標性的統一、且以過程性為主，工具性和價值性的統一、且以工具性為主，現實性和發展性的統一、且以發展性為主，主體性和客體性的統一、且以主體性為主，事實判斷和價值判斷的統一、且以事實判斷為主的一種新型教育質量評估模式。

（二）“互聯網+”時代職業教育質量監測評估的架構

監測評估是數據密集型評估，具有時間尺度密集、空間尺度多樣、價值尺度多元的特點。所以，“互聯網+”時代的職業教育質量監測評估的組織架構是時間、空間和價值的三維立體結構，具體如圖2所示。

如圖2所示，職業教育質量監測評估體系的組織架構以縱向的空間結構為最主要的組織形態，在縱向的L軸上，以每一節課的質量、每個專業的質量等基層質量為測量單元依次增大。通常來說，空間尺度最重要的就是從中央到地方的三級評估體系：國家職業教育質量監測評估；地方（省、市）職業教育質量監測評估；院校（中職、高職/?？?、應用技術本科）職業教育質量監測評估。事實上，除了最常見的三級評估體系之外，還可以通過鄉（鎮）、縣（市）、省域、國家等各種空間單元組合成各種區域評估、國別評估等不同級別的評估。在橫向上的時間維度上，T軸以年、季、月、周等為計量單位來反映一段時間內的職業教育質量情況，根據監測時間的不同，可以形成年度監測評估、季度監測評估、月份監測評估、每周監測評估等評估方式與相應報告。價值維度是質量狀態的主觀參照系，反映客體對主體預期的滿足程。在第三維的S軸上，根據不同主體的“顧客需求”，可以分為家長評估、企業評估、行業評估等等。在具體的實踐中，各種評估主體的價值需求也可以組合成其他類型的評估，譬如形成用人單位評估、第三方評估等等。所以，職業教育質量監測評估系統以數據技術變革為核心，撬動了職業教育質量評價的時間、空間和價值等多重維度的評估實踐，進而共同推進了職業教育質量監測評估的實施與職業教育質量的改進與提升。

（三）“互聯網+”時代職業教育質量監測評估體系運行

職業教育質量監測評估體系的技術平臺是在其組織架構上的進一步技術細化，主要依托于“互聯網+”的泛在網絡、大數據技術和云計算技術，形成了從“用戶端口一數據分析一評估報告”的技術環，具體如圖3所示。

職業教育質量監測評估的第一要務是全息性采集和監測職業教育狀態的各種數據。因此，職業教育質量監測體系一方面要充分利用“互聯網+”技術的泛在網絡、互聯端口、數據挖掘等技術。基于網絡系統的充分互聯，再綜合運用腦科學技術、心理測評技術、IRT項目反應理論、學科能力測評技術等對教育質量的狀態信息進行采集。另一方面廣泛吸納職業教育的利益相關者參與評估，也就是讓各級政府及教育行政部門、職業院校、職校教師、學生、學生家長、用人單位以及市場和社會其他機構等積極運用監測評估端口，進而提供監測的原始數據。第二要務就是數據深度加工處理。從評估的技術角度來說，要實現所有數據“縱向貫通”“橫向關聯”；從評估操作的角度來說，需要“統其同”“置其異”。因此，一方面需要加強職業教育質量監測評估的主題式數據倉庫建設，把不同類型和格式的數據分類、分主題儲存，尤其是叫要建設培養過程數據庫、教學質量數據庫、學生就業數據庫等。另一方面，要充分發揮“互聯網+”的技術優勢，綜合運用數據倉庫（Data Warehouse）、數據挖掘（Data Mining）、數據可視化（Data Visualization）、數據追蹤（Data Tracking）、數據共享（Data Sharing）等技術，利用現代數理統計方法對數據進行實時、動態地組織、查詢、瀏覽等等，保障數據的時效性與專業性。第三項任務就是根據數據結果進行評估和決策。一方面，要繼續強化對數據的統計分析，根據實際需要開展多維度、多層面、系統性的描述、推斷、時序、聚類、關聯分析等。另一方面，根據對數據綜合統計，做出多元的價值判斷和管理決策，并出具相應報告為政府、學校、家長、社區提供改建指導意見。

四、“互聯網+”時代職業教育質量監測評估體系的功能與應用

職業教育質量監測評估體系建設的根本目的在于實現“以評促教”，通過評估提升職業教育質量，實現“辦人民滿意教育”的“中國夢”。然而，在“以評促教”目標的實現必須依托于職業教育質量監測評估體系的具體功能，分別是紅線預警、智慧決策和科學管理三個核心功能。

（一）紅線預警：數據閾值反饋并控制職業教育基礎質量

“窮國辦大教育”是中國最基本的教育國情，且區域間、城鄉間的職業教育質量相差懸殊。因此，中國職業教育質量監測評估一方面需要考慮不同區域、不同類型職業教育的質量差異與質量特色，另一方面需要采用最基本的質量標準，保證全國職業教育的基礎質量。職業教育質量監測評估體系在評估標準的設置上，按照不同的價值尺度設定不同的質量水平。在各級水平中，以基礎性的質量標準為中國職業教育質量的預警紅線。通過對各級各類職業教育辦學條件、師資隊伍、經費標準、學生培養等設置數據閾值，以各類數據閾值形成最基本的質量控制紅線。當某一學校、某一專業的單項指標或者整體質量沒達到最基本的數據閾值，或者監測數據在閾值附近波動，職業教育質量監測評估系統就會自動預警，提醒相關責任人查出原因，采取相關措施進行改進，杜絕質量問題和辦學偏差，消除職業教育質量的各種潛在風險。

（二）智慧決策：數據發聲證明并輔佐職業教育改革發展

“讓數據發聲”是監測評估區別于傳統評估的一大特征。職業教育質量監測評估體系以泛在網絡采集數據，并深度挖掘數據，經過大數據技術分析和加工，進入云儲存和云計算實現數據的智能化管理。一方面，數據自身會發出聲音，證明質量的現狀與問題，并引導管理者參考決策。在智慧管理平臺，決策者可以查閱和比較各種數據，讓數據與事實反映各種尺度的質量問題，基于數據分析結論采取下一步措施。例如，國家、省級教育主管部門可以利用多種數據模型分析并比較學校間和區域間的職業教育質量差距，進而因地制宜實施均衡調控。職業院校也可以通過智慧管理平臺查詢并分析自身學校當前所處的位置、狀態與水平，通過在全國和省域內的精準定位，探尋下一步發展的目標，做出學校改革的決策。另一方面，基于檢測的數據決策會減少人為的干擾，在一定程度上降低了決策的風險，增強了決策科學性與智慧性。

（三）科學管理：評估結論啟示并引領職業教育質量改進

評估最重要的目的不是為了證明（Pmve），而是為了改進（Impmve）。職業教育質量監測評估體系建設，預警是基礎性的工作，決策是關鍵性的工作，改進才是終極性的工作。因為，提高質量的不是評估工作本身也不是評估之后決策建議，而是基于評估結論和決策之后的系列改進措施。職業教育質量監測評估體系在進行數據儲存和計算之后，經過智慧管理平臺的加工，不僅僅會形成系列決策報告，還會生成相應的指導建議督促職業教育質量改進。而且，還會通過數據預警對改進工作的進展進行追蹤問責，能夠切實保障職業教育的質量達標并不斷提升。此外，職業教育質量監測評估體系也能夠實施評估過程的科學管理，因為整個評估系統是基于數據的開放協調系統，各類評估參與方和各類型的評估都可以在該系統內獲得數據，根據檢測數據進行科學評估，保證了評估過程與評估結論的科學性。

五、“互聯網+”時代職業教育質量監測評估體系的實踐與保障

“互聯網+”時代，職業教育質量監測評估體系的工作實踐和功能發揮還需要一定的保障基礎。除了常規的法律保障、機構保障、技術保障和財政保障之外，還需要目標方向、權力匹配、工作內容、實踐模式和問責機制的保障，以實現職業教育質量評估治理現代化。

（一）公平尺度上追求卓越：職業教育質量監測評估的目標創新

評估目標是評估實踐的導向，關系著評估工作與教育發展的方向性問題。百年變遷，基礎性的“公平”和高水平的“卓越”始終是教育質量研究的核心問題，因而“公平而卓越”的教育質量成了衡量現代職業教育質量的重要評價維度。職業教育監測評估所堅持的“公平而卓越”質量目標包含三個層次：達標質量、特色質量和一流質量。以三個層級的質量目標，引領職業教育質量監測評估的工作實踐，一方面，確保監測評估工作既符合國家“公平而有質量”的政策導向，又合符評估工作的科學原則，保障評估工作的規范性、專業性與科學性。另一方面，也有效兼顧社會發展與人的發展的雙重需要，確保評估工作的以人為本，促進學生發展、教師發展、學校發展，進而通過監測評估促進了教育往“公平而有質量的教育”和“人民滿意教育”的方向發展。

（二）分級體系中精準放權：職業教育質量監測評估的組織創新

職業教育質量監測評估體系是一個多元主體參與、多層次、多功能的職能架構。因此，要充分發揮職業教育監測評估體系的作用，就必須協調好各個層次、各個主體的利益關系，形成分級協作、精密互補的運行體系。首先，要強化政府責任。國家層次的職業教育監測評估對職業教育質量進行全方位的掌控，提供監測的標準和技術，監督、引導職業教育活動的良性發展。同時，省市負責本地區的規劃、縣區具體負責監測實施。其次，要充分放權。除了各級政府之外，還要形成以各級各類學校為主導的保障支撐，給學校足夠的權力參與并實施評估，增加學校的話語權，充分體現評估工作的基層性與真實性。再次，要大膽分權。在政府與學校之外，吸引第三方力量參與評估，充分考慮企業、行業的聲音，保障評估工作的獨立性和評估結論的公信力。

（三）重點突圍以帶動全面：職業教育質量監測評估的內容創新

評價內容是職業教育監測評估工作實踐難度的重要決定因素。從國際經驗來看，英、美、德、澳四國職業教育質量評估指標體系都注重全過程的監控，從投入、過程、產出等方面系統地實施質量監測，并且出臺了相當完善的質量評估標準體系，加上各種質量框架和資格框架，進而測度職業教育的全面質量。因此，中國職業教育質量監測評估在指標體系的建構上：一是要堅持全面質量觀，從職業教育“輸入—過程一產出”的全過程實施系統監測；二是逐步建立中國特色的職業教育資格框架和質量框架，并逐步與國際接軌，通過資格框架實施職業教育質量的科學監測評估；三是重點監測職業教育的部分單項質量，特別是年度國家職業教育系統發展狀況、院校質量和學生學業質量；第四，建議更新并規范國家職業教育課程標準，并頒布職業教育教師專業標準，通過核心質量要素的評估保障職業教育的整體質量水平不觸動紅線預警。

（四）專業精神與多重實踐：職業教育質量監測評估的模式創新

職業教育質量監測評估的主要創新在于數據采集、數據分析以及相關技術的突破，但是在評估的實施模式還需要繼續變革。首先，在職業教育質量監測評估的實踐中大力推廣和實施第三方評估的“專業模式”。一是要大力提高第三方評估的專業水準，切實保障職業教育質量評估的多方需求；二是要充分利用專業機構、專業技術和專家經驗，做好職業教育質量的專業鑒定；三是基于職業教育質量監測評估系統的數據基礎，精準預警，智慧決策，并提出有效的科學管理建議。其次，依舊要適當使用職業教育質量評估的“督控模式”，通過行政力量確立目標、認證鑒定和督導改進。再次，廣泛使用“內省模式”，通過自主評估、反思改進。通過“專業模式”“督控模式”和“內省模式”的有機融合，確保職業教育質量監測評估的效率與效益。

（五）聯動機制加立體路徑：職業教育質量監測評估的問責創新

職業教育質量監測制度也是評估工作實踐的重要保障，要圍繞“以評促教”的核心目標，促進政府、學校、公眾等多方主體的聯動與互動，建立多層級、全面、廣泛的職業教育質量問責體系。一是要要加強對監測結果的使用和宣傳，實施常規化的公開報告制度，形成“公布一交流一反饋一修訂”的信息機制，強化公眾的知情權，普及職業教育質量監測評估的影響力，凸顯職業教育質量監測評估的地位；二是要要增強職業教育質量與績效撥款、招生名額等指標之間的關聯，建構基于質量結果的撥款制度和招生指標劃撥制度，通過財政調控、生源調控形成強有效的激勵機制；三是要基于結果公示，對質量不合格的責任主體進行政府約談，達成限期整改的契約，再度對整改效果進行效果追蹤，實現評估結果的有限問責。