檢察教育網絡培訓質量評價機制的完善

摘 要：現階段，檢察教育網絡培訓質量評價還不夠科學規范，存在評價目標不明確、評價主體較單一、指標設置缺少差異化考慮、評價結果簡單、智能程度不高等問題。以中國檢察教育培訓網絡學院為例，完善檢察教育網絡培訓質量評價機制，應把握評價原則，明晰發展目標方向；借鑒評價模型，科學設定序列指標；形成反饋閉環，動態調整完善評估機制。

關鍵詞：檢察教育培訓 網絡培訓質量評價

檢察教育網絡培訓質量評價主要包括：第一，對檢察教育網絡培訓機構或主辦單位、承辦單位以及相關工作的評價；第二，對網絡培訓班次的評價；第三，對各類網絡課程的評價，及對相關師資的關聯評價；第四，對網絡培訓平臺建設運營和管理的評價；等等。多個評價體系的結果交叉考量，也即對當下的檢察教育網絡培訓進行系統評價。但基于發展階段、人員配置、資金制約等因素，檢察教育網絡培訓質量評價的實際情況和研究狀況都尚有較大差距，之于改進培訓的作用發揮不充分，亟待加強研究。

一、檢察教育網絡培訓質量評價現狀

當下，檢察教育網絡培訓評價模式與其辦訓形式密切相關，可大致分為不做評價、借鑒實體培訓評價、網絡培訓專門評價和混合評價模式等。通過內部電視電話會議系統組織培訓，一般不做評價。通過即時通訊工具或互聯網會議系統組織培訓，常借鑒實體培訓質量評價標準采用問卷調查方式，征求學員對課程安排、師資選配的意見。通過專門化網絡培訓平臺（自建或定制）組織培訓，可結合平臺設置的班級評價、課程評價模塊進行質量評價。采混合評價模式的典型代表如中國檢察教育培訓網絡學院（以下簡稱“中檢網院”），其作為最高檢主管、國家檢察官學院主辦的全國性檢察教育網絡培訓平臺，培訓模式多樣化，錄播與直播相結合、組織調訓與自主選課相補充、線上線下培訓相融合，綜合采用了平臺模塊打分、學員問卷調查、管理員意見反饋等評價方式。

二、檢察教育網絡培訓質量評價存在的問題與分析

上述評價模式建立運行更多基于經驗，但質量評價工作的科學性規范性還有所不足，作為評價的核心內容和主要依據的指標體系尚未有效建構，缺乏可操作的評價標準與流程。主要問題在于：

（一）評價目標不明確，質量評價意識有所欠缺

中檢網院已實現檢察教育培訓全員覆蓋，但培訓班次、人次仍是普遍關注重點；課程開發量、學員學時數仍是考評關鍵數據。統計中存在“重數據、輕質量”的現象，一方面，仍把網絡培訓的量當做重要指標，另一方面，對質的評價尚無充分研究，囿于相關考慮欠缺，質量評價目標設置模糊不清。

（二）評價主體較單一，質量評價結果不夠科學

現有評價機制中，質量評價主體主要是學員，但學員評價整體存在優秀打分傾向，使得個別化的意見突顯，出現評價結果信息偏差，同時，這種單一的評價主體模式沒有兼顧主管部門、教師、專家、同行等相關者的評估，影響了評價的廣度和深度，使得評價結果難以全面反映培訓的真實效果和存在問題。

（三）評價標準未細化，質量評價指標差異化不足

網絡培訓最富特色的是其教學方式，且應服務于教學培訓需要，但諸如視頻直播（互動）、系列微課等課程形式卻沒有對應的質量評價內容，僅沿用常規課程評價標準，細化程度遠遠不夠。如中檢網院課程評價不區分教學形式和課程類型，均設置“立場觀點正確、注重問題導向、內容豐富全面、課程生動形象、教學切實有效”等評價打分選項，設定的評價指標要素權重一致，缺乏差異化評估，導致無法精準反映不同課程的真實質量。

（四）評價結果簡單化，質量評價智能程度不高

評價結果多以滿意度百分比形式呈現，學員信息、課程數據、管理統計數據和評價數據各自獨立，無法交叉關聯比對，學員學習時長、進度、互動等學習行為數據無法通過智能化網絡培訓系統自動捕捉，難以深入剖析這些數據背后的學習模式與效果差異。

三、檢察教育網絡培訓質量評價機制的完善

（一）把握評價原則，明晰發展目標方向

一是以高質效作為評價目標。檢察教育網絡培訓已實現規模效應，正開啟高質量發展新征程，而質量評價應在其中發揮關鍵作用。網絡培訓要實現更高水平的飛躍，要從高質效辦好培訓班、做好視頻課、請好主講人等方面開展有效評價，滿足各方期待，讓廣大學員感受到網絡培訓不亞于實體培訓的效果和水準；同時，要突出網絡培訓的優勢特色，有效發揮“互聯網+教育培訓”的作用。

二是評價主體多元化結構化。建立“1+N”的多元主體評價模式。“1”是學員評價，體現學員中心的培訓理念并反饋其對班次和課程的滿意度，再引入其他“N”個相關主體進行多角度評價，如教師（自評）、同行（評價）、平臺（數據）和專家（評價）等［1］。在中檢網院培訓情境下，還可以將主辦單位、承辦單位、組織管理機構或中檢網院管理員等作為評價主體。待多元評價主體確定后，還應將評價模式固定化結構化，以確保后續指標設定的科學性、評價標準的統一性、結論數據的可比性。

三是評價指標精細化標準化。根據《全國干部教育培訓規劃（2023-2027年）》，對干部教育培訓機構、班次、課程的質量評估，要堅持定量與定性相結合。定量數據采集在量表基礎上開展，應總結梳理有關經驗并深入研究培訓規律，對積累的數據開展對照分析，并初步設定一級指標、二級指標，數據采集測試后予以驗證調整，逐步完善細化各項指標；同時，定性數據采集也應有規范的操作流程，從底層設計上架構起具有評估標準的交流框架和問答提綱，以便提取有效信息。其中，冗余指標項可予剔除，保留核心指標，并可視情探索指標的加權平衡，以及定量定性評價結論的混合輸出。

四是評價手段智能化應用化。定量定性數據的采集與分析，涉及到大量的數字和文字，以傳統人工方式處理難以滿足效率和質量的要求，必須借力智能化手段。可以“無感知”采集形式獲取學員基本信息、操作痕跡和學習數據等，并對定量數據做描述性統計（計量、等級、計數/比率）和差異性分析，有條件的情況下可進一步做相關與偏相關分析［2］；對學員的留言、課程評論等文本做過濾處理，并進行詞頻分析和傾向性分析［3］。考慮到實踐的需要，數據采集規劃要有取樣導向，以確保所采數據能夠被分析，結論具有應用價值。

（二）借鑒評價模型，科學設定序列指標

一方面，學習借鑒常見評價模型。教育培訓領域較為常用的評價模型有CIPP評價模型和柯氏四層次評價模型。CIPP評價模型認為，為了改進培訓（而非證明），培訓前、中、后期應設置分段評價指標，細化為背景（Context）、輸入（Input）、過程（Process）和成果（Product）四個評價環節［4］。柯氏四層次評價模型著眼點在于，結合主觀反應評價層級和實踐效果客觀評價層級，并融入知行合一的考慮，包括反應層/感知層、學習層/成果層、行為層/反饋層、結果層/效果層［5］的遞進測量。

以上述兩個評價模型為借鑒，檢察教育網絡培訓的評價機制應注意更新評價設置思路，延伸評價時間跨度，從培訓全流程擴展到隊伍建設整體考慮評價設置的必要性和可行性，從“訓前基礎能力—訓中學習表現情況—訓后水平提升”或“問題需求調研—訓前內容匹配—訓中學思調整—訓后踐悟行動”等方面進行評估測量，掌握培訓在不同時段不同層級產生的積極影響以及不足之處，并借助智能化手段比較其程度變化。

另一方面，根據檢察教育網絡培訓特點和實際科學設定評價對象指標。首先是網絡課程評價。根據評價主體包括課程定制方、課程設計人、主講人、聽課人以及領域專家、同行、教育培訓組織者等的專業方向和職責權威擬定評價方案，選擇采用定性或定量方法、分散或集中模式、打分或評星形式等。針對不同的課程類型如專題講授、案例教學、情景模擬、訪談研討、庭審觀摩、翻轉課堂［6］等的特點和要求，科學化指標設置，同時，課程評價與師資評價要進行關聯，以主講人的每一門課程評價為基礎，匯總加權得出師資水平評價。具體指標設置應參照國家標準《干部網絡培訓課程評價指標》（GB/T38859-2020），在課程內容、學習活動、課程形式、在線學習支持等各方面做量化設計，并可以豆瓣式留言補充主觀評價。評估結果總體呈現為百分制或十分制得分，可以多邊形雷達圖長短邊形式展示不同維度優缺點和均衡度，以評價關鍵詞字體顏色大小形式展示評估結果重點和課程特色亮點。

其次是培訓班次評價。評價主體應進一步多元化，以助于立體化呈現班次在設計、組織實施、保障等各方面的水平效果，如綜合考慮主辦方、承辦方、組織管理方、學員、學員所在單位部門、授課人、領域專家或同行等的評估意見。在設置指標時，既要統一通用指標，如主題設置科學性、課程選配合理性、授課內容指導性、師資多元水準權威、班次組織功能發揮、交流互動便捷高效等，可適用于所有班次，以實現總體評估可比性；也要留出指標空間，根據班次類型如業務班次或是綜合班次，班次規模如全員班次或是條線班次，開展培訓的方式如線上班次或是線上線下融合班次等，設置符合班次培訓規律、具有數據采集意義的特殊指標。

最后是組織管理和技術保障評價。作為評價對象，組織管理既可以納入班次評價，也可以單獨設置評價指標。在開展班次培訓的場景下，指標設置首先對齊具體班次的組織，同時，因網絡培訓涉及到平臺、工具的選擇、使用和幫助，評估項也可擴大到學習輔助、檔案管理、用戶體驗、技術咨詢等方面。在與課程整合方面，信息技術融合教學法并賦能教學內容、創設學習環境是否充分有效，也可以作為單獨指標或合并在課程評價指標中，這也是網絡培訓質量評價區別于實體培訓評價的重要特征。

（三）形成反饋閉環，調整完善評估機制

在質量評價機制標準化運行后，隨著數據不斷積累，評估設置在某些方面的科學性不足將有所顯現，管理部門應注意評估結果趨同的低效信息和顯著離散值中的特殊信息等，通過跟蹤調研、會商總結等方式收集反饋意見，進一步在優化指標量化和分值賦權上下功夫［7］，調整評估項目。同時，考慮更為廣泛的評估意見，明確應予補充的評估環節，從而完善評估機制。