柯氏評估與PDCA融合的機型培訓質量體系研究

趙世偉　齊鳴　楊海濤　田子都

[摘 要] 現代民機維修培訓反饋與優化體系，有助于培訓質量的監控和持續提升。基于柯氏四級評估理論和PDCA循環優化模式，以維修任務和教學組織管理為導向，構建了以課程評估為核心的課程優化體系，闡述了培訓過程中不同層面評估的方法和要求，并從不同層面出發，提出優化的流程和目標，實現機型維修培訓反饋與優化工作程序的規范性和實效性。

[關鍵詞] 機型培訓;反饋與優化;柯氏四級評估;PDCA循環

[基金項目] 2018年度工業和信息化部“民機專項”（2018SACSC-035JS）

[作者簡介] 趙世偉（1980—），男，河北石家莊人，碩士，中國民航大學工程技術訓練中心副教授，主要從事航電實踐教學與航空維修管理研究。

[中圖分類號] G642.0 [文獻標識碼] A [文章編號] 1674-9324（2022）04-0021-05 [收稿日期] 2021-06-02

一、機型維修培訓反饋與優化體系現狀

近年來，隨著民航事業的發展，對民機維修人員素質要求逐步提高，迫切需要提升維修人員技術能力。因此，民機機型維修培訓質量和成效日益受到行業關注，培訓效果反饋與內容優化工作的重要性和緊迫性日益凸顯，已成為民機持續健康發展不可或缺的支撐。

目前，國內眾多民機維修培訓機構的課程質量管理體系普遍存在缺陷[1，2]。一是維修培訓機構重視培訓能力申請和課程開發，忽視內容持續改進，甚至培訓教材、資料多年沒有改進。二是維修機構的課程質量評價機制和優化方法有待改進。雖然維修培訓機構按照法規建立了課程質量體系，但是課程評價維度、頻度存在隨意性，基于評價結果的課程優化主體責任不清晰。三是維修機構的課程開發體系不完善。

作為民機運營的主要支撐，機型維修培訓課程質量關系重大，為此，我國民航局發布咨詢通告AC-66-008《維修人員機型資格規范評審及評審結論的應用》，明確“航空運營人、維修單位或維修培訓機構應當參考航空器評審報告中認可并由制造廠家發布的機型維修培訓規范編制自己的機型、差異或補充維修培訓大綱，并根據機隊實際構型確定適用的培訓課目”。也就是說，未來的機型維修培訓課程基于統一的機型維修培訓規范，但是應體現各自的特色，這對于課程持續優化改進提出了要求。

柯氏評估模型[3]是世界上最廣泛的培訓評估工具，PDCA戴明環[4]是一種全面質量管理的理論。本文依托上述兩種理論，探索形成一套適用于民機機型維修課程的質量管理體系，目的是持續提升機務維修培訓課程質量，進而提升機務維修能力，為我國民機事業發展壯大提供動力。

二、柯氏評估理論和PDCA理論簡介

目前，機型維修培訓整體是基于教學系統設計理論，按照ADDIE[5]（Analysis，Design Develop，Implement，Evaluate）模型進行開發的，其中的“E”為課程反饋環節，需要進行課程評估和課程優化（圖1）。本文以柯氏評估理論為基礎對機型維修培訓課程的反饋評估進行研究，并以評估體系作為課程優化的核心，借助PDCA理論建立持續提升機型維修培訓質量的課程優化體系。

（一）柯氏反饋評估理論

柯氏評估模型通常分為四層級[6]，包括反應層、學習層、行為層、結果層。反應層評估考量參與培訓人員對教學設計和安排的響應情況，如培訓方案、內容、時間安排等;學習層評估考查培訓學員的知識、能力和態度意識獲得情況;行為層評估考查培訓前后行為的改變和提升，也就是培訓對參訓人員的知識、態度、思維方式、行為表現等方面產生的正面影響（圖2）;結果層評估培訓效果收益及績效的提高情況，衡量培訓為個人、組織及社會效益所帶來的實際貢獻。四個層級高度相關，低層級評估是更高層次評估的基礎，高層級評估為進一步優化低層級評估提供依據。

（二）PDCA循環優化理論

PDCA循環優化是質量管理的有效工具，目前在企業質量管理中得到廣泛應用，并取得了良好的效果[7，8]。該理論將目標優化程序分為四個階段：計劃（Plan），確定工作目標、制定工作計劃等;實施（Do），根據確定的計劃、設計的方案等進行具體運作，實現計劃中的內容;檢查（Check），總結執行計劃的結果，分析效果;處理（Action），對檢查的結果進行處理，對成功的經驗予以肯定，對存在的問題進行總結，若存在沒有解決的問題則提交到下一個PDCA循環。

PDCA循環優化理論通過持續改進，在每一次循環中及時總結經驗，固化成果，實現課程質量的持續提升。PDCA循環優化過程如圖3所示。

三、機型維修培訓課程反饋與優化流程體系的設計

機型維修培訓課程主要由培訓大綱和培訓資料、培訓組織形式與培訓人員、培訓實施方式以及培訓設備和設施等要素構成，構建課程質量體系的目的是對四要素質量進行改進和提升。培訓課程質量體系包括課程反饋評估、要素優化兩個環節，這兩個環節既緊密聯系又有所區別，課程反饋評估是課程優化的基礎，課程優化是反饋評估的目的。

（一）機型維修培訓課程反饋評估

機型維修培訓課程的主要利益相關者包括學員、教員、維修機構和監管局。學員是授課對象，其培訓效果與培訓課程質量息息相關;教員是課程實施的執行者，直接面對學員，對學員培訓效果產生直接影響;維修機構是課程的持續受益者，高水平維修人員是維修機構的核心競爭力;監管局代表民眾對民機維修進行監督，高水平維修人員能夠有效提升民機維修的安全性。

1.面向學員的反饋評估設計。依據柯氏評估理論，培訓課程反饋評估可以分配在培訓課程實施前、實施中和完成后三個階段，開展反應、學習、行為、結果四個層次評估。不同培訓階段開展的評估層次、內容如圖4所示。

培訓課程實施前，可以安排學員反應評估，具體形式可采用調查問卷或門檻測試，重點了解培訓學員的工作背景、培訓期望、知識體系等信息。利用所收集信息，確認學員培訓資質，從而有效避免培訓失敗。此外，可以輔助教員及時調整培訓內容重點和難點、培訓方式等，適應學員學習習慣，提升培訓效果。

在培訓過程中，實施反應評估和學習評估。反應評估借鑒ICAO TPP TDC培訓課程反饋體系模式，結合機型維修培訓課程特點，理論課程按照章節或者章節組合進行反應評估，實作課程按照項目或者項目組合進行反應評估，課程結束后進行課程整體的反應評估，從不同角度評估關鍵培訓課程要素質量。反應評估以調查表形式開展，調查主題依據培訓進度各有側重。調查表部分建議主題及條目如表1所示。

學習評估按照局方規定采取傳統閉卷考試的方式開展評估，同時應綜合學員反應評估的情況，綜合反映學員培訓課程的收獲情況。

培訓課程結束后，實施行為評估和結果評估。行為評估和結果評估是目前比較難以開展的評估，因為學員從培訓到指導工作，改變行為存在時間延遲，一般認為培訓后3～12個月內評估最為合適，其中6個月間隔是最常用的時間。而從改變自身行為到實現培訓收益需要的時間間隔會更長，通常有2～3年的時間，并且受到評估成本的制約。綜合多方面因素，本文建議在行為評估和結果評估方面采用基本相同的方式，以時間間隔加以區別。綜合評估成本和評估效果，建議采用調查問卷的方式開展。調查表分為兩種：一種面向培訓學員自身或其周邊同事;另一種面向學員所在的單位。建議的調研主題如表2所示。

培訓后的行為和結果評估應進行多次問卷調查，多次調查結果反映的情況能夠更加客觀、真實。

2.面向教員的反饋評估設計。面向培訓教員的反饋評估程序可以分為培訓課程實施過程中和課程完成后兩個階段。反饋評估采取評估單和調查表相結合的方式。培訓課程實施階段的調查，主要是教員針對培訓方式與手段、培訓設備與設施的選擇使用進行調查，同時采用培訓機構督導組、同行教員隨機抽選的方式進行聽課評估。若遇到教員講授新課程，需要在課程實施前進行新課評估。培訓課程完成階段的調查，可通過調查表的方式評估關鍵課程要素中存在的問題和困難，用于課程后續的優化。建議的調研主題如表3所示。

3.面向維修機構和局方的反饋評估設計。面向維修單位的反饋評估分為培訓課程實施前和完成后兩個階段。培訓課程實施前，主要用于確定維修單位的預期培訓需求;培訓課程實施完成后，對于維修單位的反饋評估可以結合培訓學員行為和結果的評估調查共同開展，從而確定培訓學員實際培訓效果和維修單位的預期差距情況。

面向監管局方的反饋評估配合局方定期檢查進行。通常局方負責多個維修培訓機構的監管，并且從宏觀到微觀多個層次與飛機制造商交流，因此，對于機型維修中存在的共性問題，對維修的先進理念和成熟技術的理解具有天然優勢。

（二）機型維修培訓課程改進優化

課程反饋與優化體系分為計劃、實施、檢查和處理四個階段。計劃階段，依據對課程反饋的評估結果，分析適航規章和維修人員崗位職責，進行機型維修培訓需求的分析和培訓課程的設計;實施階段，按照大綱的培訓目標和課程的設計標準，設置不同的課程類型，按照各類課程的培養方案確定教學資料、分配教員、選擇教學場所、配備教學設備，完成課程的組織和實施;檢查階段，對教學實施后的教學效果進行檢查，及時發現教學問題，并對課程開發和實施過程進行再次評估、分析和總結;處理階段，找出問題的解決方法，不斷提升教學質量，建立更高的發展目標，然后根據新的發展目標完善培訓大綱，重新設計課程開發和培養方案，再次實施、檢查，找出存在的問題，提出解決方案并實施。如此反復，教學質量可持續上升。

1.培訓課程講授過程中的檢驗。完成上述各環節的優化工作后，與用戶、廠家及局方多次溝通，收集整理得到初步認可的優化方案，對這些新方案進行整合，便可形成新的機型維修培養方案。以此為依據，實施教學管理和教學內容改革，在教學實施過程中再次檢驗這些新方案，從中篩選出經過實踐確認仍然獲得成功的優化案例。同時，在教學過程中，也會發現新的問題以及上一次優化過程中效果不好的案例。最后，課程結束時，將獲得成功的優化成果進行固化，形成新的培訓大綱或培訓管理制度，繼續應用于下一次和其他機構的培訓中。同時，收集在本次課程實施過程中發現的新問題以及未獲得成功的優化案例，轉入下一次的PDCA優化流程，實現對培訓課程的持續改造。

2.培訓需求和課程設計層面的優化。根據反饋意見，從需要調整的培訓目標中解析出對應的維修任務和子任務，并對這些任務進行分類和歸納，將其總結為保養、拆卸/安裝、調整/試驗等工作類型，再逐個分析受訓者執行不同類型任務的困難性、重要性和頻繁性，最后按邏輯分析法在這些維修任務中挑選出需要增減的培訓內容。通過對培訓需求的分析，結合學員的工作崗位需求，將已更新的培訓知識點按照崗位類別，從ATA章節和難度等級上進行重組，進而對同類崗位培訓課程的教學內容、教學手段及考題進行改造，完成對課程的重新設計和優化。

3.課程開發和課程實施層面的優化。通過對反饋問題的收集和整理，分析存在這些問題對應的學員崗位、教員、課程、教學設備、培訓場所及培訓機構，歸納問題的特點，從不同的反饋結果中發掘出存在于教學資料編制、教員培訓、課程編排、教學手段、教學設備和環境、培訓管理制度等方面的共性問題和個性差異，尋根求源找出癥結，精準解決在課程開發和實施過程中各環節出現的影響教學進度和教學目標實現的因素，在保證符合規章要求和學員安全的框架下盡可能做到因材施教，并提高教學效率和效益。建議的優化內容如表4所示。

在機型維修培訓課程管理體系中融入以課程評估為核心的PDCA循環優化模式，可幫助培訓機構認識課程反饋與優化的重要意義并引起重視，通過引入該模式可規范培訓機構將反饋評估與課程優化的具體方法轉變為工作程序，便于形成集中統一的標準流程，最終實現制度化。同時，借助柯氏四級評估理論和以維修任務為導向的優化方法等科學高效的研究方法，可保證評估與優化結果的準確性和實效性，加快課程改進速度，實現培訓質量穩步提升。

參考文獻

[1]吳月偉，劉燕，馮建朝，等.國內民航機務維修培訓體系的現狀與發展[J].航空維修與工程，2014（1）：21-24.

[2]卞林杰.國內民航機務維修培訓體系的現狀與發展[J].內燃機與配件，2019（21）：186-187.

[3]馬向南，劉清.國內外培訓效果評估方法綜述[J].繼續教育研究，2020（5）：57-60.

[4]韓葉，蕾蕾，周夢韻.淺談制度建設如何助推企業提質增效[J].現代商業，2021（12）：135-137.

[5]馬李昕，董本清.ADDIE模型在學習平臺中的融合設計[J].軟件工程，2019，22（11）：39-41.

[6]唐納德·L·柯克帕特里克（Donald L. Kirkpatrick），詹姆斯·L·柯克帕特里克（James D. Kirkpatrick）.如何做好培訓評估——柯氏四級評估法[M].3版.林祝君，馮學東，譯.北京：電子工業出版社，2015：22-82.

[7]吳小凡.淺談PDCA循環在制度優化中的應用[J].中小企業管理與科技（中旬刊），2021（5）：130-131.

[8]姜文鑫.淺析PDCA在機務維修培訓機構質量管理系統中的應用[J].僑園，2020（1）：76-76.

Research on Quality System of Aircraft Type Maintenance Training Course Based on Kirkpatrick Evaluation Model and PDCA Cycle Theory

ZHAO Shi-wei 1， QI Ming 1， YANG Hai-tao 2， TIAN Zi-du 1

（1.Engineering Techniques Training Center， Civil Aviation University of China Tianjin 300300， China;

2. COMAC Shanghai Aircraft Customer Service Co.， Ltd， Shanghai 201100， China）

Abstract： The feedback and optimization system of modern civil aircraft maintenance training is conducive to the monitoring and continuous improvement of training quality. Based on Kirkpatrick’s four-level evaluation theory and PDCA cycle optimization model， guided by maintenance tasks and teaching organization management， this paper constructs a curriculum optimization system with curriculum evaluation as the core， expounds the methods and requirements of evaluation at different levels in the training process， and puts forward the optimization process and objectives from different levels， so as to realize the standardization and effectiveness of model maintenance training feedback and optimization work procedures.

Key words： aircraft type training; feedback and optimization; Kirkpatrick’s four level evaluation; PDCA cycle

3365501908223