基于模糊層次法的飛行員CRM培訓效果評估

李立民 LI Li-min

（中國民用航空飛行學院，廣漢 618307）

（Civil Aviation Flight University of China，Guanghan 618307，China）

0 引言

在我國，隨著現代化大型飛機的大量引進，對外交流的不斷加強，新的訓練理念和手段的不斷引入，機組資源管理的研究日漸盛行。盡管機組資源管理在國內民航界已經普遍被接受和重視，它也被認為是保證航空飛行安全的重要保障措施之一，但是國內機組資源管理研究水平和發展仍然落后于歐美發達國家。

但是由于目前的CRM培訓工作缺乏合理的評價指標體系，從而導致培訓效果的評估工作仍舊處于初級階段。此外，由于不能夠明確評估內容的重要度，因此，評估很難得到準確的結果。在飛行員培訓中，飛行員培訓效果評估作為一個重要的環節，只有構建一套科學合理的培訓效果評估指標體系才能有效保證飛行員培訓的質量和效益。

1 評估指標體系構建

1.1 評估指標體系構建原則

①評估指標應當與培訓目標相關。培訓能否達到并完成了預期的目標和任務作為培訓效果評估的一個重要作用，因此，選取的培訓指標因培訓目標的不同而不同。

②評估指標應當具有可操作性。由于本研究的模型是針對民航飛行學院構建的，因此，要求模型具有較強的實用性和易操作性。為了避免學員難以回答或涉及隱私的指標，應當在選取指標的時候選擇易理解和易實現數據收集的項目。

③為了確保評估指標體系具有系統性和全面性，本研究除了參考Kirkpatrick的四層次評估模型，從培訓的反應層、學習層、行為層和結果層等各層次來合理選取指標外，還結合了培訓的目的、民航飛行學院的實際情況等因素。

1.2 評估指標選取的程序

保證飛行員培訓效果評估成功的前提就是要建立一套層次關系清晰合理以及內容豐富全面的評估指標體系。本文在選擇指標的時候采用了專家咨詢法，此方法包括經驗預選和咨詢專家后確定指標兩個步驟。

①通過研究并參考國內外相關文獻和有關培訓效果評估的研究成果，在結合我國飛行員培訓特點的基礎上，預選出符合該指標體系構建目的及構建原則的一定數量有代表性的指標，將其構成預選指標集。

②采用專家匿名發表意見的方式獲取專家意見，該方式要求專家只能與調查人員聯系，專家之間不得互相討論、不得發生橫向聯系。通過多輪次調查專家對預選指標集所提問題的看法，經過反復征詢、歸納、修改，最后匯總成專家基本一致的看法，作為預測的結果，這種方法具有廣泛的代表性，較為可靠。

1.3 評估指標體系的構成

根據飛行員培訓的目的和特點，將飛行員培訓效果評估指標分為反應層、學習層、行為層、結果層四個一級指標，并在一級指標下設立了12個二級指標（具體構成見表1）。

2 評估指標權重確定

培訓效果評估指標體系中存在包括培訓內容的系統性、受訓者的紀律性等在內的難以準確量化的指標。在處理這些目標時就要引入模糊性的概念。模糊層次綜合評價法具有同時考慮了事物內部關系的錯綜復雜性和價值系統的模糊性的優點，非常適合對模糊性指標的評價。其基本計算步驟如下：

①構建層次結構模型，即確定目標層、準則層和評價因素層；

②建立判斷矩陣群，假設有n個評價指標，通過因素間兩兩對比方法構造判斷矩陣其中 bij為第 i個元素相對于第j個元素的重要程度；

③計算判斷矩陣的特征向量 W=[w1，w2，…，wn]T，其中wi的求取通常采用和法，計算如下：

④檢驗判斷矩陣的一致性，首先計算一致性指標為CI=（λmax-n）/（n-1），然后可得一致性比率CR=CI/RI，并檢驗判斷矩陣的一致性：當CR＜0.1時，認為判斷矩陣具有一致性，可以接受；當CR≥0.1時，認為應該對判斷矩陣做適當修正，返回步驟①直到通過一致性檢驗為止。

根據12位專家給定的判斷矩陣，運用幾何平均法將專家意見綜合平均，即得到最終的指標評價判斷矩陣。根據Matlab7.0計算結果，各指標權重保留兩位小數，構建出完整的飛行員CRM培訓效果評估模型，如表1所示。

表1 飛行員CRM培訓效果評估指標權重及評價匯總

3 模糊綜合評估

在結合層次分析法確定各指標的權重的基礎上，進一步應用模糊綜合評判法來評估飛行員培訓的效果。其基本流程為：

①建立評估因素集。飛行員培訓效果的主要素評估指標集 U：反應層 U1、學習層 U2、行為層 U3、結果層 U4。飛行員培訓效果的子要素評估指標集，反應層指標要素U1：課程設置情況U11，課堂參與程度U12，教師授課情況U13，教學設施情況U14；學習層指標要素U2：相關知識的掌握情況U21；行為層指標要素U3：管理能力的提高U31，應急處理能力的提高U32，人際溝通能力的提高U33，計劃協調能力的提高U34；結果層指標要素U4：團隊合作精神的加強U41，組織文化安全的提高U42，人為差錯的減少U43。

②建立評估因素權重集。確定評估主要素集和子要素集中各要素的權重值，根據表1可知，一級指標權重為：U={Ui}={0.28，0.22，0.20，0.30}，i=1，2，3，4

二級指標權重為：W11={0.24，0.25，0.32，0.19}，W22={1.00}，W33={0.32，0.24，0.20，0.24}，W44={0.30，0.26，0.44}

③建立評判集。由于評估指標的重要性都具有模糊性，因此，首先按照重要性由大到小給出某個指標重要性的區間集。根據實際情況，本文給出的培訓效果評估集為：

某飛行學院在開展培訓后通過收集、匯總、整理和分析各種指標的評價數據，同時結合層次分析的各個指標權重得到表1。

④進行各級指標因素的綜合評價。通過對相關人員的詢問調查得到了模糊綜合評價矩陣R。對課程設置情況、課堂參與程度、教師授課情況以及教學設施情況的模糊綜合評價矩陣為：

然后與二級指標的權重向量相乘得二級指標的綜合評價結果：

同理可得其他三級指標的綜合評價結果A2、A3、A4。將二級指標的綜合評價結果作為一個模糊綜合評價矩陣與一級指標的權重向量相乘得一級指標因素的綜合評價結果：

⑤計算每個評價對象的綜合分值。假定評語等級v1、v2、v3、v4的分數重心依次為 95、85、75、65，于是計算飛行員CRM培訓效果評估的綜合得分為90.978。

從反應層、行為層、學習層和結果層四個一級指標的評價結果來看，反應層隸屬于“好”的程度較低，僅達到0.661，這說明培訓的準備工作做得還不夠充分，需要加強課程的設置、教學設施、以及提高授課教師的水平。

4 結語

本文為了能夠層次分明的反映出培訓評估的內容，在Kirkpatrick四層次培訓效果評估模型理論的基礎上結合飛行員CRM的熱點構建了飛行員CRM培訓效果評估指標體系，因此，該指標體系能夠直觀全面的對培訓效果進行評估。此外，由于此體系中存在難以精確量化的指標，因此，為了正確評估飛行員學院的而培訓效果并找出存在的問題，本文在計算指標的時候采用了模糊層次綜合評價法。

[1]Kirkpatrick D.L.Techniques for evaluating training problems[J].Journal of ASTD，1959，13（11）：3-10.

[2]秦壽康.綜合評價原理與應用[M].北京：電子工業出版社，2003.

[3]王蓮芬，許樹柏.層次分析法引論[M].北京：中國人民大學出版社，1990.