馬旭玲
(中國氣象局氣象干部培訓學院,北京100081)
對柯氏評估技術的再認識及其對我國開展培訓評估的啟示
馬旭玲
(中國氣象局氣象干部培訓學院,北京100081)
柯氏評估模型是影響極為廣泛,也是應用最為普遍的評估模型。在柯氏評估模型提出50年后,評估其應用現狀,在此基礎上,介紹了有效實施柯氏評估技術的基本原則,探討對我國開展培訓評估的啟示,以期不斷提升培訓評估工作的科學化水平和影響力,提升培訓的能力和水平。
柯氏評估技術;培訓;效果;評估
自從1959年唐納德·柯克帕特里克在雜志上發表了他的關于培訓評估的思想以來,柯氏評估模型已經使用50多年了,反應、學習、行為和結果四個評估層級組成是今天使用最廣、影響最廣泛的培訓評估模型之一[1]。50年后,柯克帕特里克及其合作者重新審視柯氏四級評估模型,并介紹了有效實施柯氏評估技術的基本原則,本文介紹了該原則,并探討了其對我國開展培訓評估工作的啟示。
ASTD(美國培訓和發展協會)2009年發布的一項研究報告《評估的價值:使培訓評估更有效》指出[2],柯克帕特里克技術是使用最為普遍的評估技術。但是在柯氏評估模型應用50年后,柯克帕特里克及其合作者重新評估該模型的應用情況,發現大多數培訓從業人員聽說過柯氏四層次評估模型,其中許多從業人員都知道這四個層次分別是什么,但是相對很少有人知道如何有效地進行2級(學習層)以上的評估。幾十年來,培訓從業人員都是在一個培訓項目后試圖應用四個評估層次,但是根據這種思路開展培訓評估工作,大多數的組織都只完成了前兩級(反應層、學習層)的評估,只有極少數的組織進行了三級和四級評估(行為層、結果層)。
根據柯氏評估模型的應用現狀,柯克帕特里克及其合作者提出了有效實施評估技術的幾個基本原則[3],并認為這是成功執行培訓項目評估的關鍵。
1.以相反的順序開始實施柯氏四級評估
針對大多數培訓從業人員將評估工作從一級評估開始,且很少有人知道如何有效地進行二級以上的評估,且評估工作得不到有效認可、評估模型的作用得不到有效發揮的情況,柯克帕特里克及其合作者建議在新的模型中以相反的順序開始實施柯氏四級評估模型[4]。
該模型注意在業務與培訓之間建立正式的聯系,提出要求努力解決業務問題或利用市場機遇。以相反的順序開始實施四級評估,因為從第四級向第一級開始工作,首先決定成功是什么樣子(L4),隨后是確定促進成功的關鍵行為指標(L3)和促進行為轉變的驅動因素,通過確定少數的“關鍵行為”,參與培訓的人員培訓完成后應用關鍵行為到他們的工作中,以實現確定的目標。另一方面確定“行為轉變的驅動因素”,需要其他相關人員參與執行,以加強參與者去執行他們的關鍵行為。
2.將預期回報作為評估培訓價值的終極指標
確定培訓評估的終極指標就是培訓從業人員不斷地理清和定義利益相關者的期望的過程,通過提出問題來把利益相關者的需求轉換成為一般的期望,并轉換為便于觀察、測量培訓項目成功與否的指標。這些指標就是四級結果層的評估指標。明確了四級評估指標,培訓從業人員就可以集中全部努力,以實現利益相關者的期望回報。
3.加強與相關人員的合作,促進參訓人員行為的轉變
與傳統的培訓相比,柯克帕特里克及其合作者不認為培訓活動本身能帶來積極的、最基本期望的結果,參訓者的學習通常在正式培訓前和培訓后都已經發生了。2008年柯克帕特里克及其合作者的一項研究報告顯示,70%的員工學習發生在工作上,因此培訓從業人員需要通過深入學習培訓徹底改變原來的角色。不僅需要呼吁業務伙伴幫助確定成功的培訓標準,也需要在整個的培訓活動和業務實現的過程中與業務伙伴加強合作。
在培訓前,培訓從業人員需要與業務伙伴相關人員合作準備培訓。相關管理人員應向他們的下屬解釋在培訓過程中他們需要學習什么,為什么這些是重要的,在培訓期間和培訓后對他們行為的期望,以及在整個過程中他們將獲得的支持。
更加關鍵的是業務伙伴相關管理人員在培訓后的角色,他們是通過支持和問責制強化新學到的知識和技能的核心人物,強化和指導的程度與改進的業績和積極的培訓成果有直接的關系。
4.培訓專業人員要深入到三級和四級評估工作中
柯克帕特里克的同事的一份研究報告揭示了四個評估層級之間的統計關系:一級和二級之間有很好的相關性,學習者更積極地參與導致了更高程度的學習;同樣,在三級和四級之間也有很好的相關性,如果員工堅持在工作中執行關鍵行為,那么個體和整體的工作效率都會提高;然而,在二級和三級之間沒有明顯的相關性。總之,這份研究報告指出,如果沒有有計劃的和一致的強化措施,即使提供優良的培訓也不會導致參訓人員的學習向行為和結果的重大轉移。
ASTD在2006年一個報告中確認培訓結束后超過70%的培訓是失敗的,主要的原因就是參培人員沒有機會去很快應用他們學到的知識,以及后續的指導不力。因此專業人士需要重新定義自己的角色,在進行一級和二級評估的基礎上,深入到三級和四級評估工作中,發揮培訓從業人員在三級和四級評估中的影響和作用。通過實施三級和四級評估,促進培訓目標的實現,證明培訓帶來的價值。
上述幾項原則為我們有效地開展培訓工作及培訓評估工作提供了新的啟示。
1.在設計培訓項目時明確三級和四級評估指標
為了有效地發揮培訓的作用,促進培訓項目對業務發展的促進作用,有效地開展培訓項目評估工作,培訓項目評估人員要深入參與到培訓項目設計中,參與項目需求分析,清楚培訓項目最終要到達的目標,并據此明確培訓項目成功的終極評估指標,即柯氏四級評估模型的四級評估指標。同時明確要實現培訓目標需要培訓人員具備的關鍵行為指標,將培訓效果評估工作與培訓項目設計同步進行。
2.加強培訓單位、參訓人員及送培單位三者的合作
大量的研究成果表明,要發揮培訓的效果,促進參訓人員行為的轉變和積極的培訓結果的出現,僅僅靠培訓單位及參訓人員的分別努力是難以實現的,而是需要培訓單位、參訓人員及送培單位三方的合作,培訓單位要與送培單位聯系,明確參訓人員在培訓后需要具備的行為指標及促進這些行為發生的環境因素,使參訓人員明確參加此次培訓后組織對自己行為的要求,在具備相關驅動環境的條件下,促進學習成果向行為的轉變,以實現培訓項目最終要實現的目標。
3.要注重發揮培訓評估的主觀能動作用
要想培訓發揮作用,發揮培訓評估工作的主動作用就顯得非常重要,在以往的培訓效果評估中,往往培訓專業人員將評估工作放在培訓中和培訓后進行,在發揮培訓評估作用的主動作用方面不夠。事實上,要想發揮培訓的作用,發揮培訓評估的主觀能動作用非常重要,將評估工作主動融入到培訓及參訓人員后續行為的強化和監控過程中,對促進培訓作用的發揮和客觀評估培訓效果具有非常重要的作用。所以,培訓評估工作不僅僅是事后評估,更要發揮主動作用,促進培訓效果的發生。
4.不斷探索進行三級和四級評估的有效方法
在四級評估體系中,大多數培訓專業人員已經能熟練應用一、二級評估,但是對于有效實施三級和四級評估,尚難有有效的評估辦法,而三、四級評估在整個培訓作用的發揮方面又起著非常重要的作用,尤其是通過行為轉變,在促進培訓效果方面具有非常重要的作用,所以培訓專業人士要不斷探索嘗試有效的三級和四級評估方法,促進培訓作用的發揮。
5.為相關人員提供完整的培訓效果分析報告
在做好一級、二級評估的基礎上,做好三級和四級評估分析,為相關人員提供完整的培訓效果分析報告,客觀評價培訓的成本效益,促進相關人員對培訓工作的客觀公正的認識,為培訓工作創造良好的環境,并不斷積累提高培訓的專業水平和能力。
柯氏評估模型在國內也是應用比較廣泛的一種評估模型,但是目前評估工作的效用及影響力還不夠,大多數評估停留在一二級兩個層次以上,對開展三級和四級評估的方式方法還不夠,培訓應有的價值也未得到充分的發揮,對培訓評估工作的認識還不夠深刻,有效實施柯氏評估技術的基本原則為我們重新認識培訓評估工作及開展培訓評估提供了系統的新思路,我們要在培訓評估工作中不斷探索合適的方法,積累培訓經驗,不斷提升培訓評估工作的科學化水平和影響力,提升培訓的能力和水平。
[1]ASTD research report.Value of evaluation:making training evaluation more effective[EB/OL].http://www.astd.org/,2011-5-23.
[2]TMR Editors.Study shows poor training evaluation[EB/ OL].http://www.tmreview.com/Editorial.asp?ID= 1800,2011-5-24.
[3]Jim and Wendy Kirkpatrick.Three Steps to Effectiveness[EB/OL].http://clomedia.com/articles/view/three_steps _to_effectiveness,2011-05-22.
[4]Jim Kirkpatrick,Wendy Kayser Kirkpatrick.The Kirkpatrick Four LevelsTM:A Fresh Look After 50 Years 1959-2009[EB/OL].http://www.kirkpatrickpartners.com/,2011-5-25.
G712
A
1001-7836(2012)08-0001-02
10.3969/j.issn.1001-7836.2012.08.001
2012-03-01
馬旭玲(1981-),女,黑龍江北安人,工程師,碩士研究生,從事教育培訓理論研究。