張榮 王文玉 湯興芝


摘要:培訓效果評估是保證培訓質量的有效途徑和提升培訓管理水平的重要措施。本文對湖北分院舉辦的五期基層臺站短臨預警預報服務培訓班進行了培訓過程和培訓后跟蹤評估分析,結果表明:(1)從培訓過程評估分析看,學員對培訓目標的準確性認可程度非常高,滿意率在99.4%以上。95%以上的學員都認為此項培訓對實際工作指導作用非常大,課程內容理解程度的滿意率在92.4%以上;(2)從教學指標評估情況看,培訓班所有課程的教學準備、學科把握能力、教學內容、教學方法、教學態度和教學效果6項教學指標的滿意率平均值均在96%以上,其中教學態度的滿意度最高,其值為99.3%;(3)在培訓后跟蹤評估方面,學員認為在培訓中短臨個例模擬實習效果最好,其次是強對流天氣案例講解、短臨個例考試及評析、短臨預報理論。實習實訓和教學案例教學方式在培訓中的應用取得的效果同樣受到送培單位的認可。
關鍵詞:培訓;質量;評估
員工培訓是企業提升綜合實力,獲取競爭優勢的關鍵性因素,也是人力資源管理活動的重要職能。而培訓評估作為培訓流程中的一個關鍵環節,對于實現培訓資源的合理配置,解釋培訓的實際效果,確定培訓對組織的貢獻都具有積極意義。培訓評估是指依據培訓計劃,對照培訓目標,通過一定的方式方法對培訓項目、培訓過程和效果進行評價[1] 。可分為培訓前評估、培訓中評估和培訓后評估。培訓前評估是在培訓前對受訓者的知識、能力和工作態度進行考察,以此作為培訓者確定培訓計劃的根據。培訓前評估能夠保證培訓項目組織合理、運行順利,保證受訓者對培訓項目的滿意度。培訓中評估是指在培訓實施過程中進行的評估,能夠控制培訓實施的有效程度。培訓后評估,是對培訓的最終效果進行評價,評估學員培訓前后工作表現,學員是否將培訓所學內容具體應用到實際的工作中,是培訓評估中最為重要的部分。培訓評估對于保障培訓質量、衡量培訓效益、改進培訓項目都具有極其重要的意義[2-4]。
《中國氣象局關于縣級綜合氣象業務改革發展的意見》指出,縣級氣象部門要加強災害性天氣和氣象災害的實時監測預警業務。在上級指導下,開展強對流天氣和突發氣象災害的臨近預報預警業務,及時發布各類氣象災害預警信號。為提升基層人員短臨預報能力,中國氣象局氣象干部培訓學院湖北分院2016年開發了基層臺站短臨預警預報服務培訓項目,面向的對象為從事預報工作一年以上、大氣科學相關專業畢業或參加過干部學院大氣科學相關專業基礎知識培訓班學習的縣局氣象臺預報業務人員。通過短臨預報理論學習、案例教學、短臨個例實習和講解、短臨考試等幾個模塊的培訓,使學員深入了解短臨預報理論知識,扎實學習近年來發生的典型短臨個例,掌握短臨預報的技巧和方法,提高短臨預報的理論水平和實際預報能力。2016年-2018年期間,共舉辦5期基層臺站短臨預警預報服務培訓班,培訓人數共計154人,學員為基層氣象部門綜合業務崗人員。其中第1、2、4、5期面向湖北省舉辦,第3期為區域培訓班,學員來自湖北、湖南、江西、河南、安徽五省。
本文采用柯氏四層次評估模型[5-7],該模型認為,需要從學員的反應、學習、行為和結果四個層次進行評估,該模型簡單、全面、有系統性,是目前應用最廣泛的評估模型。本研究主要通過學習層和行為層兩個層次來對培訓目標的實現程度進行客觀評價,以期為今后培訓提供依據、經驗和參考。
一、調查方法及資料來源
1.資料來源:
學習層評估資料來源:在每期培訓班進行過程中,向學員發放調查問卷。共發出調查問卷154份,收回154份,有效問卷154份。
行為層評估分析資料資源:為了調查學員學習結束回到工作崗位后,培訓班所學內容是否對工作起到促進作用,在培訓班結束一年后向學員及所在單位發放調查問卷進行評估。發放個人問卷123份,收回89份,有效問卷89份,發放單位問卷72份,回收54份,有效問卷54份。
2.調查方法:
學習層評估采用問卷調查和學員座談、學員學習總結、考試考核等方式,側重了解學員對學習反應以及對培訓課程設計、教師授課、培訓組織等的滿意度。行為層評估采用問卷調查、調研座談等方式了解學員培訓前后工作表現,即學員是否將培訓所學內容具體應用到實際的工作中。
二、培訓過程評估分析
1.課程安排情況分析
培訓實施前,湖北分院組織人員進行了大量的教學調研工作,多次召開了專題會議,邀請多部門專家針對培訓內容、課程設計、課堂教學和實習實踐等環節進行深入研討和完善。在培訓策劃過程中充分考慮了基層臺站培訓需求、崗位職責,最后確定了培訓主要課程及學時安排(表1)。課程安排上既有適當的理論講解,又有大量的實習和考試,其中實習課程占77.3%,通過講授、實習、考試這些環節,強化學員對知識的理解和鞏固。
2.培訓設計與安排項目情況分析
一般從培訓目標的準確性、課程安排的合理性、培訓內容的針對性、培訓教材的適用性四個方面反映培訓設計與安排是否合理。表2給出了湖北分院承辦的5期培訓班的學員反饋的設計與安排項目滿意率。其中,培訓目標的準確性滿意率最高,每期結果在97%以上,培訓學員認可程度非常高;課程安排的合理性滿意率平均值為86.2%,在課程的安排上還有較大提升空間。通過表2也可發現,第3期培訓班學員對培訓目標、課程安排、培訓內容、教材都給出了非常高的評價,由于本期培訓是面向區域的試點培訓,反映了培訓設計和安排受到了省外學員的認可。
從綜合評價項目分指標角度分析(表3),基本上97%以上的學員都認為此次培訓對實際工作指導作用非常大,培訓學員認可程度最高;課程內容理解程度的滿意率平均值為92.4%,不足的原因可能是由于課程安排緊湊,留給學員消化的時間較少。
3.教學指標評估情況分析
培訓班配置的師資是由武漢中心氣象臺專家和省骨干預報員組成的教師隊伍。他們既有豐富的預報經驗,又有淵博的業務理論知識。這些專家針對基層臺站預報員業務水平和業務需求精心準備PPT,廣泛搜集各種資料,準備大量典型個例。為了解授課教師的教學效果,在5期培訓班中發放了教學質量調查問卷。由表4可知,5期培訓班所有課程的教學準備、學科把握能力、教學內容、教學方法、教學態度和教學效果6項教學指標的滿意率平均值均在96%以上,其中教學態度的滿意度最高,其值為99.3%。在6門主干課程教學質量調查中,培訓學員對雷暴大風個例講解、個例實習及考試指導課程的授課老師教學質量評價最高,其次是冰雹個例講解和暴雨個例講解課程。
三、行為層評估分析
行為層評估主要分析學員培訓后的收獲,是衡量培訓質量的重要指標,也是培訓目標的最后歸宿。根據對學員結束學業一年后發放的調查問卷進行分析,可以得到以下情況:
培訓目標收獲:通過將學員培訓后的行為與培訓目標進行比較發現,學員認為回到工作崗位上,在冰雹暴洪的雷達探測與預警、PUP軟件操作、雷暴大風龍卷的雷達探測與預警、多普勒雷達探測原理和方法、探空分析等方面收獲較大,分別占93.2%、93.2%、92%、83.9%、78.1%。由于培訓時長限制,多普勒雷達探測原理和方法、探空分析等方面在授課過程中所占學時較少,教師無法進行深入系統地講解,因此學員認為收獲不大。
培訓方式:學員認為在培訓中短臨個例模擬實習效果最好,其次是強對流天氣案例講解、短臨個例考試及評析、短臨預報理論。實習實訓和教學案例教學方式在培訓中的應用取得的效果同樣受到送培單位的認可。
培訓效果:超過50%的學員認為回到工作崗位上,自己對強對流天氣的實時監測能力和水平、強對流天氣預警預報能力和水平、強對流天氣預警預報業務工作思路和方法、日常天氣預報服務工作能力方面提高較大。
培訓建議:學員建議延長培訓時間,可以更加系統、透徹地掌握短臨預報的方法、步驟和流程;增加個例個數;在培訓中,加入天氣過程的歸納總結課程。加強服務能力的培訓;避開主汛期;在培訓中強化對強對流天氣的構成要素、預報方法、步驟和流程的學習。
四、培訓的延伸思考
通過反應層和行為層評估分析,認為在今后培訓班實施過程中,需注意以下幾個方面,以此提高培訓效果。
1.遠程+面授培訓相結合,提升培訓效果:由于學員來自基層氣象部門,增加面授的培訓時長不容易實現,為提升面授效果,可以像天氣理論、雷達知識、T-lnp應用等方面的知識,可以開班前以遠程培訓形式組織學員學習,當學員學習完規定的理論學習內容并通過考核后,再來參加面授培訓。
2.在培訓中,加入天氣過程的歸納總結課程。為提升綜合業務崗人員短臨監測和服務能力,需在課程中加入天氣過程的歸納總結課程,授課教師重點介紹分析和總結個例的思路。
3.擴大培訓效應方面,基于縣級氣象部門人員缺乏和培訓經費的考慮,培訓結束后,可在各單位安排參加培訓的人員進行再培訓活動,以擴大培訓效應,達到較好效果。
五 結論
本文對五期基層臺站短臨預警預報服務培訓班進行了反應層和行為層跟蹤評估分析,研究表明:
1.從培訓過程評估分析看,培訓目標的準確性滿意率在99.4%以上,培訓學員認可程度非常高,95%以上的學員都認為此項培訓對實際工作指導作用非常大,課程內容理解程度的滿意率在92.4%以上。
2.從教學指標評估情況看,培訓班所有課程的教學準備、學科把握能力、教學內容、教學方法、教學態度和教學效果6項教學指標的滿意率平均值均在96%以上,其中教學態度的滿意度最高,其值為99.3%。
3.在培訓后跟蹤評估方面,學員認為在培訓中短臨個例模擬實習效果最好,其次是強對流天氣案例講解、短臨個例考試及評析、短臨預報理論。實習實訓和教學案例教學方式在培訓中的應用取得的效果同樣受到送培單位的認可。
通過反應層和行為層跟蹤評估,可以對培訓全過程實施全面科學管理,根據效果分析,為改進培訓提出了有針對性的建議和意見,有效促進了培訓項目的健康有序開展。
參考文獻:
[1] 鄧一,趙亞南.葉夢姝,等.干部教育培訓機構評估研究—以氣象干部教育培訓機構評估為例[J].繼續教育,2016,12:53-56.
[2] 周志平.干部教育培訓教學質量評估研究[J].中國浦東干部學院學報,2009,3(1):112-116.
[3] 劉彥琴,楊枝華,張一爾.干部教育培訓項目評估的研究和思考[J].繼續教育,2016,1:25-28.
[4] 王寧,余翔,于寧.做好培訓評估提高培訓質量[J].國家林業局管理干部學院學報,2008,1:13-16.
[5] 劉偉,肖秧琳,桑友偉.地面高空一體化觀測業務培訓評估實證分析[J],高等繼續教育學報,2015,28(6):70-74.
[6] 鄭立海,石大維.教師培訓項目的效果評估研究—以中國—UNICEF“災區教師培訓”項目為例[J].電化繼續教育,2014,5:108-113.
[7] 周暉,楊思詩.職業經理人管理培訓效果評估與培訓遷移研究[J],人力資源管理,2015,2:83-88.
(作者單位:中國氣象局氣象干部培訓學院湖北分院)