KirkPatrick四層次評估模型在新疆少數(shù)民族科技骨干特殊培養(yǎng)效果評估中的應(yīng)用

劉瑩　肖靜

摘要：新疆少數(shù)民族科技骨干特殊培養(yǎng)是經(jīng)國務(wù)院批準，針對新疆少數(shù)民族專業(yè)技術(shù)人員的特殊培養(yǎng)工作。本研究運用Kirkpatrick四層次評估模型，通過實地訪談和問卷調(diào)查的方式，對特培工作實施效果進行評價，了解特培工作實施現(xiàn)狀，對特培工作改善提出建議，并對培訓(xùn)效果評估有效實施提出改進措施。

關(guān)鍵詞：少數(shù)民族 特殊培養(yǎng) 效果評價 新疆

一、問題提出

新疆是多民族聚居區(qū)，少數(shù)民族占全區(qū)人口的61.5%。截止2014年底，全區(qū)少數(shù)民族專業(yè)技術(shù)人員29.44萬人，占全區(qū)專業(yè)技術(shù)人員總數(shù)的58.37%。南疆四地州少數(shù)民族專業(yè)技術(shù)人員15.21萬人，占南疆專業(yè)技術(shù)人員總數(shù)的80.43%。在各類人才隊伍中，少數(shù)民族科技人才隊伍占有很大的比重。少數(shù)民族人才隊伍是推動新疆社會發(fā)展、經(jīng)濟繁榮以及維護民族團結(jié)、社會穩(wěn)定的重要力量，加強少數(shù)民族人才隊伍建設(shè)事關(guān)新疆社會穩(wěn)定和長治久安的全局。

黨中央、國務(wù)院和自治區(qū)黨委、自治區(qū)人民政府歷來高度重視新疆少數(shù)民族人才隊伍建設(shè)，特別是1992年以來，國家根據(jù)新疆的特殊戰(zhàn)略地位和人才發(fā)展現(xiàn)狀，實施了專門針對新疆少數(shù)民族科技骨干的特殊培養(yǎng)工作（以下簡稱“特培”），從自治區(qū)科研、教育、衛(wèi)生、工業(yè)、農(nóng)業(yè)、信息產(chǎn)業(yè)、經(jīng)濟管理等系統(tǒng)，選拔具有較大培養(yǎng)潛力的少數(shù)民族中青年科技骨干，安排到有關(guān)部委、省市和新疆所屬科研院所、大專院校、醫(yī)療衛(wèi)生系統(tǒng)和高新技術(shù)企業(yè)，進行為期數(shù)月至兩年的特殊培養(yǎng)。

本研究在分析第四批特培工作實施現(xiàn)狀的基礎(chǔ)上，運用Kirkpatrick四層次評估模型對特培效果進行評價，并對培訓(xùn)效果評估有效實施提出改進措施，使少數(shù)民族特培工作最大限度地發(fā)揮其應(yīng)有的作用，加快新疆少數(shù)民族高層次專業(yè)技術(shù)人才培養(yǎng)，推動少數(shù)民族地區(qū)社會經(jīng)濟的可持續(xù)發(fā)展。

二、調(diào)查對象與數(shù)據(jù)收集

截止2014年，全疆共派出第四批特培學(xué)員1378人，分別來自科教文衛(wèi)等多個行業(yè)，本次調(diào)研，調(diào)研組深入烏魯木齊、昌吉以及阿克蘇地區(qū)，走訪了11個調(diào)研單位，組織了各種類型的訪談42次，收回有效調(diào)查問卷共計122份。

三、調(diào)查結(jié)果

Kirkpatrick評估模型主要以受訓(xùn)學(xué)員作為評估效果的對象，根據(jù)評估對象的活動狀況，分別從反應(yīng)層、學(xué)習(xí)層、行為層和結(jié)果層四個層級對培訓(xùn)效果進行評估。

1.反應(yīng)層評估

反應(yīng)層評估，主要評估學(xué)員對培訓(xùn)的滿意程度，具體指受訓(xùn)者對培訓(xùn)內(nèi)容、授課教師、培訓(xùn)方式方法以及培訓(xùn)管理和保障等的反應(yīng)，是受訓(xùn)者在接受培訓(xùn)后對培訓(xùn)活動的各種主觀感受，結(jié)合所有人的總體反應(yīng)得出對培訓(xùn)效果的基本評價。反應(yīng)層評估指標主要有培訓(xùn)滿意度指標、培訓(xùn)組織指標、課程內(nèi)容指標、培訓(xùn)導(dǎo)師指標、培訓(xùn)保障指標等。

學(xué)員們根據(jù)自己對所接受培訓(xùn)的實際感受，采用李克特五點量表，分別從以上幾項反應(yīng)層評估指標報告自己的滿意程度。將學(xué)員對各方面的滿意度評定分數(shù)進行加權(quán)平均，得出學(xué)員對反應(yīng)層各項指標的分值。

由表1可以看出，學(xué)員對特培的總體滿意率為76.2%，特培項目達到了預(yù)期的目的。84%的學(xué)員認為特培的組織管理較好，可見，特培的組織管理情況得到了大部分學(xué)員的認可。63.1%的受訓(xùn)學(xué)員認為課程內(nèi)容設(shè)計合理，說明特培課程在設(shè)計上較完善的考慮了受訓(xùn)學(xué)員的培訓(xùn)需求。學(xué)員不滿意的原因反映在部分課程理論性過強，與實踐工作結(jié)合不緊密。以課堂講授為主的授課形式缺乏與導(dǎo)師之間的互動。學(xué)員建議采用多樣化的授課方式，如討論、參觀、實習(xí)等，將理論與實踐相結(jié)合，增強學(xué)員的參與度。89.4%的學(xué)員對特培導(dǎo)師的教學(xué)水平表示認可，學(xué)員認為大部分導(dǎo)師專業(yè)水平高、研究能力強，并且樂于分享資源，在導(dǎo)師的指導(dǎo)下自己的專業(yè)能力得到了提高。對導(dǎo)師教學(xué)水平表示不滿意的學(xué)員反映少數(shù)導(dǎo)師對特培學(xué)員不重視，加之自身工作繁忙，對于學(xué)員的指導(dǎo)和關(guān)心不夠。調(diào)查當(dāng)中發(fā)現(xiàn)，絕大部分少數(shù)民族科技骨干有著強烈的更新知識結(jié)構(gòu)和提高自身素質(zhì)的訴求，因此84.4%的學(xué)員表示如果有機會愿意再次參加特培項目，并希望自己反饋的問題和提出的建議能夠幫助特培工作的改進。

得分相對較低的項目是生活條件以及經(jīng)費保障，通過訪談了解部分培養(yǎng)單位提供的住宿條件較差，有些是設(shè)施簡陋，有些是交通不便。另外，部分學(xué)員對培養(yǎng)經(jīng)費的使用及保障情況不是很了解。

2.學(xué)習(xí)層面評估

學(xué)習(xí)層面評估，主要測評受訓(xùn)學(xué)員通過培訓(xùn)學(xué)到了什么，即評估學(xué)員學(xué)到了哪些知識、學(xué)員掌握或提升了哪些技能、學(xué)員在哪些態(tài)度上發(fā)生了轉(zhuǎn)變。它是從受訓(xùn)者的角度通過對培訓(xùn)內(nèi)容（包括原理、知識、技能、態(tài)度等）的掌握水平來反映培訓(xùn)績效情況的。學(xué)習(xí)層評估指標主要有學(xué)員對知識的掌握情況指標和學(xué)員對技能的掌握情況指標。

特培學(xué)員在知識和技能方面的提升如表2所示，受訪的學(xué)員中106人次認為專業(yè)技術(shù)水平有提升，比重達86.9%；89人次認為自己的業(yè)務(wù)能力有提升，比重達73.6%；81人次認為特培有助于轉(zhuǎn)變觀念、開拓視野，比重達66.4%。從調(diào)查結(jié)果看，特培學(xué)員在專業(yè)知識與技能方面不同程度的得到了提高。

另外，從學(xué)員提交的特培學(xué)習(xí)心得中了解到，大部分學(xué)員認為此次培訓(xùn)滿足了自己的工作和學(xué)習(xí)需要，較大程度地幫助了自己開展本職工作。部分學(xué)員認為此次培訓(xùn)開拓了視野，部分學(xué)員認為此次培訓(xùn)對自己與國內(nèi)先進技術(shù)水平以及學(xué)術(shù)前沿接軌起了較大的作用，同時對今后特培組織管理的諸多環(huán)節(jié)提出了建設(shè)性意見。

3.行為層評估

行為層評估，反映受訓(xùn)學(xué)員將知識、技能運用和發(fā)揮在工作崗位上并提高工作績效的程度，用以判斷所學(xué)知識、技能對實際工作的影響。

對于行為層評估，采用抽樣訪談的形式。隨機抽取各單位特培學(xué)員作為評估對象，對受訓(xùn)學(xué)員的直接上級以及人事部領(lǐng)導(dǎo)進行了訪談。訪談的主要內(nèi)容包括學(xué)員參加特培后，其工作態(tài)度、漢語水平、團隊合作意識、科技論文寫作、科研項目申報等幾方面的改變情況。訪談中了解到，一些學(xué)員的工作態(tài)度發(fā)生了變化，比以前更加刻苦敬業(yè)，思想政治水平有了顯著提高；一些學(xué)員的漢語水平明顯提高，使用漢語進行日常溝通和工作交流都更加得心應(yīng)手；一些學(xué)員管理水平得到提升，團隊合作意識明顯增強；有些學(xué)員的科技論文寫作以及科研能力得到提升，積極申請科研項目并且中標率較高。

4.結(jié)果層評估

結(jié)果層評估，將評估上升到組織的高度，即判斷培訓(xùn)對受訓(xùn)者所在組織的改善是否起到一定的作用。

在走訪的地區(qū)和單位中，特培學(xué)員在所在單位和當(dāng)?shù)禺a(chǎn)生了良好的示范帶頭作用。被調(diào)查的122名第四批特培學(xué)員學(xué)成后，共承擔(dān)課題44項，其中國家級9項、省部級15項、地廳級20項；發(fā)表論文234篇，其中核心期刊132篇，非核心期刊102篇；科研成果獲國家級獎項2人、省部級獎項4人、市縣級獎1人（見表3）。

四、培訓(xùn)效果評估有效實施的改進措施

1.加大組織支持力度

特培項目的有效實施以及實施效果的評估有賴于各部門主管的支持，組織支持是一個持續(xù)的過程，貫穿于培訓(xùn)的各個環(huán)節(jié)，組織支持可以說是培訓(xùn)活動成功的關(guān)鍵因素。為獲得組織的支持和領(lǐng)導(dǎo)的重視，應(yīng)及時將培訓(xùn)的顯著成效反映給各部門領(lǐng)導(dǎo)，需要用有說服力的量化數(shù)據(jù)來增加組織對項目的信心并給予持續(xù)的支持，這將進一步提高培訓(xùn)效果評估的準確性，為評估爭取所需資源。

2.選擇合適的評估者

作為特培評估的主體，如何選擇合適的評估者是開始培訓(xùn)效果評估之前需要慎重考慮的問題。通常可以將評估者分為內(nèi)部評估者和外部評估者，內(nèi)部評估者隸屬于組織內(nèi)部，可以由選送單位領(lǐng)導(dǎo)、培養(yǎng)單位主管人員、人社廳負責(zé)人組成。外部評估者主要來自組織之外，如科研機構(gòu)、大學(xué)和咨詢公司等。內(nèi)外部評估者具有各自的優(yōu)缺點，內(nèi)部評估者相對更了解項目特點和實施情況，但是容易在評估過程中加入個人感情，影響評估結(jié)果客觀性；外部評估者掌握較為專業(yè)的評估技術(shù)和方法，立場中立，但是需要一定時間了解項目內(nèi)容。在選擇評估者時應(yīng)考慮特培項目本身的特點、評估目的等諸多因素，必要時可采用內(nèi)外部評估相結(jié)合的方式。

3.合理反饋培訓(xùn)效果評估結(jié)果

對培訓(xùn)效果評估結(jié)果進行反饋是推進評估結(jié)果實施的重要環(huán)節(jié)，通過向不同參與主體及時合理反饋評估結(jié)果，達到改進和調(diào)整項目實施的目的。

反饋給培養(yǎng)單位，培養(yǎng)單位可以根據(jù)學(xué)員的意見反饋，對課程內(nèi)容和培養(yǎng)方式進行調(diào)整，以便更好地滿足學(xué)員需要，以此不斷改進培養(yǎng)工作質(zhì)量。反饋給特培學(xué)員，使他們了解培訓(xùn)的效果，體會培訓(xùn)前后自己各方面的變化和業(yè)績表現(xiàn)，有助于充分發(fā)揮培訓(xùn)所學(xué)，進一步提升自我，同時也為下一批特培學(xué)員做出示范。反饋給特培學(xué)員的單位領(lǐng)導(dǎo)，他們是培訓(xùn)效果體現(xiàn)的直接觀察者，有切身的感受，能夠比學(xué)員更加客觀的評價培訓(xùn)項目的價值，因此他們對評估結(jié)果的跟蹤反饋是非常重要的。反饋給人社廳，人社廳負責(zé)人主要通過培訓(xùn)效果評估結(jié)果了解培訓(xùn)投資回報情況，培訓(xùn)效果評估結(jié)果也是調(diào)整培訓(xùn)相關(guān)政策的重要依據(jù)。及時的信息反饋，能夠促進管理部門和選送單位對特培項目的了解和重視，能夠調(diào)動特培學(xué)員的積極性，不斷提高自身素質(zhì)和工作水平。

4.完善培訓(xùn)評估制度

（1）建立正式有效的溝通機制。由于特培項目涉及到多個部門，因此培訓(xùn)效果評估過程要得到各部門的一致認同和堅強的執(zhí)行力還需要加強合作與交流。自治區(qū)人社廳、選送單位、培養(yǎng)單位以及學(xué)員之間應(yīng)保持密切聯(lián)系，及時交流培訓(xùn)情況。人社廳應(yīng)積極了解不同工作領(lǐng)域?qū)W員的具體培訓(xùn)需求，尊重學(xué)員對于培養(yǎng)單位的選擇；選送單位應(yīng)與學(xué)員和培養(yǎng)單位定期交流，及時發(fā)現(xiàn)問題，提出建議；培養(yǎng)單位應(yīng)充分了解選送單位的工作需要以及學(xué)員的自身訴求，有針對性地設(shè)計和調(diào)整培養(yǎng)計劃。各部門間的定期溝通交流可通過多樣化的渠道提高溝通效率和有效性，如電視電話會議、電子郵件、內(nèi)部網(wǎng)絡(luò)平臺等。

（2）建立并完善績效考評制度。績效考評不但可以發(fā)現(xiàn)和找出培訓(xùn)需求，據(jù)此制訂培訓(xùn)措施與計劃，還可以檢查培訓(xùn)效果，有助于提高培訓(xùn)效果評估工作效率和質(zhì)量。不僅要對特培學(xué)員進行績效考核，還應(yīng)將特培工作與選送單位和培養(yǎng)單位的績效考核掛鉤。對工作突出的選送單位和培養(yǎng)單位進行嘉獎，并作為典型進行經(jīng)驗分享，對存在問題的相關(guān)單位提出整改意見。

（3）建立科學(xué)、有效的數(shù)據(jù)收集系統(tǒng)。數(shù)據(jù)收集系統(tǒng)的建立是開展培訓(xùn)效果評估必不可少的工作之一，是項目基礎(chǔ)管理的重要組成部分。特培項目的反饋結(jié)果應(yīng)及時歸檔整理，完整記錄和保存評估過程中收集的原始數(shù)據(jù)資料以及分析結(jié)果等，并建立一個信息系統(tǒng)，以便于今后的查找分析，為以后的培訓(xùn)工作提供支持。