文/福建師范大學福清分校 盧飛斌
檔案教育培訓評估體系的研究
文/福建師范大學福清分校 盧飛斌
檔案教育培訓評估是了解檔案教育培訓目標是否達成,改進教育培訓質量和確定未來教育培訓項目的基礎。本文在闡述檔案教育培訓評估概念和分析效果評估3種理論模型(層級型、過程型和層級—過程綜合型)的基礎上,構建了3大階段5項評估環節的檔案教育培訓評估綜合體系,并較為詳細地說明5項評估環節的操作方式和注意事項,為提高檔案教育培訓評估的有效性盡一份綿薄之力。
檔案教育培訓;評估;體系
檔案教育培訓作為開發檔案人力資源、提高檔案工作效率的重要措施,其效果的好壞是評價檔案教育培訓質量的基礎標準;而效果好壞的評價——檔案教育培訓評估,則是了解教育培訓目標是否達成,改進教育培訓質量和確定未來教育培訓項目的基礎。以“檔案”“培訓”“評價/評估”為主題進行搜索,發現僅有李海英、王海燕(2005)的《論檔案在職教育培訓評估》探討了檔案在職教育與全日制高等教育的不同之處,并提出檔案在職教育培訓評估的內容應包括培訓機構的組織管理(管理體制、辦學規模、師資隊伍、財務狀況)、培訓教育的過程管理(制度建設、具體教學過程管理、學員管理)、質量控制(學員學習效果、培訓效果的信息反饋機制、社會評價)3個方面。對于檔案培訓效果評估的具體流程、方法,尚未有相關研究見諸筆端。因此,為完善檔案教育培訓工作體系,提高檔案教育培訓成效,建立一套行之有效的檔案培訓評估體系是不可忽視的重要任務。
檔案教育培訓評估是通過一定方式對培訓的分析、設計、開發、實施和效果檢驗全過程進行測評、分析和檢查,及時調整培訓中的不足之處,提高受訓者知識、技能在實際工作中的遷移效果,從而促進受訓者派出單位的工作效益和培訓項目效益的最大化。當前,檔案教育培訓評估尚未有較為成型的理論模型。因此,對理論的探討主要從培訓效果評估的3種理論進行探討。
(一)層級型評估理論。層級型評估理論主要代表是柯克帕特里克及其兒子完善的柯氏模型,包含反應、學習、行為和結果4個層級。由于最初的柯氏模型是訓后評估,所以對促進當前教育培訓項目操作過程的改進發揮的作用不夠。鑒于此,柯克帕特里克的兒子吉姆豐富了該模型,更具體細致地說明四個層級的指標,如圖1。

圖1 新柯氏模型
新的柯氏模型強調應聚焦預期結果:為了實現預期結果,培訓組織者應在培訓第一步——設計開始,就應該自我詢問有關第四層級的問題,如受訓者利用他們的所學可以做什么?本次的培訓將如何影響受訓者?此次的培訓目標是什么?如何知道培訓目標是否實現?……除了對培訓預期結果的重視外,新的柯氏模型還強調與受訓者的上級合作,鼓勵其讓受訓者為培訓做好準備,讓其了解培訓內容,支持受訓者應用所學的知識、技能,鼓勵其盡量減少培訓遷移的阻力。
(二)過程型評估理論。與層級型評估理論的結果導向不同,過程型評估理論關注的是培訓過程中各環節的評估。CIPP是過程型評價理論的主要代表,是美國教育評價專家斯塔弗爾提出的,由4項評估內容組成,具體見表1:

表1 CIPP模型
CIPP模型以教育決策為導向,重視教育過程中的改進,是診斷性評價、形成性評價和終結性評價的有機結合,也是在實施前、中、后都可以實施的靈活模式。但此種模型對價值判斷不夠,對成果的預估還需要再細化。
(三)層級—過程綜合型評估理論。層級和過程評估理論都有各自的缺陷而且能互補,因此當前越來越多的組織將這兩種理論綜合起來指導培訓評估工作。例如,高杰、范新(2014年)結合柯氏的層級模型和CIPP模型,闡述了神華集團管理學院基于多維度全流程的培訓效果評估體系:(1)培訓預評估:包含需求分析和項目評價。其中,需求分析有組織層、任務層和人員層3個層面;項目評價是對項目的重要性和能配置、利用的培訓資源程度的評估。(2)培訓過程評估:含培訓后的反應層評估和學習層評估。反應層評估主要是對項目內容、授課教師和服務組織三個方面滿意度來評估培訓質量;學習層評估是通過隨筆、論文和案例評價三種方式來測量受訓者學習到的知識及如何應用。(3)培訓跟蹤評估:含行為層評估和績效層評估。行為層評估考察受訓者回到工作崗位后個人能力、態度等方面發生的變化,包含學習目標設定、評估,行動計劃制定和實施評估四個環節。(4)績效層評估:通過學員自評和上級評價兩種回訪問卷方式考察培訓對派出受訓者組織績效的影響。
在當前各類檔案教育培訓中,對培訓效果的評估大都在訓后采用考試的方式測驗受訓者在反應層和學習層的狀況,忽略檔案教育培訓前期的分析、設計、開發工作和培訓實施過程四個環節的評估,也尚未對受訓者及其派出單位是否實現預期結果進行回訪跟蹤。為進一步提高檔案評估質量,建議可在層級—過程綜合型評估理論的基礎上建立適合檔案培訓的效果評估體系,從而為檔案教育培訓質量的不斷完善提供有效的反饋信息。具體而言,檔案教育培訓評估體系包含3大階段及5項評估環節的具體評估內容和方式,如表2所示:

表2 檔案教育培訓評估體系
(一)培訓前。在檔案教育培訓開始前可通過選擇教育培訓領域、與教育培訓內容相關的等專家形成專家小組,對分析、設計和開發三個環節工作的有效性進行定量評估,從而促使檔案教育培訓在開始前就能完善相關準備工作,提高檔案教育培訓的適切性。檔案教育培訓組織者可通過一定方式來提高這3個環節工作的有效性,具體而言:1.分析環節。分析由教育培訓需求的分析與評估、分析收集到資料的價值、參與角色的分析和輸出4個步驟組成。其中,培訓需求的分析是關鍵,分為單位和個人兩種需求。派出單位的教育培訓需求:可通過問卷、訪談的方式請受訓者上級主管回答相關問題:您希望參與檔案教育培訓者掌握什么知識、技能?因為這些知識、技能,單位應該看到什么樣的期望結果?擁有這些知識、技能,受訓者回到單位后會產生預期結果的哪些跡象?個人需求:采用SWOT模型通過問卷、訪談的方式辨析代表性學員的需求。相關問題如圖2所示。在分析的第三步——參與者角色分析中,主要是對檔案教育培訓的組織者、執行者、設計者、項目負責人和行政后勤支持者應承擔的工作進行分析。在前三個步驟的基礎上,分析最后會輸出分析報告,含人力資源狀況、受訓者素質及差距和相關解決方案。2.設計環節。含以下5個步驟:建立培訓目標、確定實施戰略、確定培訓結果評價方法和所需資源、建立項目計劃和做好預算。其中,確定實施戰略時要考慮適合受訓者的教育培訓形式(如研討、案例分析、現場參觀、授課、在崗培訓、小組討論等),傳授與媒介途徑(面授、網絡等),課程設計(課程內容、教材獲得方式、現有檔案培訓和開發課程的評價)和參與設計角色(組織者、主要執行者、有關專家等)的職責范疇。3.開發環節。包含課程開發、材料檢查和參與開發角色人員(組織者、設計者、教育培訓負責人、課程開發者,教育培訓執行者等)的職責考慮3個方面。其中,課程開發要注意激發受訓者的學習動力,進行課程相關事項的示范,課程演習、課程的復習和應用指導。材料檢查包括準備教育培訓材料的樣本,請有關專家和執行者對培訓材料進行審閱、評價,對材料進行修改,通過小范圍實踐進行檢查,反復修改和定稿。

圖2 個人需求SWOT模型
(二)培訓中。在實施檔案教育培訓過程中,組織者、執行者可以在每天培訓課程結束后或在培訓階段性小結中了解受訓者對授課老師、課堂組織、授課方式等反應層面的滿意度,對所傳授知識與受訓者相關性、是否實用和調整建議等學習層面的評價;并將這些意見和建議及時反饋給相關人員,促使其在下一階段進行調整,從而提升受訓者的滿意度。此外,教育培訓實施者還可在教育培訓過程中鼓勵協助受訓者做出應用所學知識的工作計劃和返回工作崗位后打算如何做的承諾(四聯單形式,分別給受訓者、培訓實施者、培訓組織者和受訓者上級主管),促進教育培訓效果的轉化。
(三)培訓后。在檔案教育培訓項目結束后組織者和實施者應當再一次收集學員對整個項目反應層面和行為層面的滿意度評價,并在結束一段時間后(3—6個月)通過對受訓者及其上級主管填寫的培訓承諾四聯單和問卷、訪談方式來收集受訓者知識、技能、態度實際改變、工作績效是否提升和有待加強之處等信息,以此來分析培訓效果轉化程度。層級—過程綜合型檔案教育培訓培訓效果評估體系是全流程多維度的綜合體系,在實際操作中需要評估人員深入了解3大階段5個評估環節的具體操作細節和評估方法,將評估分析得到的信息和建議及時有效地反饋給檔案組織者和實施者等相關人員,并建立合理的機制促使檔案教育培訓相關人員針對評估信息與建議進行吸收和行為改進,這樣才能真正有效地提升檔案教育培訓質量。
[1]高杰,范新.基于多維度全流程的培訓效果評估體系研究[J].中國人力資源開發,2014(14):38-43.
[2]魏秀麗,寇茜茜.基于柯氏模型的員工培訓效果轉化影響因素研究[J].中國人力資源開發,2016(08):50-55.
[3]李海英,王海燕.論檔案在職教育培訓評估[J].檔案學通訊,2005(5):32-35.
[4]孟祥喜.當前檔案培訓課程開發設計中存在的問題及方法探析[J].蘭臺世界,2017(3):37-39.
[5]楊海玲.影響企業檔案部門培訓效果的因素及對策分析[J].蘭臺世界增刊,2012(8):126.
[6]邊文娟.企業培訓效果評估理論綜述[J].經管空間,2011(3):69-70.
[7]伊萊恩.碧柯.培訓就是檔案[M].北京:電子工業出版社,2016:154-175.