新型職業(yè)農(nóng)民培訓(xùn)效益評估體系初探

陳曉光 ，盛 聚 ，金安彥

(1．大連理工大學(xué) 高等教育研究中心，遼寧 大連116024;2．沈陽市教育研究院，沈陽110031)

自2012年起，全國新型職業(yè)農(nóng)民培育試點(diǎn)工作全面展開，在探索方法和路徑、總結(jié)經(jīng)驗(yàn)、形成制度的同時，推動了新型職業(yè)農(nóng)民培育工作健康有序發(fā)展。但培訓(xùn)過程中，對培訓(xùn)效益研究表現(xiàn)出明顯的不足，或缺乏應(yīng)有的重視。本文對職業(yè)農(nóng)民培訓(xùn)效益評估的重要性和培訓(xùn)效益評估理論發(fā)展?fàn)顩r、效益評估建立的原則和標(biāo)準(zhǔn)體系進(jìn)行了初步的研究，希望可以對培訓(xùn)工作的長期開展，以及從整體上提升培訓(xùn)質(zhì)量提供一定參考和建議。

一、新型職業(yè)農(nóng)民培訓(xùn)效益評估的重要性

(一)效益評估有利于提高職業(yè)農(nóng)民培訓(xùn)的整體質(zhì)量

新型職業(yè)農(nóng)民培訓(xùn)的目的就是解決“誰來種地、如何種好地”的問題。在這個過程中，如何將農(nóng)民培訓(xùn)的滿意程度與農(nóng)村產(chǎn)業(yè)發(fā)展相統(tǒng)整是一個重要的難題。效益評估正是將培訓(xùn)過程中農(nóng)民對培訓(xùn)內(nèi)容的需求與培訓(xùn)后所達(dá)到的目標(biāo)進(jìn)行統(tǒng)一，有效提升農(nóng)民培訓(xùn)的整體質(zhì)量，實(shí)現(xiàn)個人發(fā)展與產(chǎn)業(yè)發(fā)展、個人效益與產(chǎn)業(yè)效益相結(jié)合的目的。［1］效益評估也是對培訓(xùn)模式進(jìn)行的有效甄別，選擇適合農(nóng)民學(xué)習(xí)、使用與增收的項(xiàng)目，選擇與之相匹配的培訓(xùn)手段，選擇有效的培訓(xùn)模式，保障培訓(xùn)工作的順利進(jìn)行。

(二)效益評估有利于發(fā)現(xiàn)職業(yè)農(nóng)民培訓(xùn)的問題與困境

培訓(xùn)過程中和結(jié)束后，難免會出現(xiàn)不盡如人意的問題，這是就需要有一整套的評價標(biāo)準(zhǔn)進(jìn)行有效識別，發(fā)現(xiàn)問題，改正問題，提升培訓(xùn)效果。效益評估不僅僅是對培訓(xùn)內(nèi)容的甄別，也是對培訓(xùn)手段，培訓(xùn)結(jié)果的影響程度進(jìn)行探知。效益評估可以發(fā)現(xiàn)問題所在，提升師資結(jié)構(gòu)和拓寬信息渠道，加強(qiáng)與農(nóng)民的及時溝通，真正解決培訓(xùn)內(nèi)容與培訓(xùn)效果難以統(tǒng)一的問題。［2］

(三)效益評估有利于職業(yè)農(nóng)民培訓(xùn)的反饋與監(jiān)督

職業(yè)農(nóng)民培訓(xùn)的主要目的就在于能否達(dá)到促進(jìn)農(nóng)民增收，這是衡量培訓(xùn)效果的重要標(biāo)準(zhǔn)。此外，還應(yīng)針對培訓(xùn)的各個環(huán)節(jié)建立起一整套標(biāo)準(zhǔn)化的農(nóng)村科技培訓(xùn)監(jiān)測和評估指標(biāo)，把監(jiān)測和評估的結(jié)果作為重要的反饋信息以便調(diào)整以后的培訓(xùn)計(jì)劃。［3］效益評估中所反映出來的問題不應(yīng)只停留在結(jié)果上，也應(yīng)該表現(xiàn)在培訓(xùn)的過程中，應(yīng)該是過程與結(jié)果的結(jié)合，這樣，才更加有效地將培訓(xùn)中出現(xiàn)的問題有針對性地反饋給培訓(xùn)機(jī)構(gòu)、培訓(xùn)者，達(dá)到改善培訓(xùn)效果的目的。

二、新型職業(yè)農(nóng)民培訓(xùn)效益評估理論的發(fā)展

(一)唐·柯克帕特里克的四層次模型

唐·柯克帕特里克于1959年首次提出四層次模型，這四個層次包括反映層次、學(xué)習(xí)層次、行為層次和結(jié)果層次。反映層次是評估中最低層次的評估，是對學(xué)員注意力、興趣等進(jìn)行研究，從而得知學(xué)員對培訓(xùn)的態(tài)度;學(xué)習(xí)層次是對學(xué)員從培訓(xùn)中學(xué)到的內(nèi)容進(jìn)行評估;行為層次是針對學(xué)員是否運(yùn)用了培訓(xùn)中所學(xué)到的知識和技能進(jìn)行的評估，依據(jù)是其上下級、同事等對其業(yè)績提高的評價;結(jié)果層次是針對學(xué)員在培訓(xùn)后，在不同崗位上工作業(yè)績的提高程度(表現(xiàn)在銷售量、產(chǎn)量提高和事故率的降低等方面)進(jìn)行評定。

(二)CIRO 模型

CIRO 評估模型是一個由奧爾、伯德和雷克漢姆發(fā)明的四級評估方法。這種評估包括四個基本的評估活動，是由情境評估、輸入評估、反應(yīng)評估和結(jié)果評估組成的。情景評估是對學(xué)員當(dāng)前的地位和狀況以及學(xué)員的需求進(jìn)行的評估;輸入評估是將評估所需的資源進(jìn)行搜索、整理并將其應(yīng)用在培訓(xùn)中的評估;反應(yīng)評估是對學(xué)員的反饋信息，并將其不足加以修正的評估;結(jié)果評估是對培訓(xùn)結(jié)果的檢驗(yàn)。CIRO評估模型相對唐·柯克帕特里克的四層次評估模型有著更加先進(jìn)的系統(tǒng)結(jié)構(gòu)，但其不足就是未將評估和培訓(xùn)執(zhí)行專門結(jié)合起來。［4］

(三)斯塔弗爾比姆的CIPP 模型

CIPP 評估模型是斯塔弗爾比姆于1967年在對泰勒行為目標(biāo)模型反思基礎(chǔ)上提出的。CIPP 模型由背景評估、輸入評估、過程評估、成果評估的四個評估的首字母組成。背景評估是對培訓(xùn)環(huán)境、培訓(xùn)的問題、培訓(xùn)的需求和目標(biāo)進(jìn)行的評估;輸入評估是收集培訓(xùn)資源，并對資源進(jìn)行整合的評估;過程評估是評估過程中的信息反饋;成果評估是在培訓(xùn)過程中或者培訓(xùn)結(jié)束后對培訓(xùn)活動所達(dá)到的目標(biāo)進(jìn)行的衡量與評價。CIPP 模型具有全程性、過程性和反饋性等特點(diǎn)。它將評估過程和培訓(xùn)過程有機(jī)結(jié)合起來，使其評估與反饋的目的貫穿評估過程的始終。

(四)考夫曼的五級評估模型

考夫曼的五級評估模型包括反應(yīng)和可能、掌握、應(yīng)用、組織效益、社會效益五個層級，各個層級評估范圍是從內(nèi)向外逐漸擴(kuò)展的。反應(yīng)和可能層級是對培訓(xùn)方法、手段和程序的有效應(yīng)用，包括對培訓(xùn)中人力、財力和物力有效性的評價;掌握層級是對培訓(xùn)中個人和小組的能力情況進(jìn)行的評估;應(yīng)用層級是對掌握層級所具備的能力在實(shí)際情況中應(yīng)用的評估;組織效益和社會效益層級是考夫曼在擴(kuò)展柯克帕特里克的四層次模型基礎(chǔ)上提出的，考夫曼認(rèn)為從對組織收益的獲得來源離不開與之密切相關(guān)的組織環(huán)境，因此，他認(rèn)為社會和客戶的反應(yīng)也是評估的重要組成部分。

(五)菲利普斯的五級投資回報率模型

菲利普斯于1996年提出五級投資回報率模型，該模型的層級包括反應(yīng)和既定的活動、學(xué)習(xí)、在工作中的應(yīng)用、業(yè)務(wù)結(jié)果和投資回報率。反應(yīng)和既定的活動層級是評估學(xué)員對培訓(xùn)項(xiàng)目的反應(yīng)及實(shí)施的明確計(jì)劃;學(xué)習(xí)層級是對學(xué)員技能、知識或觀念的變化的評估;在工作中的應(yīng)用層級是對學(xué)員在工作中行為的變化和培訓(xùn)資源應(yīng)用的評估;業(yè)務(wù)結(jié)果層級是關(guān)于培訓(xùn)項(xiàng)目對學(xué)員業(yè)務(wù)活動影響的評估;投資回報率層級是從財務(wù)績效方面對培訓(xùn)效果進(jìn)行計(jì)算的評估。

三、新型職業(yè)農(nóng)民培訓(xùn)效益評估指標(biāo)體系的構(gòu)建

(一)職業(yè)農(nóng)民培訓(xùn)效益評估的原則

1.科學(xué)性原則

職業(yè)農(nóng)民培訓(xùn)效益評估的科學(xué)性體現(xiàn)在三個方面:一個是評估內(nèi)容的科學(xué)性，內(nèi)容的選擇要有客觀的依據(jù)，不能主觀臆斷;二是評估標(biāo)準(zhǔn)的科學(xué)性，針對農(nóng)民培訓(xùn)機(jī)構(gòu)、培訓(xùn)過程和結(jié)果認(rèn)定等主要培訓(xùn)環(huán)節(jié)，應(yīng)建立一套嚴(yán)格、具有可操行性的評價標(biāo)準(zhǔn)，采用的數(shù)據(jù)要有代表性和可比性;三是評估方法的科學(xué)性，評估方法的選擇要結(jié)合農(nóng)民培訓(xùn)的特點(diǎn)，定性方法與定量方法相結(jié)合，方法和手段具有針對性，既可有效收集信息，又能對結(jié)果的評價具有指導(dǎo)性。［5］

2.整體性原則

職業(yè)農(nóng)民培訓(xùn)是一個系統(tǒng)性的工作，不僅需要注重培訓(xùn)過程、技能掌握的認(rèn)定，更重要的是培訓(xùn)后的效果。而培訓(xùn)效益評估正是對農(nóng)民所重點(diǎn)憂慮的問題給予有針對性的反饋和解決。職業(yè)農(nóng)民培訓(xùn)不僅有直接的效益，還有間接的效益;不僅有短期的效益，還有長期的效益;不僅有經(jīng)濟(jì)效益，還有社會效益。實(shí)現(xiàn)這些效益，需要從整體去把握培訓(xùn)的過程和結(jié)果，既要實(shí)現(xiàn)農(nóng)民對培訓(xùn)內(nèi)容的需求，也要完成國家對農(nóng)業(yè)發(fā)展的整體規(guī)劃，需要構(gòu)建一個具有整體性和綜合性的指標(biāo)以反映職業(yè)農(nóng)民培訓(xùn)的效益。

3.實(shí)用性原則

職業(yè)農(nóng)民培訓(xùn)效益評估工作取決于現(xiàn)有評估工作主要由上級農(nóng)廣校開展，并且培訓(xùn)的內(nèi)容具有時間限定，要結(jié)合農(nóng)業(yè)種植的季節(jié)規(guī)律，所以在有限的時間內(nèi)對培訓(xùn)開展效益評價就要遵循實(shí)用性的原則。評估人員的選擇(包括其他獨(dú)立的評估機(jī)構(gòu)中的人員)、評估時間的把握、評估手段的選取等都要具有實(shí)用性特點(diǎn)，要結(jié)合不同培訓(xùn)項(xiàng)目和內(nèi)容，選擇最適合的人員，制定全面、可靠的評估指標(biāo)，評估方法的選擇要有針對性，使得評估工作能夠簡便、快捷和富有靈活性。只有這樣，評估工作才容易得到評估人員的理解，使評估操作容易、方便、可行。

(二)職業(yè)農(nóng)民培訓(xùn)效益評估指標(biāo)體系

1.要素及指標(biāo)體系

結(jié)合國內(nèi)外關(guān)于培訓(xùn)效益評估理論的研究成果、將培訓(xùn)過程與培訓(xùn)結(jié)果相結(jié)合的經(jīng)驗(yàn)，本文將職業(yè)農(nóng)民培訓(xùn)效益評估指標(biāo)劃分為3 個一級指標(biāo)11個二級指標(biāo)，建立了一套完整的評估指標(biāo)體系。一級指標(biāo)為人才效益、經(jīng)濟(jì)效益和社會效益。

人才效益對培訓(xùn)過程中農(nóng)民的自身理解程度、技術(shù)掌握程度、技術(shù)實(shí)用性和農(nóng)民滿意度四個方面給與更多的考慮，制定了掌握技術(shù)程度、改善了從業(yè)渠道、增強(qiáng)技術(shù)應(yīng)用和培訓(xùn)的認(rèn)可度4 個二級指標(biāo)。

經(jīng)濟(jì)效益是農(nóng)民參與培訓(xùn)獲得收益的最直接體現(xiàn)，也是衡量培訓(xùn)效果的最佳指標(biāo)。從提高勞動生產(chǎn)率、降低生產(chǎn)成本、提高產(chǎn)品產(chǎn)量、增強(qiáng)市場份額4 個二級指標(biāo)來體現(xiàn)經(jīng)濟(jì)效益。

社會效益是整個指標(biāo)體系中難以衡量的指標(biāo)。由于農(nóng)民參與培訓(xùn)的模式有所不同，加上不同技術(shù)推廣具有地域性、季節(jié)性特點(diǎn)，給培訓(xùn)所產(chǎn)生的社會效益評估造成了一定的難度。因此，這一級指標(biāo)，主要通過對增強(qiáng)科教興農(nóng)意識、提高技術(shù)普及、增強(qiáng)產(chǎn)業(yè)發(fā)展3 個二級指標(biāo)采取定性評估的方法來體現(xiàn)，讓評估專家參與農(nóng)民農(nóng)作活動中去，觀察培訓(xùn)給農(nóng)民帶來的理念和行為上的影響，進(jìn)而得出培訓(xùn)所輻射出來的社會效益。

2.指標(biāo)的權(quán)重

職業(yè)農(nóng)民培訓(xùn)效益評估指標(biāo)體系的權(quán)重比例是衡量培訓(xùn)效益高低的關(guān)鍵要素。因此，權(quán)重賦值要采取主觀賦權(quán)與客觀賦權(quán)相結(jié)合的方式。

主觀賦權(quán)宜采用層次分析法(AHP)進(jìn)行賦值。層次分析法是以定性與定量相結(jié)合的方式來對各種因素進(jìn)行判定的，它將人的主觀判斷用數(shù)量形式進(jìn)行表達(dá)，是社會經(jīng)濟(jì)領(lǐng)域應(yīng)用比較廣泛的方法。

客觀賦權(quán)宜采用熵值法。在信息論中，熵是對不確定性的一種度量。信息量越大，不確定性就越小，熵也就越小;信息量越小，不確定性越大，熵也越大。根據(jù)熵的特性，我們可以通過計(jì)算熵值來判斷一個事件的隨機(jī)性及無序程度，也可以用熵值來判斷某個指標(biāo)的離散程度，指標(biāo)的離散程度越大，該指標(biāo)對綜合評價的影響越大。

將每一個指標(biāo)的權(quán)重設(shè)定為W，層次分析法得到的指標(biāo)權(quán)重為W1j，熵值法得到的指標(biāo)權(quán)重為W2j，得到綜合考慮主客觀因素的指標(biāo)權(quán)重向量:W =k1×W1j+k2×W2j，其中，0≤k1≤1，0≤k2≤1，k1+k2=1，j 為指標(biāo)項(xiàng)數(shù)綜合權(quán)重。組合權(quán)重隨k1與k2的改變而改變，本文取k=k1=k2=0．5，得到指標(biāo)的組合權(quán)重，［6］即:W =k ×W1j+k ×W2j(k =0．5)。計(jì)算出每一個指標(biāo)的權(quán)重后，再針對不同的地域特點(diǎn)和培訓(xùn)項(xiàng)目，采用相應(yīng)的評估。

［1］吳小穎．新農(nóng)村建設(shè)中農(nóng)民培訓(xùn)效果分析:以福建省茶農(nóng)為例［J］．福建農(nóng)林大學(xué)學(xué)報:哲學(xué)社會科學(xué)版，2011，(4):14—17．

［2］朱奇彪，米松華，等．新型職業(yè)農(nóng)民培訓(xùn)的績效評估與分析［J］．江蘇農(nóng)業(yè)科學(xué)，2014，(2):407—411．

［3］張景林，劉永功．農(nóng)民培訓(xùn)效果及其影響因素研究［J］．中國農(nóng)業(yè)教育，2005，(4):1—4．

［4］夏艷玲．培訓(xùn)效果評估理論綜述［J］．科教文匯(下半月刊)，2006，(1):187—188．

［5］吳淮平．人力資源培訓(xùn)效益評估分析［J］．科技進(jìn)步與對策，2011，(12):146—147．

［6］張秀萍．中國省域高等教育競爭力研究［D］．大連:大連理工大學(xué)，2013．