TVET投資回報率測量

會議討論聚焦于五個主題。隨著虛擬會議的進行，明顯發(fā)現(xiàn)：所有主題均息息相關(guān)，并在一定程度上與后續(xù)討論的主題互為基礎(chǔ)。下面是對虛擬會議五個主題討論的總結(jié)。

（一）投資回報率信息

投資回報率信息如何惠及國家的TVET體系？

了解投資回報率（ROI）在不同國家的不同應(yīng)用方式，可以了解研究TVET的ROI時應(yīng)注重哪些方面。關(guān)于這一主題，參會者有許多討論，并提出了許多突出問題。

首先，ROI信息在說服利益相關(guān)者投資TEVT方面發(fā)揮著重要作用，此外，還可以幫助提升TVET形象。正如來自肯尼亞的John WSimiyu所說：“ROI信息有益于肯尼亞的TVET體系，尤其是各層級的TVET資助方面，因為與其他傳統(tǒng)的非TVET教育相比，TVET的經(jīng)營成本更高。”

在資金有限而需要資金投入的項目又很多的情況下，上述ROI信息對TVET吸引投資尤為重要。來自加納的Lisa Freiburg所言說明了這一點，即“我認為，如果加納有更多關(guān)于TVET的ROI信息，會使TVET發(fā)起人更容易籌措資金，并吸引私人投資者。如果TVET有明顯的經(jīng)濟和社會效益，還會有助于提升加納的TVET形象”。

來自菲律賓的Ursula Mendoza指出：“政策制定者應(yīng)將基于證據(jù)和事實的信息作為制定TVET政策的依據(jù)。ROI還為政府提供支持私營企業(yè)的依據(jù)。從私營部門的視角來看，ROI與投資目的息息相關(guān)。”這進一步印證了ROI信息在幫助獲得TVET的私人投資方面的功能。

此外，在許多國家，TVET都得到了政府的大力資助。通過TVET獲得的技能被視為經(jīng)濟增長和發(fā)展的基本元素。然而，TVET體系也時常會依賴某些民間基金。在發(fā)展中國家，這通常具有捐助者支持的性質(zhì)。正如來自加納的Samuel Thompson所言：“TVET對許多經(jīng)濟體的發(fā)展很重要，加納也不例外。TVET和技能培養(yǎng)促進了加納的升級優(yōu)化和就業(yè)崗位創(chuàng)造。為此（當然原因不止于此，還有其他方面的原因），政府部門負責引領(lǐng)TVET的融資和技能培養(yǎng)。有時則是由政府與發(fā)展合作伙伴及私營部門實體一起完成。”

雖然參會者意識到TVET的ROI信息能證明TVET的價值，但也發(fā)現(xiàn)測量ROI的相關(guān)數(shù)據(jù)經(jīng)常缺乏。投入和輸出/結(jié)果數(shù)據(jù)是必需的，但通常TVET的成果信息不足。部分問題可能是缺乏ROI關(guān)注點（或評估）。一位來自澳大利亞的參會者提到，澳大利亞經(jīng)費分配的依據(jù)似乎是投入而非ROI計算所需的結(jié)果信息。一位來自愛爾蘭的參會者提到，愛爾蘭最近改用投入/結(jié)果法來更充分地利用有限資源。

多名參會者提出了測量ROI的各類模型，包括：社會投資回報（SROI）、內(nèi)部收益率（IRR）、成本效益分析（CBA）、凈現(xiàn)值（NPV）和股本回報率（ROE）。特別是討論了評估培訓影響的柯克帕特里克和菲利普斯模型（見菲利普斯，1996，2011），該模型包含五個等級，從1級——對培訓和學習成果利用計劃的滿意度，直到第5級——計算培訓的ROI。進行各層次評價的模型和適當時間框架見表1。

圍繞這一主題，參會者指出，缺乏ROI證明會產(chǎn)生負面影響，即會導致資金投入減少。這是來自特立尼達和多巴哥的一名參會者在如下闡述時提到的，即為了提升技能關(guān)注度和促進經(jīng)濟發(fā)展，對TVET進行的重大投資尚未收集到支持性的數(shù)據(jù)。

缺乏信息的后果往往是難以量化的（如社會和環(huán)境影響），但是可以確定其產(chǎn)生積極影響的可能性較小。正如來自加納的Lisa Freiburg所言：“根據(jù)我的經(jīng)驗，缺乏可靠數(shù)據(jù)會使政府無法提供TVET的ROI的相關(guān)證據(jù)。”

一位參會者提出了一個有趣的觀點，即ROI可能不總是正數(shù)。當產(chǎn)出低于投入時，ROI為負數(shù)。雖然這對于獲得TVET投資支持無益，但可以為改進TVET體系提供信息依據(jù)。來自澳大利亞的Javier Amaro 指出：“一個評價研究的ROI雖然為負數(shù)，但其仍然有包含各層級信息的記分卡，其中包含有待考慮的重要信息，有助于找出問題和發(fā)現(xiàn)改善機會。”

一位來自澳大利亞的參會者從營銷角度發(fā)表了評論，指出可把客戶滿意度視為TVET項目的一項成果。據(jù)此，可以通過（在多種層面上）評估顧客滿意度來解釋ROI。

（二）投資回報率類型

哪種類型的投資回報率最重要或與您所在國家的國情相關(guān)？

投資回報率涉及許多不同的方面，并存在不同水平的利益領(lǐng)域。例如，TVET的投資回報率會對經(jīng)濟、社會、社區(qū)和環(huán)境產(chǎn)生影響。如上所述，Marope、Chakroun和Holmes（2015）在其說明TVET潛力的刊物中，特別提到了TVET對經(jīng)濟、社會公平和可持續(xù)發(fā)展的影響。

參會者都認識到了ROI的經(jīng)濟和社會影響對國家非常重要，參會者還對與這一問題有關(guān)的幾個重要問題進行了評述。首先，特殊TVET體系的目標將是評估ROI的指南。例如，如果TVET的目標是為失業(yè)青年提供就業(yè)機會，ROI評估則應(yīng)反映就業(yè)機會的提供。類似地，如果TVET的目標之一與社會公平相關(guān)，ROI則應(yīng)反映社會公平情況。正如來自尼日利亞的Emamorose Felix所言，“任何國家的TVET項目目標都將指引著ROI的評估指標”。

話雖如此，許多國家在開始時還是主要關(guān)注ROI的經(jīng)濟影響。最后才是國家生產(chǎn)力方面的ROI，而且TVET可能被視為國家廣泛的經(jīng)濟投資的一部分。但當我們轉(zhuǎn)向圖1所示的效益等級時，參會者又提到了ROI其他方面經(jīng)濟的影響，比如培訓后就業(yè)、青年就業(yè)率、雇主滿意度、就業(yè)技能及啃老族人數(shù)的縮減。這并不意味著社會影響不重要，而是經(jīng)濟影響可視為社會影響的前置因素。

討論就業(yè)結(jié)果時，至少有2個參會者強調(diào)不僅就業(yè)本身重要，就業(yè)質(zhì)量也重要（且應(yīng)該評估這一指標）。關(guān)于這一點，有人提出，TVET體系應(yīng)符合市場需求，培養(yǎng)“好賣的”技能。例如，來自加納的Lisa Freiburg提出：“多少TVET畢業(yè)生在完全不相關(guān)領(lǐng)域就業(yè)（通常在非正規(guī)部門）？更重要的是，隨著時間的推移，就業(yè)足以維持一個人的生計、提高收入并改善其處境嗎？”

某些參會者認為青年就業(yè)重要，尤其是因為它關(guān)系到早期輟學率。早期輟學可能會對未來就業(yè)和更廣泛的社會結(jié)果兩方面產(chǎn)生負面影響（見Hancock & Zubrick，2015綜述）。一位馬耳他參會者進一步強調(diào)，TVET在降低該國不就業(yè)、不讀書也不接受培訓（啃老族）群體的數(shù)量上起到一定作用。因此，教育體系的ROI是一個重要參數(shù)。正如來自馬耳他的Martin Borg指出，“我們的中學教育體系面臨較大數(shù)量的早期輟學者，除經(jīng)濟價值外這還會產(chǎn)生更大的社會價值/影響。我認為，在這種各國迥異的環(huán)境下，應(yīng)該考慮教育體系的ROI。”

參會者認為社會ROI也相當重要，但有人指出經(jīng)濟ROI和社會ROI是互相聯(lián)系的。比如，就業(yè)增加也會導致犯罪率降低。此外，就業(yè)率上升還會增強社會凝聚力。這重申了培訓的經(jīng)濟成果（如就業(yè)）作為TVET培訓和社會成果中間物的觀點。下列引述說明了這一關(guān)系。比如，尼日利亞的Hannatu Garba指出：“經(jīng)濟和社會回報相關(guān)性很大，也就是說對青年和成年人提供技能培訓可以提供就業(yè)機會、促進創(chuàng)業(yè)，但在減少犯罪、增強社會凝聚力和和平共存方面仍任重道遠。”尼日利亞的Ogu Samson提出：“在尼日利亞，經(jīng)濟和社會回報都非常重要，因為TVET不僅提供就業(yè)技能，還提升價值。就業(yè)個體會促進國家經(jīng)濟的發(fā)展，反過來又降低社會惡習風險。” 牙買加的Halden Anthony Morris指出：“TVET的經(jīng)濟ROI和社會ROI密不可分。大多數(shù)情況下，恰當就業(yè)的人們會有舒適感，這有利于該國的社會和經(jīng)濟福祉。”

一位參會者指出，經(jīng)過更長的一段時間才會產(chǎn)生社會效果，并指出評估面臨諸多挑戰(zhàn)。正如菲律賓的Ursula Mendoza 所言：“需要等待較長的時間才會得到社區(qū)的社會回報和效益，而且測量ROI具有挑戰(zhàn)性。但這樣會更有意義，因為我們談?wù)摰氖巧鐓^(qū)效益，而不單單是個人的ROI。”

表2從個人、雇主或公司及較廣泛的社區(qū)效益角度匯總了TVET中ROI的一些重要量度。這是經(jīng)過廣泛查閱虛擬會議期間提供的文獻和追加反饋而編制的。

（三）比較投資回報率

跨國比較TVET的ROI有哪些挑戰(zhàn)？比較回報過程中，如何考慮不同的政治、文化和教育背景？

為達成共識，應(yīng)對ROI的各個量度進行非常具體的定義。這些定義應(yīng)能持續(xù)應(yīng)用于每個國家，并需要與可評估的事物相關(guān)。參會者提出了比較各個國家ROI時的幾個挑戰(zhàn)。由于各國操作的環(huán)境各不相同，參會者以不同的方式考慮了這一多樣性。

首先，各國的TVET部門具有多樣性，且各有不同側(cè)重點。有人指出，在這份報告背景下，即使在特定國家內(nèi)，TVET也包含多種項目和系統(tǒng)。因此，在比較ROI量度時會遇到相當多的挑戰(zhàn)。下列引證說明了這些挑戰(zhàn)。來自尼日利亞的Hannuta Garba指出：“TVET包含正規(guī)、非正規(guī)和非正式的學習，涉及許多地點，有些發(fā)生在學校，另外一些則在公立和私營職業(yè)中心。獲得可能用到的統(tǒng)計數(shù)據(jù)是面臨的挑戰(zhàn)之一。收集（可用的）數(shù)據(jù)和標準面臨的經(jīng)濟、政治和環(huán)境條件，也是比較ROI的挑戰(zhàn)之一。” 菲律賓的Ursula Mendoza指出：“這里有一些關(guān)于TVET的專用名詞，即，正規(guī)、非正規(guī)、非正式、TVET學校和機構(gòu)、高等教育、彈性學習、第三級教育、企業(yè)本位、學徒訓練、徒工訓練、雙軌制教育、二元化培訓、工藝學校等。這些專用名詞規(guī)定了各個國家對待TVET的方式。”

總體來看，國家間的背景有許多差異，比如政治和文化上的。此外，還存在其他脈絡(luò)性的問題，包括國家的人口學特征，比如年齡結(jié)構(gòu)、城市與地區(qū)密度和性別分布。另外，在跨國對比中，還需要考慮管理教育和培訓的經(jīng)驗度（成熟度）和體系中的各個利益相關(guān)者。參會者在這方面做出了一些相關(guān)評論。來自特立尼達和多巴哥的Fitzroy Marcus指出：“比較各國ROI的直接挑戰(zhàn)將反映到以不同政治、文化和教育信仰體系和實踐為基礎(chǔ)的約束條件中。”

另一個重要考量是如何資助TVET（包括公立和私立）以及可用的管理信息系統(tǒng)。下列引證重點考慮了公共資助/民間集資因素。來自牙買加的Halden Anthony Morris指出：“另一明顯挑戰(zhàn)是多個國家內(nèi)公私合伙企業(yè)的不同水平。在一些實例中，TVET體系主要由政府資助驅(qū)動，然而在其他案例/國家中，私營部門也承擔一定的責任。”

收集民間資本的培訓開支信息，存在一些固有的問題。這可能與政府支出報告的要求相關(guān)，但又不相同。甚至政府支出的信息都很難獲得，比如培訓的更多間接成本。

有人另辟蹊徑提出：該體系缺乏協(xié)調(diào)或中央?yún)f(xié)調(diào)機構(gòu)，這會導致數(shù)據(jù)缺失或分散。所以要在一定程度上將中央?yún)f(xié)調(diào)重點考慮。基于此，為了收集ROI計算使用的數(shù)據(jù)，設(shè)立可靠及時的“管理信息系統(tǒng)”（MIS）面臨諸多挑戰(zhàn)。例如，尼日利亞的Ogu Samson E指出，“尼日利亞的TVET各部門間缺乏協(xié)調(diào)和聯(lián)系，這樣導致缺乏數(shù)據(jù)或記錄。” 牙買加的Halden Anthony Morris指出：“數(shù)據(jù)流通仍是一個問題，在某些情況下，可用數(shù)據(jù)非常陳舊（3年以上）。絕對有必要在整個加勒比海地區(qū)內(nèi)建立可靠的信息管理系統(tǒng)。”加納的Samuel Thompson提出：“加納的TVET涉及諸多利益相關(guān)者。這些利益相關(guān)者包括私營和公立部門、政府部門、代理機構(gòu)和正規(guī)與非正規(guī)部門。要加設(shè)中央?yún)f(xié)調(diào)機構(gòu)，需要通過特殊支持項目和社區(qū)支援活動進行投資。這種組合要求努力收集所有領(lǐng)域的數(shù)據(jù)，收集格式通常按照產(chǎn)生數(shù)據(jù)的機構(gòu)要求，并與他們合作進行數(shù)據(jù)的三角剖分。”

綜上所述，評估一個國家TVET的ROI都面臨很多挑戰(zhàn)，更不必說ROI的跨國對比了。參會者提出有必要構(gòu)建ROI評估框架，并提出該主題有必要在會后進一步討論。例如，來自肯尼亞的John W Simiyu 提出：“比較各個國家的ROI可能是一個艱巨的任務(wù)，除非有一個可以用來評估這些國家ROI的框架。”

一位參會者提出相當重要的觀點，即調(diào)查其他部門如何處理類似問題可能會有意義。毫無疑問，如果ROI測量對TVET是一個挑戰(zhàn)，那么ROI對其他部門也會是個挑戰(zhàn)。其所引用示例是如何跨國比較不就業(yè)、不讀書也不接受培訓的年輕人（啃老族）的問題。這是由于就業(yè)、教育和培訓的定義相當廣泛，既包括正規(guī)的，也包括非正規(guī)的。國別調(diào)查對沒有使用諸如“正規(guī)”和“非正規(guī)”術(shù)語的成果中的定義進行了廣泛梳理，同時考慮了區(qū)域差異，這使得該調(diào)查方法成為一個有趣的例子，值得進行研究。

（四）投資回報率數(shù)據(jù)源

您所在國家當前可用于測量TVET投資回報率的數(shù)據(jù)源有哪些？數(shù)據(jù)缺口有哪些？如何解決？

考慮什么類型的數(shù)據(jù)源可以用來測量每個國家TVET的成本/投資和效益是至關(guān)重要的。

而且，考慮成本時，不僅要考慮直接成本，還要考慮間接成本（間接成本可能很難捕捉）。同樣地，還要考慮有形效益和無形效益。

聯(lián)合國教科文組織青年、知識和技能培育部門負責人Borhene Chakroun在虛擬會議期間指出，測量ROI需要收集的數(shù)據(jù)源類型包括：管理性數(shù)據(jù)源（包括來自教育、就業(yè)和社會保障系列的培訓供應(yīng)者和相關(guān)政府部門）；調(diào)查數(shù)據(jù)（勞動力調(diào)查和其他戶口調(diào)查）；評估數(shù)據(jù)，比如聯(lián)合國教科文組織的知識測量和檢測項目（LAMP）、成年人技能OECD調(diào)查（PIAAC）和世界銀行的STEP技能測量程序；以及大數(shù)據(jù)分析效益。

雖然理想情況下應(yīng)該收集和/或使用這些數(shù)據(jù)源，但參會者重申了在收集ROI信息數(shù)據(jù)時面臨的難題，尤其是有形數(shù)據(jù)太少。有形數(shù)據(jù)較少的一個例子是，從經(jīng)濟體層面來看，社會凝聚力增強。然后出現(xiàn)如何使這些類型的無形效益量化或真正貨幣化以及是否應(yīng)該這樣做的問題。以ROI為例，就可能需要考慮收集定性數(shù)據(jù)。例如，來自德國的Wouter de Regt 指出：“我們應(yīng)該區(qū)別對待使用投資回報率定量信息能（或想要）證明的和使用定性信息需要證明的東西。或許當我們認識到這一點時，可以使用整體戰(zhàn)略收集該信息并更好地解決產(chǎn)生信息差距的結(jié)構(gòu)性問題。”

指導咨詢領(lǐng)域作為一個收集更多定性ROI數(shù)據(jù)的例子，也被參會者提及。例如，來自德國的Jean Hautier指出：“我記得指導咨詢項目使用缺勤統(tǒng)計或?qū)W生家長進行大規(guī)模調(diào)查，來更好地了解TVET對學生動機或自信的影響等……或許是另一種增強了解的方法。”

雖然數(shù)據(jù)收集涉及的不同利益相關(guān)者可以提供用于ROI計算的信息，但是從他們那獲得數(shù)據(jù)仍有困難。特別是，有必要對數(shù)據(jù)收集進行綜合協(xié)調(diào)，并了解ROI計算具體需要哪些信息。例如，來自尼日利亞的Amina Idris指出：“要縮小差距需要適當調(diào)節(jié)利益相關(guān)者的投入。” 來自菲律賓的Ursula Mendoza提出：“雖然我們可以輕而易舉地查明數(shù)據(jù)出處，但問題是如何得到這些數(shù)據(jù)、具體數(shù)據(jù)需求出自哪里，以及使用什么調(diào)查問卷。為了避免浪費時間和資源，我們應(yīng)該確定目標和相關(guān)指標。”

參會者提出的另一個觀點是，有些數(shù)據(jù)存在的格式不總是能用于ROI的計算。因此有必要收集和運用可用于測量或了解ROI的數(shù)據(jù)。顯然，這些在最初設(shè)置數(shù)據(jù)收集時就需要考慮。

進一步講，參會者提到的另一個挑戰(zhàn)是制定用于進行數(shù)據(jù)比較的標準參數(shù)。由于TVET體系的內(nèi)在多樣性，這將是一項挑戰(zhàn)性任務(wù)。例如，來自特立尼達和多巴哥的Fitzroy Marcus指出：“用于獲取和分析數(shù)據(jù)的方法和工具是否能完全用于測評TVET的ROI，并不確定。……為了在TVET的ROI測量中使用最佳方法，還有很多工作要做。” 來自牙買加的Halden Anthony Morris指出：“在牙買加有若干可用的數(shù)據(jù)源，我認為可用于測量TVET的ROI。但是，這些數(shù)據(jù)源沒有按照準確、及時提供ROI量度的標準進行配置。”

數(shù)據(jù)來源：Schueler J. Forthcoming. Evaluation Framework Measuring Return on Investment （ROI） in TVET. Adelaide： National Centre for Vocational Education Research.

（五）關(guān)于投資回報率框架

圖1概述了在開發(fā)“ROI評價框架”時應(yīng)考慮的可用國際文獻中所指出的問題。查看該圖時從左上象限開始，并且ROI與特定利益相關(guān)者和操作環(huán)境密切相關(guān)；在范圍和目的方面，是了解利益相關(guān)者、評估對象、重要原因和首要需求。

關(guān)于ROI的指導原則，需要使用一致且標準的評判框架。ROI模型應(yīng)根據(jù)用途和評估的重要對象特制。該模型應(yīng)具有實用性，并盡可能做到有用性、靈活性和可定制性。

該模型必須以可感測指標、實用量度和優(yōu)質(zhì)數(shù)據(jù)可用性作支持，并使用科學有效的技術(shù)解決其他因素的影響。

參會者討論了對于達成共識以及跨部門方案的需求，該方案有助于將TVET體系分析和預(yù)期的發(fā)展成果聯(lián)系起來。為此，考慮了聯(lián)合國教科文組織在“釋放潛力，轉(zhuǎn)變技術(shù)與職業(yè)教育和培訓”（Marope，Chakroun和Holmes，2015年）中提出的綜合分析方法。如前所述，該方法用平衡和戰(zhàn)略的方式統(tǒng)合了經(jīng)濟增長、社會公平和可持續(xù)發(fā)展問題，并認為：經(jīng)濟增長包括生產(chǎn)力增長、就業(yè)能力、就業(yè)機會創(chuàng)造和新的工作模式；社會公平包括物質(zhì)和無形財富的再分配及包容；可持續(xù)性包括綠化經(jīng)濟和可持續(xù)性。

下列引證說明了參會者關(guān)于框架開發(fā)的一些想法。來自德國的Wouter de Regt指出：“我們需要采取的第一步是對TVET目標達成共識……我們需要一個定義，該定義足以囊括區(qū)域差異、也足夠具體引用某些指標。一個適當?shù)腞OI框架需要有一個自下而上的方法，使得國家行為主體可以對國內(nèi)重要的ROI進行測量，在地區(qū)層面上可以聚合并尋找共通性，然后在國際層面上交流這些共通性。”來自法國的Borhene Chakroun 指出：“我們對ROI的討論應(yīng)該解決的根本問題，例如，在沒有有助于將TVET體系分析和與其預(yù)期發(fā)展成果結(jié)合起來的適當、共享和跨部門方案時……為了解決這一問題，聯(lián)合國教科文組織以平衡和戰(zhàn)略的方式提出一種統(tǒng)合經(jīng)濟增長、社會公平和可持續(xù)發(fā)展問題的綜合分析方法。”

來自尼日利亞的Obukwor Ngozi提出：“我認為，一個跨地區(qū)的ROI框架應(yīng)采用適當?shù)穆?lián)網(wǎng)，開展跨區(qū)域合作，并建立伙伴關(guān)系。還要跨區(qū)域共享知識。”