TVET投資回報率測量

會議討論聚焦于五個主題。隨著虛擬會議的進行，明顯發現：所有主題均息息相關，并在一定程度上與后續討論的主題互為基礎。下面是對虛擬會議五個主題討論的總結。

（一）投資回報率信息

投資回報率信息如何惠及國家的TVET體系？

了解投資回報率（ROI）在不同國家的不同應用方式，可以了解研究TVET的ROI時應注重哪些方面。關于這一主題，參會者有許多討論，并提出了許多突出問題。

首先，ROI信息在說服利益相關者投資TEVT方面發揮著重要作用，此外，還可以幫助提升TVET形象。正如來自肯尼亞的John WSimiyu所說：“ROI信息有益于肯尼亞的TVET體系，尤其是各層級的TVET資助方面，因為與其他傳統的非TVET教育相比，TVET的經營成本更高?！?/p>

在資金有限而需要資金投入的項目又很多的情況下，上述ROI信息對TVET吸引投資尤為重要。來自加納的Lisa Freiburg所言說明了這一點，即“我認為，如果加納有更多關于TVET的ROI信息，會使TVET發起人更容易籌措資金，并吸引私人投資者。如果TVET有明顯的經濟和社會效益，還會有助于提升加納的TVET形象”。

來自菲律賓的Ursula Mendoza指出：“政策制定者應將基于證據和事實的信息作為制定TVET政策的依據。ROI還為政府提供支持私營企業的依據。從私營部門的視角來看，ROI與投資目的息息相關?！边@進一步印證了ROI信息在幫助獲得TVET的私人投資方面的功能。

此外，在許多國家，TVET都得到了政府的大力資助。通過TVET獲得的技能被視為經濟增長和發展的基本元素。然而，TVET體系也時常會依賴某些民間基金。在發展中國家，這通常具有捐助者支持的性質。正如來自加納的Samuel Thompson所言：“TVET對許多經濟體的發展很重要，加納也不例外。TVET和技能培養促進了加納的升級優化和就業崗位創造。為此（當然原因不止于此，還有其他方面的原因），政府部門負責引領TVET的融資和技能培養。有時則是由政府與發展合作伙伴及私營部門實體一起完成。”

雖然參會者意識到TVET的ROI信息能證明TVET的價值，但也發現測量ROI的相關數據經常缺乏。投入和輸出/結果數據是必需的，但通常TVET的成果信息不足。部分問題可能是缺乏ROI關注點（或評估）。一位來自澳大利亞的參會者提到，澳大利亞經費分配的依據似乎是投入而非ROI計算所需的結果信息。一位來自愛爾蘭的參會者提到，愛爾蘭最近改用投入/結果法來更充分地利用有限資源。

多名參會者提出了測量ROI的各類模型，包括：社會投資回報（SROI）、內部收益率（IRR）、成本效益分析（CBA）、凈現值（NPV）和股本回報率（ROE）。特別是討論了評估培訓影響的柯克帕特里克和菲利普斯模型（見菲利普斯，1996，2011），該模型包含五個等級，從1級——對培訓和學習成果利用計劃的滿意度，直到第5級——計算培訓的ROI。進行各層次評價的模型和適當時間框架見表1。

圍繞這一主題，參會者指出，缺乏ROI證明會產生負面影響，即會導致資金投入減少。這是來自特立尼達和多巴哥的一名參會者在如下闡述時提到的，即為了提升技能關注度和促進經濟發展，對TVET進行的重大投資尚未收集到支持性的數據。

缺乏信息的后果往往是難以量化的（如社會和環境影響），但是可以確定其產生積極影響的可能性較小。正如來自加納的Lisa Freiburg所言：“根據我的經驗，缺乏可靠數據會使政府無法提供TVET的ROI的相關證據。”

一位參會者提出了一個有趣的觀點，即ROI可能不總是正數。當產出低于投入時，ROI為負數。雖然這對于獲得TVET投資支持無益，但可以為改進TVET體系提供信息依據。來自澳大利亞的Javier Amaro 指出：“一個評價研究的ROI雖然為負數，但其仍然有包含各層級信息的記分卡，其中包含有待考慮的重要信息，有助于找出問題和發現改善機會。”

一位來自澳大利亞的參會者從營銷角度發表了評論，指出可把客戶滿意度視為TVET項目的一項成果。據此，可以通過（在多種層面上）評估顧客滿意度來解釋ROI。

（二）投資回報率類型

哪種類型的投資回報率最重要或與您所在國家的國情相關？

投資回報率涉及許多不同的方面，并存在不同水平的利益領域。例如，TVET的投資回報率會對經濟、社會、社區和環境產生影響。如上所述，Marope、Chakroun和Holmes（2015）在其說明TVET潛力的刊物中，特別提到了TVET對經濟、社會公平和可持續發展的影響。

參會者都認識到了ROI的經濟和社會影響對國家非常重要，參會者還對與這一問題有關的幾個重要問題進行了評述。首先，特殊TVET體系的目標將是評估ROI的指南。例如，如果TVET的目標是為失業青年提供就業機會，ROI評估則應反映就業機會的提供。類似地，如果TVET的目標之一與社會公平相關，ROI則應反映社會公平情況。正如來自尼日利亞的Emamorose Felix所言，“任何國家的TVET項目目標都將指引著ROI的評估指標”。

話雖如此，許多國家在開始時還是主要關注ROI的經濟影響。最后才是國家生產力方面的ROI，而且TVET可能被視為國家廣泛的經濟投資的一部分。但當我們轉向圖1所示的效益等級時，參會者又提到了ROI其他方面經濟的影響，比如培訓后就業、青年就業率、雇主滿意度、就業技能及啃老族人數的縮減。這并不意味著社會影響不重要，而是經濟影響可視為社會影響的前置因素。

討論就業結果時，至少有2個參會者強調不僅就業本身重要，就業質量也重要（且應該評估這一指標）。關于這一點，有人提出，TVET體系應符合市場需求，培養“好賣的”技能。例如，來自加納的Lisa Freiburg提出：“多少TVET畢業生在完全不相關領域就業（通常在非正規部門）？更重要的是，隨著時間的推移，就業足以維持一個人的生計、提高收入并改善其處境嗎？”

某些參會者認為青年就業重要，尤其是因為它關系到早期輟學率。早期輟學可能會對未來就業和更廣泛的社會結果兩方面產生負面影響（見Hancock & Zubrick，2015綜述）。一位馬耳他參會者進一步強調，TVET在降低該國不就業、不讀書也不接受培訓（啃老族）群體的數量上起到一定作用。因此，教育體系的ROI是一個重要參數。正如來自馬耳他的Martin Borg指出，“我們的中學教育體系面臨較大數量的早期輟學者，除經濟價值外這還會產生更大的社會價值/影響。我認為，在這種各國迥異的環境下，應該考慮教育體系的ROI?！?/p>

參會者認為社會ROI也相當重要，但有人指出經濟ROI和社會ROI是互相聯系的。比如，就業增加也會導致犯罪率降低。此外，就業率上升還會增強社會凝聚力。這重申了培訓的經濟成果（如就業）作為TVET培訓和社會成果中間物的觀點。下列引述說明了這一關系。比如，尼日利亞的Hannatu Garba指出：“經濟和社會回報相關性很大，也就是說對青年和成年人提供技能培訓可以提供就業機會、促進創業，但在減少犯罪、增強社會凝聚力和和平共存方面仍任重道遠?！蹦崛绽麃喌腛gu Samson提出：“在尼日利亞，經濟和社會回報都非常重要，因為TVET不僅提供就業技能，還提升價值。就業個體會促進國家經濟的發展，反過來又降低社會惡習風險?！?牙買加的Halden Anthony Morris指出：“TVET的經濟ROI和社會ROI密不可分。大多數情況下，恰當就業的人們會有舒適感，這有利于該國的社會和經濟福祉?！?/p>

一位參會者指出，經過更長的一段時間才會產生社會效果，并指出評估面臨諸多挑戰。正如菲律賓的Ursula Mendoza 所言：“需要等待較長的時間才會得到社區的社會回報和效益，而且測量ROI具有挑戰性。但這樣會更有意義，因為我們談論的是社區效益，而不單單是個人的ROI。”

表2從個人、雇主或公司及較廣泛的社區效益角度匯總了TVET中ROI的一些重要量度。這是經過廣泛查閱虛擬會議期間提供的文獻和追加反饋而編制的。

（三）比較投資回報率

跨國比較TVET的ROI有哪些挑戰？比較回報過程中，如何考慮不同的政治、文化和教育背景？

為達成共識，應對ROI的各個量度進行非常具體的定義。這些定義應能持續應用于每個國家，并需要與可評估的事物相關。參會者提出了比較各個國家ROI時的幾個挑戰。由于各國操作的環境各不相同，參會者以不同的方式考慮了這一多樣性。

首先，各國的TVET部門具有多樣性，且各有不同側重點。有人指出，在這份報告背景下，即使在特定國家內，TVET也包含多種項目和系統。因此，在比較ROI量度時會遇到相當多的挑戰。下列引證說明了這些挑戰。來自尼日利亞的Hannuta Garba指出：“TVET包含正規、非正規和非正式的學習，涉及許多地點，有些發生在學校，另外一些則在公立和私營職業中心。獲得可能用到的統計數據是面臨的挑戰之一。收集（可用的）數據和標準面臨的經濟、政治和環境條件，也是比較ROI的挑戰之一?！?菲律賓的Ursula Mendoza指出：“這里有一些關于TVET的專用名詞，即，正規、非正規、非正式、TVET學校和機構、高等教育、彈性學習、第三級教育、企業本位、學徒訓練、徒工訓練、雙軌制教育、二元化培訓、工藝學校等。這些專用名詞規定了各個國家對待TVET的方式。”

總體來看，國家間的背景有許多差異，比如政治和文化上的。此外，還存在其他脈絡性的問題，包括國家的人口學特征，比如年齡結構、城市與地區密度和性別分布。另外，在跨國對比中，還需要考慮管理教育和培訓的經驗度（成熟度）和體系中的各個利益相關者。參會者在這方面做出了一些相關評論。來自特立尼達和多巴哥的Fitzroy Marcus指出：“比較各國ROI的直接挑戰將反映到以不同政治、文化和教育信仰體系和實踐為基礎的約束條件中?！?/p>

另一個重要考量是如何資助TVET（包括公立和私立）以及可用的管理信息系統。下列引證重點考慮了公共資助/民間集資因素。來自牙買加的Halden Anthony Morris指出：“另一明顯挑戰是多個國家內公私合伙企業的不同水平。在一些實例中，TVET體系主要由政府資助驅動，然而在其他案例/國家中，私營部門也承擔一定的責任?！?/p>

收集民間資本的培訓開支信息，存在一些固有的問題。這可能與政府支出報告的要求相關，但又不相同。甚至政府支出的信息都很難獲得，比如培訓的更多間接成本。

有人另辟蹊徑提出：該體系缺乏協調或中央協調機構，這會導致數據缺失或分散。所以要在一定程度上將中央協調重點考慮?；诖?，為了收集ROI計算使用的數據，設立可靠及時的“管理信息系統”（MIS）面臨諸多挑戰。例如，尼日利亞的Ogu Samson E指出，“尼日利亞的TVET各部門間缺乏協調和聯系，這樣導致缺乏數據或記錄?！?牙買加的Halden Anthony Morris指出：“數據流通仍是一個問題，在某些情況下，可用數據非常陳舊（3年以上）。絕對有必要在整個加勒比海地區內建立可靠的信息管理系統?！奔蛹{的Samuel Thompson提出：“加納的TVET涉及諸多利益相關者。這些利益相關者包括私營和公立部門、政府部門、代理機構和正規與非正規部門。要加設中央協調機構，需要通過特殊支持項目和社區支援活動進行投資。這種組合要求努力收集所有領域的數據，收集格式通常按照產生數據的機構要求，并與他們合作進行數據的三角剖分?！?/p>

綜上所述，評估一個國家TVET的ROI都面臨很多挑戰，更不必說ROI的跨國對比了。參會者提出有必要構建ROI評估框架，并提出該主題有必要在會后進一步討論。例如，來自肯尼亞的John W Simiyu 提出：“比較各個國家的ROI可能是一個艱巨的任務，除非有一個可以用來評估這些國家ROI的框架。”

一位參會者提出相當重要的觀點，即調查其他部門如何處理類似問題可能會有意義。毫無疑問，如果ROI測量對TVET是一個挑戰，那么ROI對其他部門也會是個挑戰。其所引用示例是如何跨國比較不就業、不讀書也不接受培訓的年輕人（啃老族）的問題。這是由于就業、教育和培訓的定義相當廣泛，既包括正規的，也包括非正規的。國別調查對沒有使用諸如“正規”和“非正規”術語的成果中的定義進行了廣泛梳理，同時考慮了區域差異，這使得該調查方法成為一個有趣的例子，值得進行研究。

（四）投資回報率數據源

您所在國家當前可用于測量TVET投資回報率的數據源有哪些？數據缺口有哪些？如何解決？

考慮什么類型的數據源可以用來測量每個國家TVET的成本/投資和效益是至關重要的。

而且，考慮成本時，不僅要考慮直接成本，還要考慮間接成本（間接成本可能很難捕捉）。同樣地，還要考慮有形效益和無形效益。

聯合國教科文組織青年、知識和技能培育部門負責人Borhene Chakroun在虛擬會議期間指出，測量ROI需要收集的數據源類型包括：管理性數據源（包括來自教育、就業和社會保障系列的培訓供應者和相關政府部門）；調查數據（勞動力調查和其他戶口調查）；評估數據，比如聯合國教科文組織的知識測量和檢測項目（LAMP）、成年人技能OECD調查（PIAAC）和世界銀行的STEP技能測量程序；以及大數據分析效益。

雖然理想情況下應該收集和/或使用這些數據源，但參會者重申了在收集ROI信息數據時面臨的難題，尤其是有形數據太少。有形數據較少的一個例子是，從經濟體層面來看，社會凝聚力增強。然后出現如何使這些類型的無形效益量化或真正貨幣化以及是否應該這樣做的問題。以ROI為例，就可能需要考慮收集定性數據。例如，來自德國的Wouter de Regt 指出：“我們應該區別對待使用投資回報率定量信息能（或想要）證明的和使用定性信息需要證明的東西?；蛟S當我們認識到這一點時，可以使用整體戰略收集該信息并更好地解決產生信息差距的結構性問題。”

指導咨詢領域作為一個收集更多定性ROI數據的例子，也被參會者提及。例如，來自德國的Jean Hautier指出：“我記得指導咨詢項目使用缺勤統計或對學生家長進行大規模調查，來更好地了解TVET對學生動機或自信的影響等……或許是另一種增強了解的方法?！?/p>

雖然數據收集涉及的不同利益相關者可以提供用于ROI計算的信息，但是從他們那獲得數據仍有困難。特別是，有必要對數據收集進行綜合協調，并了解ROI計算具體需要哪些信息。例如，來自尼日利亞的Amina Idris指出：“要縮小差距需要適當調節利益相關者的投入?！?來自菲律賓的Ursula Mendoza提出：“雖然我們可以輕而易舉地查明數據出處，但問題是如何得到這些數據、具體數據需求出自哪里，以及使用什么調查問卷。為了避免浪費時間和資源，我們應該確定目標和相關指標?！?/p>

參會者提出的另一個觀點是，有些數據存在的格式不總是能用于ROI的計算。因此有必要收集和運用可用于測量或了解ROI的數據。顯然，這些在最初設置數據收集時就需要考慮。

進一步講，參會者提到的另一個挑戰是制定用于進行數據比較的標準參數。由于TVET體系的內在多樣性，這將是一項挑戰性任務。例如，來自特立尼達和多巴哥的Fitzroy Marcus指出：“用于獲取和分析數據的方法和工具是否能完全用于測評TVET的ROI，并不確定?！瓰榱嗽赥VET的ROI測量中使用最佳方法，還有很多工作要做。” 來自牙買加的Halden Anthony Morris指出：“在牙買加有若干可用的數據源，我認為可用于測量TVET的ROI。但是，這些數據源沒有按照準確、及時提供ROI量度的標準進行配置。”

數據來源：Schueler J. Forthcoming. Evaluation Framework Measuring Return on Investment （ROI） in TVET. Adelaide： National Centre for Vocational Education Research.

（五）關于投資回報率框架

圖1概述了在開發“ROI評價框架”時應考慮的可用國際文獻中所指出的問題。查看該圖時從左上象限開始，并且ROI與特定利益相關者和操作環境密切相關；在范圍和目的方面，是了解利益相關者、評估對象、重要原因和首要需求。

關于ROI的指導原則，需要使用一致且標準的評判框架。ROI模型應根據用途和評估的重要對象特制。該模型應具有實用性，并盡可能做到有用性、靈活性和可定制性。

該模型必須以可感測指標、實用量度和優質數據可用性作支持，并使用科學有效的技術解決其他因素的影響。

參會者討論了對于達成共識以及跨部門方案的需求，該方案有助于將TVET體系分析和預期的發展成果聯系起來。為此，考慮了聯合國教科文組織在“釋放潛力，轉變技術與職業教育和培訓”（Marope，Chakroun和Holmes，2015年）中提出的綜合分析方法。如前所述，該方法用平衡和戰略的方式統合了經濟增長、社會公平和可持續發展問題，并認為：經濟增長包括生產力增長、就業能力、就業機會創造和新的工作模式；社會公平包括物質和無形財富的再分配及包容；可持續性包括綠化經濟和可持續性。

下列引證說明了參會者關于框架開發的一些想法。來自德國的Wouter de Regt指出：“我們需要采取的第一步是對TVET目標達成共識……我們需要一個定義，該定義足以囊括區域差異、也足夠具體引用某些指標。一個適當的ROI框架需要有一個自下而上的方法，使得國家行為主體可以對國內重要的ROI進行測量，在地區層面上可以聚合并尋找共通性，然后在國際層面上交流這些共通性?！眮碜苑▏腂orhene Chakroun 指出：“我們對ROI的討論應該解決的根本問題，例如，在沒有有助于將TVET體系分析和與其預期發展成果結合起來的適當、共享和跨部門方案時……為了解決這一問題，聯合國教科文組織以平衡和戰略的方式提出一種統合經濟增長、社會公平和可持續發展問題的綜合分析方法?！?/p>

來自尼日利亞的Obukwor Ngozi提出：“我認為，一個跨地區的ROI框架應采用適當的聯網，開展跨區域合作，并建立伙伴關系。還要跨區域共享知識?！?