司靜金 余道清 孫鋼



【摘要】文章以柯克帕特里克評估模型為基礎,建立氣象綜合業務崗位人員培訓效果評估指標,從反應、學習、行為、結果四個層次進行培訓效果分析,為該培訓項目的設計與優化提供依據。
【關鍵詞】氣象綜合業務崗位;培訓項目;評估指標;培訓效果評估
一、引言
氣象數據分析和產品加工是縣級氣象綜合業務崗位的基本工作內容之一,是滿足氣象業務、氣象服務需求的重要保證。
為進一步提高縣級綜合業務人員氣象信息分析加工處理技術水平和縣級綜合業務平臺應用能力,中國氣象局氣象干部培訓學院安徽分院組織專兼職教師,開發了安徽省氣象綜合業務崗位人員輪訓項目。培訓效果評估作為培訓的一個環節,其在研究培訓設計是否達到培訓目標,評價培訓重點是否和培訓需求相一致,判斷培訓工作給個人和組織帶來的效益等方面具有一定的操作價值,對于今后的氣象綜合業務崗位人員培訓項目的設計與優化是十分有意義的。
二、培訓效果評估的理論模型
氣象綜合業務崗位人員培訓效果評估運用的是柯克帕特里克(Kirkpatrick)提出的階段培訓效果評價模型,該模型考慮四個層面,即反應層、學習層、行為層和結果層。
三、培訓效果評估的實施
(一)評估指標
在參考了柯氏培訓效果評估體系理論模型的基礎上,結合分院教育培訓實際,設計了氣象綜合業務崗位人員培訓效果評估相關指標,如表2。
培訓需求評估采用查找文獻、座談調研、問卷調查方法。通過查找各級法規政策文件,與決策和管理部門專家座談調研,掌握國家、部門及決策管理者對未來基層業務人員技術服務能力方面的要求,即需要拓展的方向(組織需求)。通過對全省40個縣級氣象機構的業務人員進行問卷調查,了解縣級氣象綜合業務崗位人員在能力素質上仍存在較大的提升空間和培訓需求(個人需求和崗位需求)。
結合調查的組織需求、個人需求和崗位需求,深入分析歸納得出基層氣象綜合業務崗位能力素質模型:公用軟件和業務平臺及相關的專業基礎知識的掌握、數據分析處理、服務產品加工業務情況的熟悉。繼而對照基層氣象綜合業務崗位能力素質模型,設計出培訓課程及培訓方式以及相應的培訓效果評估指標。
(二)評估對象
就培訓學員角度而言,評估對象覆蓋安徽省81個氣象臺站的基層氣象綜合業務崗位人員,近230人;就培訓項目角度而言,則覆蓋了各期培訓班。
從階段性評估調查數據可以看出,培訓對象大多數為近幾年參加工作的本科生及研究生,在崗年限5年內的占絕大多數,職稱提升空間大且急需基層業務技能及經驗。
(三)評估內容
本階段評估反應層和學習層均收集到132份有效教學質量調查表和調查問卷,行為層和結果層分別收集到129份有效反饋調查問卷(學員)和58份有效反饋調查問卷(送培單位),占培訓人數的92%,樣本具有較好的代表性。
1.反應層和學習層。針對培訓內容,從培訓目標的準確性、培訓內容的針對性、培訓教材的適用性三個指標進行培訓設計滿意度調查(圖2),從課程安排的合理性、課程內容的理解程度兩個指標進行課程設置滿意度調查(圖3),從教學準備、學科把握能力、教學內容、教學方法、教學態度、教學效果六個指標進行教師授課滿意度調查(圖4)。
培訓整體滿意度平均分為90.8。五個指標中,培訓目標的準確性滿意度最高。教師授課滿意度平均為95.8分。14門課程中,統計圖表(序列圖)授課滿意度最高。
從培訓教材對學習的幫助、教學方式方法對學習的幫助、課程學習收獲程度三個方面評估培訓學員的掌握度和收獲度。
培訓教材中各章節對學習的幫助情況如圖5,大部分學員認為教材對學習的幫助很大和較大,其中認為基礎數據產品加工部分幫助很大和較大的人數最多,占84.1%,該課程模塊學習掌握度和收獲度也是最高的。培訓學員對實習實踐教學手段更受歡迎。
2.行為層和結果層。從培訓學員結束培訓后的工作行為方式、知識技能掌握程度的前后變化、知識運用于崗位工作能力、是否達到送培單位預期效果四個方面開展培訓遷移評估和效益層評估。
根據評估結果,學員培訓后工作態度均有不同程度的改進,其中改進程度很大和較大的平均值為31.5%;通過對學員在接受培訓前和接受培訓后知識與思維的比較,對知識技能有很大和較大程度掌握的比例提高了50%以上;培訓學員運用知識解決實際工作問題的能力提升很大和較大的平均值為24.5%;培訓很大程度和較大程度達到單位預期效果的平均值為39%。調查顯示,滿意度略低的是業務軟件的使用和服務產品制作技術的培訓內容。
四、培訓效果評估的主要問題
采用柯克帕特里克的階段培訓效果評價模型全方位設計氣象綜合業務崗位人員培訓效果評估的指標,對培訓進行階段性定量評估,從結果來看,在一定程度上反映了培訓的實施情況,然而還存在一定的局限性。
首先,評估指標設計是以柯氏模型為基礎,結合實際做一定的修正和完善,但由于知識和能力有限,還不能做到評估指標設計的科學化及指標覆蓋培訓全環節;其次,評估數據多集中在反應層和學習層上,行為層和結果層評估不夠深入;再次,評估方法單一,多數采取調查問卷的形式收集數據,最多只是通過座談或聊天了解學員和單位對培訓的感受,沒有對培訓項目中所傳授的知識和技能進行考核,對培訓學員的工作行為及態度的改變、能力的提高、工作績效的改善和為單位帶來的效益等調查不夠深入;最后,培訓評估工作尚未提升至績效評估,只注重培訓結果的轉化,而忽略了將培訓效果評估與組織、社會績效相結合,為提高投資回報率提供依據。
【參考文獻】
[1]范柏乃,阮連法.干部教育培訓績效的評估指標、影響因素及優化路徑研究[M].杭州:浙江大學出版社,2012:20-32.
[2]杜牧,鄒立堯,黃世銀,等.雷電災害防御遠程培訓評估及需求分析[J].氣象繼續教育,2015:21-27.