學習行為分析視角下高職教師線上培訓評價指標體系的設計

劉濤

（廣東郵電職業技術學院計算機學院，廣東廣州 510630）

教育部下發的《國家職業教育改革實施方案》《職業教育提質培優行動計劃（2020—2023年）》提出要完善國家職業教育制度體系，提質培優行動計劃中也指出要提升教師素質，打造教師培訓基地，將教師培訓上升到戰略高度。但現行的高職教師培訓中，各大高職院校都重視培訓，然而對培訓效果缺乏監督管理，即所謂的“重培輕評”，這種現象十分普遍。即使有評價，但是評價往往只是流于形式，未能夠公正客觀地反映整體的培訓效果。這不利于高職教師培訓的長遠發展，也不利于高職教師的職業發展，也是對培訓資源的一種浪費。數字化時代的到來重塑了教育培訓的業務生態，使線上培訓成為新常態，如何評價線上培訓的質量和效果成為教師培訓研究的關注熱點。

一、相關文獻分析

培訓評價指標體系是一種以數據為評判依據的客觀評價培訓效果的有效手段。目前相關研究成果十分豐富，本文對知網近10年發表相關內容的學術期刊進行了內容分析，發現目前關于教師培訓評價的研究主要集中在以下兩個方面：一是以柯式四級培訓評估為代表的系列培訓評估模型為研究視角，并基于這些模型規定的培訓評價的方式和內容維度，構建特定對象的培訓評價指標。如樓旭明企業E-Learning培訓效果評價模型及指標體系，基于CIPP 和柯氏評估模型的教師工作坊研修評價指標體系，教師教育技術能力評價指標體系等［1-3］；二是隨著新的教育培訓行為分析驗證理念的出現，如胡藝齡對在線學習行為的數據進行分析，提出通過數據行為分析驗證學習效果的理念［4］，在此基礎上一些學者構建了基于在線行為分析的教師網絡學習空間評價指標體系［5］，用來評價教師網絡學習的效果。有學者通過分析學生的學習行為，構建了在線學習模式下學生學習效果評價體系［6］。

上述學者的研究更多的是關注線下教師培訓的評價，且評價的主體、標準大多數是以培訓組織者的視角來進行，僅是為了評價而評價，且大多是主觀的評判；評價的維度也十分寬泛，既有對授課教師的評價也有對培訓組織管理的評價。但是對于學員的參訓學習效果究竟如何進行客觀的評判，至今未有一套完善的體系。數字時代，多元化的技術媒體與培訓全流程的深度融合，產生的海量的學習行為數據，成為一種寶貴的“資源”，為參訓學員學習效果的分析提供了新的重要途徑，且教師線上學習行為本身具備的客觀性、真實性強的特點，能夠有效地反映出教師參訓的態度、結果，這為高職院校教師培訓評價體系的建立提供了新的解決思路，也是本文研究的切入視角。

二、高職教師線上培訓學習的行為特征分析

高職教師線上培訓的本質也是線上學習，只是參加學習的對象為高職教師，學習的內容相對普通學生來講不是系統的知識體系，而是針對某一問題或能力定制化的內容，其學習的目的是提升某一項或多項能力?，F有的學習行為研究也能為其提供參照和指導。數字時代大量技術媒體的深度應用，對高職教師線上培訓行為的重塑產生了新的影響，變革了教師線上培訓學習的行為表現。立足媒體的技術特性對高職教師線上學習行為數據的特征進行梳理，有助于為后續高職教師線上培訓評價體系的建立提供支撐。

學習行為從動機角度可以劃分為內顯行為和外顯行為兩類，內顯行為具有隱蔽性，難以直接測量；外顯行為是學習者主動表現的行為，這類行為可以通過觀測直接記錄，且這類行為具有極強的真實性、不可更改性。外顯行為是內顯行為的間接體現，內顯行為通過外顯行為直接表達學習者當時的心態。高職教師的線上學習行為也具備同樣的特性。分析高職教師的線上學習行為能間接反映當時學習者的心理和態度，為培訓效果的評價，甚至培訓組織采取干預策略提供指導。

自線上學習興起后，關于線上學習行為的研究已成為國內外學者關注的焦點，但是現有的研究只是停留在學習行為分析的模型理論和構建上，對如何收集行為數據、評判行為研究相對匱乏［7］。線上學習行為數據是指學習者通過線上學習平臺進行學習，并在學習過程中產生的行為數據，這些行為數據除了具備線下學習行為特性外，還會受到技術條件的限制，如學習平臺的功能等，具有較強的隱蔽性和技術依賴。本文從技術的視角對高職教師線上培訓學習行為的數據特征梳理，如表1 所示。

表1 線上學習行為數據的特征

線上學習行為數據的六個特征為構建基于學習行為分析的線上培訓評價體系提供了根本遵循。但是也應注意到，數字化時代線上培訓的行為數據是相當海量的，數據的記錄存儲方式各異，且存在標準上的不一致，能否快速匯總、梳理所有的行為數據信息是關鍵點，對整個培訓的組織評判，具有決定性作用。同時線上學習行為數據的技術依賴性，會隨著技術的不斷發展進步變得越來越強，技術的進步也會進一步豐富和完善線上學習行為數據的信息，使其記錄更加精準，評價更加客觀、真實有效。

三、高職教師線上培訓學習行為分類

線上學習也是一種教學活動，與傳統教學唯一的區別是將教室這一物理空間，轉為線上學習空間，這里的線上學習空間可以是單一的也可以是多元的，這與線上教學活動的設計相關。在以學習行為為基礎的對教學活動分析的研究中，美國學者弗蘭德的課堂行為分析法最為系統，應用也最廣泛。其核心要義是以教師課堂教學為切入點，對教師課堂的教學活動進行記錄、分類和編碼，制定課堂行為編碼分析的規則，通過課堂行為編碼分析的方式，實現對教師課堂教學效果的量化分析，如教學模式分析、教學環節分析、存在問題分析。這也是本文學習行為視角下高職教師線上學習培訓效果評價體系設計的根本遵循。因此梳理高職教師線上培訓學習的行為關乎整個體系的應用效力。

為精準地對高職教師線上培訓學習行為進行分類，結合高職教師線上培訓學習行為的特征，本研究從高職教師線上培訓常見的組織模式分析入手，重點關注培訓采取的平臺功能，對常見如教師繼續教育平臺、網絡研修平臺、社交學習平臺如微信等幾類媒體進行了功能分析；也對培訓領域具有代表性的CSTD學習平臺的功能進行了詳細了解和梳理，總結出高職教師線上培訓學習18 條常見的行為。需要指出的是，隨著技術的進步，這些行為還會進行動態調整。

本研究認為高職教師線上培訓學習其本質也是成人學習的一種方式，具備成人學習的特性。對成人線上學習行為分類的研究目前還不是十分完善，但是對于學習行為的分類研究已經相對成熟。比較具有代表性的是勒溫的學習行為OCCP 層次模型［8］，從操作行為層（OB）、認知行為層（ColB）、協作行為層（CogB）以及問題解決層（PSB），學習行為的程度也在不斷加深，層級越高說明其學習效果越好。按照該分類模型，結合高職教師群體特色和線上培訓的現實情況，對高職教師線上培訓學習的18 項行為分類梳理如表2 所示。

表2 高職教師線上培訓學習行為分類

上述18 類行為中，1—15 類是可以直接通過線上培訓平臺的操作如實進行客觀記錄和反映的，是高職教師線上培訓過程中最直接的行為，可以直觀地反映和觀測出參訓人員的狀態，可以為培訓組織方、教師培訓干擾提供參照。16—18 類是線下的通過工作檢驗的隱性行為，會帶有一定的主觀性，比較難以記錄和觀測，但一旦激發出類似行為，可以從側面反映培訓的效果和質量。同時行為與行為之間存在一定的層級性，層級越高代表學習越深入，對學習效果的反映越客觀、真實，越能體現學習的效果。

四、學習行為視角下高職教師線上培訓評價體系設計

目前對于線上學習行為分析模型的研究成果眾多，如網絡教學學習行為分析模型［9］、在線學習行為分析模型等［10］。這些模型只是在理論上對學習行為數據如何被采集、加工、處理、分析給出了指導，但是究竟如何進行實踐應用，目前還缺乏相關的研究。本文立足弗蘭德分析法的編碼矩陣分析模型，構建了高職教師線上培訓學習評價的分析機制，主要包括高職教師線上培訓學習行為評價編碼表、數據分析處理矩陣。

（一）高職教師線上培訓學習行為評價編碼表

學習行為視角下的高職教師線上培訓效果評價的核心前提是收集記錄學習過程中教師的行為數據，并將其量化。因此需要建立高職教師培訓學習行為信息記錄收集的工具。立足前文對高職教師線上培訓學習行為的分類，結合開展效果評價的需要，基于弗蘭德課堂行為分析方法的要義，設計了高職教師線上培訓學習行為評價編碼表，如表3 所示。

表3 高職教師線上培訓學習行為評價編碼表

（二）數據分析處理矩陣

高職教師線上培訓學習行為評價中涉及的教師行為記錄者包括多方，主要是系統操作日志、具有線上培訓管理權限的培訓管理人員，也會包括來自參訓教師上級領導的信息，其來源具有多元化、非線性的特征，因此，不能完全按照弗蘭德課堂行為分析法的理念進行數據的分析處理，在對高職教師線上培訓學習行為分析時，主要是通過統計每個行為的次數或者頻次，通過量化的方式來對教師的整體培訓進行評估。其編碼行為的統計如表4 所示。

表4 高職教師線上培訓學習行為評價編碼統計表

通過上述的表格進行編碼統計，可以分析的內容、計算方式如表5 所示。

表5 分析內容、公式、含義

上述數據分析方式是基于參訓者的視角進行的，通過這些數據分析能夠得出高職教師線上學習的參訓態度、投入程度以及參訓效果等。但考慮到高職教師線上培訓采取的技術媒體的特性，會有不同的培訓組織模式，除了分析學習者外，對于一些特定的如線上直播、社群學習等，還可以通過分析參訓者的行為數據信息來表征培訓講師的教學方式，對其培訓教學的組織情況進行客觀評價，為組織方評判教師提供參考。此外，數據的分析和應用具有無窮性，除上述可以分析的內容以外，使用者還可以根據實際情況，參照上面的操作方式，進行更多內容的分析和應用。

五、研究總結

本研究主要是從學習行為分析的視角探討了高職教師線上培訓評價體系的設計與應用。其核心的理念是關注參訓者的個體，通過對參訓教師的行為進行量化編碼和量化分析，以求公正客觀地對其進行培訓效果的評價。當前研究成果還處于理論階段，未進行實踐驗證，后續將進行實踐應用以不斷完善研究的成果，為高職教師線上培訓效果的評價提供新思路。