西北民族大學 左曉薇
自從我國加入華盛頓協議組織,表示我國工程學歷認證已與國際接軌,逐漸邁入國際化軌道。這是對我國工程教育重視程度的不斷提升,還在一定程度上提升了對于工程教育的要求,對工程教育的持續改進可以為其提供一定的基礎理念。這一理念主要表示借助內部質量監控、跟蹤及評價等方式為工程教學進程準確把控,為工程教育專業建設發展奠定基礎。
學生評教主要指的是學生可以結合教師的教學風格、教學方式、教學節奏等多方面教學表現進行評價,還可以根據自身理解程度有無進步、專業能力是否得到提升等方面進行評教。學??梢越Y合多方面設置相應的評價指標,從而為學生對教師進行評教提供便捷。學生對于教師教學方式的評價可以為學校提供參考,準確判斷教師教學效果。學生對于教師教學過程的評價最早來自發達國家,自評教方式誕生以后,經過了多個時期的發展和更新,我國在引入評教方式后,一些學校內部先行采用了評教方式來掌握教師教學情況。在獲得一定成果后,便不斷對其進行完善和優化,進而使評教方式更加公開、公平、規范。本次研究分析了當前學院內部學生在評教過程中存在的問題及評教對學生學習產生的影響。
目前,學生在進行教學評教的過程中存在著較為濃重的主觀色彩,這也導致評教無法收到應有的效果。一些學生無法理性評價,甚至對一些課堂要求較高的教師打低分,出現這種情況的原因主要是評教數據后續處理缺乏科學性和合理性。在學生結束對教師課堂教學評教后,按照規定的比例去除一些偏差較大的分值,取中間值并不能將所有不客觀分值有效篩除。學院內部傳統評教數據的分析主要是借助李克特量表(Likert scale),是評分加總式量表最常用的一種,屬同一概念的這些項目是用加總方式來計分,單獨或個別項目是無意義的。它是由美國社會心理學家李克特于1932 年在原有的總加量表基礎上改進而成的,對學生評分展開討論與研究。
結合教學內容、教學方式、課堂管理、課程考核等內容了解學生對于教師的評分,借助加權平均的方式進行。這種數據處理方式可以為學生評教提供便捷,便于后續人員進行評教數據處理,但還是會使教師評教分數受到學生主觀色彩的影響。學生在隨意評教的時候,傳統評教數據無法對學生評分真實性進行確定,因此這時需要通過分析學生評教評論文本了解實際評分數據,掌握學生在評教過程中存在的其他參考信息,便于掌握學生評教形式。
結合自然語言處理背景,對學生評教評論文本展開分析處理可以更好地實現數據清理,收集相應的目標意見,促使主題匹配的實現。其中還包含教師畫像步驟,使學生在了解評教文本分析方式的基礎上實現評教。學生的評教數據主要來自A 學校2020 年某專業評教記錄。在開展評教文本分析之前可以對數據中存在的學生學號,教師工號采取脫敏處理。共有百余名學生對10 門課程進行評教,其中涉及10 名教師,如表1 所示。

表1 學生評教文本分析示例
因為學生可以在評論文本中自由填充評論內容,所以學院應該對學生評教記錄中存在的評論文本進行數據清理,促使一些參與數據分析的評論文本發揮其應有的作用。學院內部在實施數據清理的時候應該對一些與評教無關的內容進行清除,其中包括一些無意義評論、純數字評論等。另外,對于一些泛泛而談的評教內容也應該及時清除。例如,一些字眼為“很好”的評價內容不但無法表述教師的教學質量,還無法使教師教學與教學評教相契合,無法使評論文本和教師教學的某一教學方面相對應。因此,針對一些評教中的短評論也需要及時清理。
1.目標意見元組提取
為了從當前評教內容中將與教師有關的教學信息意見進行充分收集,需要將評教信息中評論文本所包含的目標意見提取出來。在評教信息中,目標意見屬于學生對課程教學活動中某一環節的評價。本次分析采取了自然語言處理工具包進行評價文本分析,掌握詞語之間的依賴關系,隨后使用雙向傳播算法將目標意見元組提取出來,表2 為意見元組提取示例。

表2 目標意見元組提取示例
2.主題匹配
文章使用目前被廣泛采用的IDEA 評教模型(IntelliJ IDEA)對教師課堂教學活動進行評價,也可以稱為教師畫像。教師畫像中包含教師基本信息、學校屬性、授課信息、授課關系、成果信息、評教信息等。教師畫像可以幫助評教順利進行。本次評教從課程組織、課堂交流溝通、師生互動、課程教學難度、考試以及學生自我評價等方面開展。為了實現合理評教,需要將提取出的目標意見元組匹配到IDEA 評教模型中的某個主題,進而形成教師畫像。將提取出的目標詞和主題詞使用相同的詞向量表示出來,隨后使用余弦相似度對目標詞向量和主題詞向量相似度進行計算,取其中相似度最高的主題詞作為目標詞對應的主題。
當前,目標意見主要是將評教內存在的評論文本提取出來,這也屬于文本方式的主要路徑。為了對評論文本有效性進行合理驗證可以借助設備提取的方式與人工提取相對比,在對評教文本信息進行驗證的時候可以使驗證人員與設備驗證同步進行,假如其中存在對相同內容的不同意見,則可以借助對其進行深入探討獲得一致意見,進而降低人工標記的隨意性。借助人工驗證方式對于評教文本進行收集,需要相關人員針對一些相同的評價內容以文本方式提取意見得到設備的提取結果,將人工提取內容和設備提取內容對比,對準確率、召回率及F1 值進行計算。經過對人工提取內容與設備提取內容的對比可以得知,當前設備提取內容與人工提取內容相似性較高。
通過分析學生評教弱點可以對評教方式進行優化,學生評教中評論文本對教師的評價主體分為教師的教學活動和教學主題,因此借助對主題的評論文本可以統計出主題所包含的評論文本。在對評教記錄進行分析后可以得知,目前學生對于教師的表達交流技巧和課程難度方面的評價占比較高,這也表示學生對于教師課堂教學中與學生之間的溝通交流及教學難易的重視程度較高,因此可以將課堂師生交流和教學難易度作為學生感受最多的內容。學生的自我評價占比較低,這也屬于課堂評教的薄弱環節,究其原因主要是評教環節主要是針對教師課堂教學展開評價,大部分學生沒有認識到評教內容中自我分析環節對于教師課堂教學評價的意義,因此大部分學生都沒有進行自我評價。所以在日后課堂教學過程中,教師需對教學目標進行明確,進而強化學生對于自我評價環節的意識,對評教過程起到優化作用。
綜上所述,采取自然語言處理技術對學生評教數據文本內容進行分析的方式,可以作為評分分析手段的有效補充,進而為工程教育專業內部持續改進理念的實現提供支撐。相關數據研究內容表示,一些新型手段的出現也為評教方式的提升和完善起到了輔助作用。這就要求學校在日后的發展過程中不斷融合評教分析結果,對教學方式進行改進,從而更好地對新方式在教學持續改進過程中產生的作用進行合理驗證。