王妍莉 楊彥軍 崔向平
?
促進理解的在線同伴互評機制研究*
王妍莉1楊彥軍2崔向平3
(1.西北民族大學 教育科學與技術學院,甘肅蘭州 730000;2.南昌大學 教育系,江西南昌 330031;3.蘭州大學 高等教育研究院,甘肅蘭州 730000)
“互聯網+”時代的到來使得在線教學逐步進入傳統高校領域,文章重點關注了在線教學過程中的同伴互評活動,結合TfU模型提出了促進理解的在線同伴互評機制,并從促進教學目標的理解、促進教學活動的理解和促進教學內容的理解三個方面進行了行動研究,結果表明:通過該機制下的活動實施,學生對于同伴互評活動有效認可并積極參與,能夠有效地理解教學目標、教學活動和教學內容。
理解性教學;同伴互評;在線教學
隨著信息技術的興起,多樣化的教學模式和方法改革如雨后春筍般在教學實踐中蓬勃發展,以資源共享和交流為核心的在線學習,與傳統課堂教學相融合形成的混合式教學,目前成為高校課堂教學改革的主流。[1]同伴互評是在線教學中常用的一種方式,是指學生對提交的作業進行相互評判并提出修改建議的教學活動,也被稱作同伴修改、同伴批閱、同伴評價和同伴反饋等[2],作為混合式教學的一個重要環節在網絡教學平臺中經常出現。為了有效促進混合式教學效果,筆者針對在線同伴互評機制進行了研究。
教學活動的目的是為了有效地促進教學質量。因此,本研究選擇教學的核心目的之一——理解,作為切入點,以TfU為主要的參考模型,進行促進理解的在線同伴互評機制研究。
同伴互評在英語教學尤其是寫作訓練中的廣泛應用,得到過程教學法專家的大力推崇[3],有學者通過研究驗證了在英語寫作教學中引入同伴互評作為教師評閱的補充是可行的[4][5]。同伴互評在其它學科中也伴隨近幾年網絡教學、在線教學的應用而日益推廣,不同學者深入探討并指出良好的同伴互評能夠促進學習者的主動參與和投入度、能夠促進學習結果的有效遷移和元認知能力的發展等。[6][7]
作為一種形成性評價策略,同伴互評策略受到廣泛重視,其主要特征是將學生作為學習的主體,重視學生學習的主動性,為促進學生的過程性學習進行評價。目前,同伴互評的相關研究從認知、教學、元認知、情感等方面被證實,能夠通過形成豐富的定性評價信息來反映學習者的優勢與不足,[8]設計良好的同伴互評能夠促進學生有效學習。[9]
為了理解的教學(Teaching for Understanding,TfU)模式是由哈佛大學教育學院研發并經過課堂檢驗的實踐理論,著名的WIDE World職業發展項目就是基于該理念開發的。TfU模式強調理解的“表現觀”,即當學生真正理解某個東西時,他們能以正確的方式將其表現出來,能靈活地思考并應用它。TfU模式包括四個主要的教學要素:①生成主題(Generative Topics);②理解目標(Understanding Goals);③理解表現(Understanding Performances);④持續評估(Ongoing Assessment)。[10][11]
促進理解的在線同伴互評機制的出發點在于設計貼近學生生活的作品主題,從學習者的角度而言,能理解作品核心要求,能分析完成作品所需的知識技能;從評價者的角度而言,能在理解作品包含的知識技能的基礎上對于同伴作品進行評價,從而促進高水平深度學習的發生,而不僅僅是將評價過程流于形式,具體如圖1所示。在該機制中,“生成主題”是指在同伴互評活動中指導確定作品選題,強調作品要體現核心目標、聯系實際,連接知識技能等;“理解目標”是指在作品評價過程中體現不同定位的目標,在互評活動中作為指導評價規則的設計;“理解表現”是在同伴互評的標準設定環節,教師需要和同學一起設計理解的表現從而支持理解的目標,“持續評估”強調標準、反饋和機會是促進學生理解教學的評估意義,在評價他人作品的同時反思個人作品的不足。

圖1 促進理解的在線同伴互評機制
本研究關注在線同伴互評過程中,以促進理解為主要目標的教學設計及其效果。研究主要目的是:①構建促進理解的同伴互評機制;②基于機制模型設計有效的同伴互評活動,并通過行動研究的方法進行效果驗證;③總結分析同伴互評機制效果。
本研究以X大學本科三年級教育技術學專業平行班的54位學生為主要研究對象,以學生的必修課程“多媒體課件設計與開發”為主要課程依托,以該高校采用的Blackboard平臺(簡稱BB平臺)[12]為混合式教學中主要的平臺載體。
本研究主要采用行動研究法[13]進行。行動研究過程貫穿了課程教學的整個周期,核心選取進行模塊作品的15個教學周進行重點觀察。根據理解性教學的基本要求,依照行動研究方法的研究流程(即計劃→行動→觀察→反思)設計具體的研究方案,并通過問卷調查、課堂觀察、文本分析和社會網絡分析的方法收集分析研究數據。
(1)第一輪行動
設計促進理解的作品主題,強化學生對于教學目標的理解,即回答“關于這些內容學生應該學習什么?”通過參與匿名的作業同伴互評,并通過問卷調研的方式分析學生對于作業目標的理解效果和對于同伴互評活動的認識態度,并對于活動過程進行反思修訂。
(2)第二輪行動
主要目的在于促進學生對于教學活動的理解,即回答“學生需要做什么才能達到學習目標”。通過參與改進后匿名的作業同伴互評,通過文本分析和社會網絡分析的方法分析學生對于教學活動的理解效果,并對于活動過程進行反思修訂。
(3)第三輪行動
主要目的在于促進學生的深度學習效果,進行持續性評估,即回答“如何了解學生掌握了什么”。實施改進后的作業同伴互評活動,并通過問卷調研的方式分析學生的學習整體效果,重點觀察學生的理解表現,并對于活動過程進行反思,從而總結同伴互評的優劣。
整個研究過程以課程“多媒體課件設計與開發”中三個比較獨立的單元模塊為核心觀察內容,即按順序選擇“演示類課件”、“動畫類課件”和“交互類課件”模塊的內容,要求學生根據教學要求完成相應類型的課件作品。
整體教學采用混合式教學環境,即課堂講授在計算機網絡教室進行;同時基于BB教學平臺開設了虛擬的網絡教學空間,進行教學內容資源承載、重難點內容微課教學、個人作品同伴互評和教學問題交流等活動。
為了觀察學生對于教學內容的理解效果,首先根據每個階段的教學目標設計了貼近學生生活、連接知識技能的生成性任務主題,要求每個階段結束后提交個人作品,并基于BB平臺進行同伴互評。同時,根據行動研究反饋不斷調整評價策略,注重促進理解效果的過程性評價。
(1)促進學生對于教學目標的理解
同伴互評活動第一輪行動研究,重點觀察同伴互評如何有效促進學生對于教學目標的理解。由于互評活動規則的制定即參考該部分的教學目標而來,因此該部分的理解效果從以下方面進行分析:對于互評規則可以正確分析;對于互評活動可以正確操作;對于互評效果可以正確評價,并通過問卷調研數據進行分析。
(2)促進學生對于教學活動的理解
第二輪行動研究重點觀察如何促進學生對于教學活動的理解,為了更好地呈現學生對于活動的理解效果,本研究在第一輪匿名同伴互評的基礎上增加了討論交流的模塊,通過文本分析和社會性網絡分析的方法來觀察討論紀錄,從而分析學生的理解效果。
(3)促進學生對于教學內容的理解
第三輪行動研究重點關注學習者對于教學內容的理解以及整體活動效果,即通過課堂觀察和問卷調查的方法分析學習者自我評價效果、活動參與效果和學習成績變化,從而驗證學習者對于教學內容理解的效果和同伴互評活動的有效性。
依照研究計劃中三輪行動研究,并基于BB平臺進行數據的收集,重點針對強化學生對于教學目標的理解、促進學生對于教學活動的理解、促進學生對于教學內容的理解效果三個方面進行分析。第一階段實施后發現互評分數比重的問題、課堂互評作品量的問題等還需要進行設計改進;而第二階段反映出還存在交流范圍較小、內容不夠深入等問題,需要在后續的實踐中進一步改進。
針對行動研究中不同側重點的設計,本研究主要基于同伴互評機制下對于教學目標的理解、教學活動的理解以及教學內容的理解三個方面進行效果分析,數據分析過程和結論如下:
此次的系列互評活動重點觀察學生對于教學目標的理解程度,以及對于這種同伴互評方式的認可態度。作業互評以匿名的方式進行,系統隨機分配,每位學生一共需要分析評價6份作品。系統根據這部分教學目標,提前設置了分析的具體緯度和得分標準。研究觀察主要通過問卷調查的方式收集數據,得到如下比較有代表性的觀察結論:
(1)學生對于同伴互評活動普遍認可
關于學生對于同伴互評活動的認可度,在第一輪活動結束后筆者進行了相關問卷分析,結果顯示:絕大多數學生對于活動積極認可,認為通過互評活動可以更好地理解教學要求(同意選項比例占87.5%)、了解其他同學的想法(同意選項比例占81.25%)、有更好的參與感(同意選項比例占88.51%)、促進同學間的交流(同意選項比例占81.25%)、更好促進自己學習效果(同意選項比例占69.75%)等。
(2)學生對于同伴互評活動操作明確且普遍認真參與、對待
針對同伴互評活動中學生的參與狀態,本研究同樣進行了相關問卷調研,結果如圖2所示,可以看出:絕大多數學生明確知道互動如何操作、認為成績的評定是很公平的、認可自己的責任并愿意投入額外時間參與活動。

圖2 同伴互評活動中學生參與狀態問卷結果

圖3 同伴互評活動中網絡交互社群圖
(3)學生提出對于同伴互評活動的評價和改進建議
①大多數學生認可匿名評價方式。問卷調研顯示,86.21%的學生認為同伴互評活動更適合采取匿名的形式,原因在于匿名評價“更有利于排除關系的干擾、更加公正、將主觀影響降到最低、真實性更高”。
②大多數學生認為同伴互評成績的比重應該占課程成績的一半。問卷調研顯示,73.44%的學生認為互評成績比例應該占“這次作業成績的一半,另一半由老師評價”。究其原因,在于“對半的比例設置更有利于重視同學的意見、公平合理、老師和同學共同參與,對作業的完成及質量會從兩個角度有一個認定,更加合理”。
③大多數學生強調明確評價規則的重要性。79.25%的學生認為“老師需制定明確的規范讓同學遵守”;71.88%的學生認為互評活動中“學生應參與評價規范的制定”,同時反映“評價要求更細化、制作一些客觀的制度讓學生遵守,然后評價工作放在課后效果會更好”。
此次的系列互評活動通過參與改進后匿名的作業同伴互評,以及討論交流的活動重點觀察學生對于教學活動的理解效果,以文本分析和社會網絡分析的方式分析數據。
社會網絡主要是用點和線來表示行動者之間的聯系,各成員網絡交互關系如圖3、表1所示。在圖3中,各頂點表示交互中的成員,其中點與點之間的連線表示成員之間的聯系,即成員之間發帖、回復等交互情況;表1則表現了網絡分析的各數據。[14]從結果來看,學習成員之間主要進行的是小組內部的探討。
表1 網絡交互社群分析表

此外,為了驗證參與活動是否可以有效促進學生學習的理解效果,本研究將每個成員的核心度系數與期末的學業總評成績做了Pearson相關分析,結果表明顯著性系數值為0.01<0.05,相關系數為0.302,表明兩者顯著正向相關。
第三輪的行動研究重點觀察學生的持續性理解效果,以問卷調查的方式收集數據。比較有代表性的成果顯示如下:
(1)基于同伴互評的學生自我學習效果評價良好
針對不同內容學習的掌握程度,本研究在教學伊始進行了前測,并在活動結束后進行了后測,前、后測的自我評價配對樣本t檢驗結果如表2所示。三組獨立的教學內容模塊測評以及“課件制作綜合能力”測評這4組配對樣本的顯著性系數值分別為0.000、0.000、0.001、0.000,均小于0.05,同時配合每組均值的變化可以看出后測成績有顯著提升,進而得出學生自我評價良好、學習效果較佳的結論。
表2 學習效果前后測配對樣本t檢驗結果(N=54)

注:*代表在0.05水平顯著,**代表在0.01水平顯著,***代表在0.001水平顯著;效果評價緯度采用李克特五點記分法,從1~5別為“非常陌生”~“十分熟練”。
(2)同伴互評活動參與度與學習效果顯著相關
在研究過程中,除了記錄學習效果的成績,同時記錄了學生參與同伴互評活動的狀態,以討論區發帖量、回復量、作業互評參與量等進行計算,并記錄了活動參與頻數。將活動參與頻數與學習總成績進行Pearson相關分析,結果顯示相關顯著性系數值為0.000<0.05,相關系數為0.677,表明兩者顯著正向相關。
本研究基于TfU模型構建了促進理解的同伴互評機制,并通過行動研究進行了有效驗證。結果表明,通過活動的實施,學生對同伴互評活動給予了肯定并積極參與,且對學習效果的評價較好,能夠有效地理解教學目標、教學活動和教學內容。此外,在研究過程中同時總結出:結合學生實際生活的作品更有利于促進理解目標、匿名評價方式更有利于同伴互評方式的開展;討論區的問題交流有助于更好地理解教學活動;師生共同制定評價規則能夠更好地促進理解表現,同伴互評與教師評價對半的比例設置更有利于重視學生的意見、公平合理;作品的互評應該及時反饋,并且增加修改后二次評價的環節。與此同時,本研究也存在一些不足,如在基于同伴互評活動進行的討論交流活動中,學生之間的交流互動不夠緊密,而互動交流核心度與學業成績顯著正相關,因此繼續促進討論交流是有待后續研究解決的問題。
[1]趙國棟,原帥.混合式學習的學生滿意度及影響因素研究[J].中國遠程教育,2010,(6):32-38.
[2]陳茂慶,李宏鴻,高惠蓉.名著閱讀與同伴互評[J].外語教學理論與實踐,2013,(1):71-78.
[3]Ferris R S, Pezone R. Tintl T S. Teacher commentary on student writing: Descriptions & implicaitons[J]. Journal of Second Language Writing, 1997,(2):155-182.
[4]莫俊華.同伴互評:提高大學生寫作自主性[J].解放軍外國語學院學報,2007,(5):35-39.
[5]秦毅之.同伴互評與句酷批改系統對大學非英語專業學生英語寫作能力影響的實證研究[D].臨汾:山西師范大學,2015:27-47.
[6]孫力,鐘斯陶.MOOC系統中同伴互評過程的優化和應用[J].現代遠距離教育,2014,(6):3-8.
[7]許濤.慕課同伴互評模型設計研究[J].開放教育研究,2015,(4):70-77.
[8]Prins F J, Sluijsmans D M, Kirschner P A, et al. Formative peer assessment in a cscl environment: A case study[J]. Assessment & Evaluation in Higher Education, 2005,(4):417-444.
[9]Lu J Y, Law N. Online Peer assessment: Effects of cognitive and affective feedback[J]. Instructional Science, 2012,(2):257-275.
[10]David P, Tina B. Putting understanding up front[J]. Educational Leadership, 1994,(2),51:4-7.
[11]Martha S W, Mindy S, Susan W. New technologies to support teaching for understanding[J]. International Journal of Educational Research, 2001,(5):483-501.
[12]Blackboard簡介.北京畢博信息技術有限公司[OL].
[13]呂立杰,馬云鵬.課程行動研究:方法論視角的探討[J].外國教育研究,2003,(3):60-64.
[14]劉軍.整體網分析講義:UCINET軟件實用指南[M].上海:上海人民出版社,2009:54.
Research on Online Peer-Assessment Mechanism for Promoting Understanding
WANG Yan-li1YANG Yan-jun2CUI Xiang-ping3
The rise of “Internet +” age has made online education gradually enter the traditional universities. The core of the article focuses on the online peer mutual evaluation activities in the online teaching process. Combined with the TfU model, it puts forward an online peer mutual mechanism. Meanwhile, the method of action research is carried out in three aspects: promoting the understanding of teaching objectives, teaching activities, and teaching content. The results show that through the implementation of activities under this mechanism, students can effectively recognize and actively participate in peer assessment activities, and can effective understand the teaching goal, teaching activities and teaching content.
promote understanding in teaching; peer-assessment; online teaching
G40-057
A
1009—8097(2018)12—0048—07
10.3969/j.issn.1009-8097.2018.12.007
基金項目:本文受西北民族大學“一優三特”學科2017年度中央高校基本科研重大培育項目“技術促進民漢雙語教學有效性研究”(項目編號:31920170113)、“一優三特”學科2017年度中央高校基本科研業務費創新團隊項目“西北民族教育研究”(項目編號:31920170096)、中央高校青年創新團隊項目“基于民族教育大數據的社會計算與學習研究”(項目編號:31920160005)資助。
王妍莉,博士,副教授,研究方向為遠程教育、民族教育信息化等,郵箱為wangyl-xx@163.com。
2018年5月16日
編輯:小西