高校在線教育質量評估體系的歐洲經(jīng)驗
——基于《歐洲在線教育質量保障評估框架》的視角

李鳳瑋 ,周川

(1.臨沂大學 教育學院,山東 臨沂 276000;2.蘇州大學 教育科學研究院,江蘇 蘇州 215123)

近十多年來,歐洲高校在線教育發(fā)展迅速,不僅各專業(yè)的在線課程大量增加,完全在線的學位項目也開始增設。伴隨著這一迅速的發(fā)展態(tài)勢,在線高等教育的質量爭議也日益激烈。對此,歐洲高等教育保障協(xié)會組織專家開展了“基于信任的自適應學習在線教育評估系統(tǒng)”的研發(fā),并于2019年發(fā)布了研究成果——《歐洲在線教育質量保障評估框架》(FQAEA)(以下簡稱《評估框架》),旨在建立能有效評估在線學習質量的框架,為評估高校在線教育質量提供一個有效的工具,以保障和提升高校的在線教育質量[1]。

《評估框架》針對在線教育特征,構建了歐洲高校在線教育的評價標準,因此一經(jīng)推出,很快成為歐洲高等教育區(qū)成員國高校在線教育質量保障的重要參考,并且也為進一步推動博洛尼亞進程做出貢獻[2]。通過對《評估框架》的研究,可以探尋歐洲高校在線教育質量評價體系的特征和取向,也可以為我國高校在線教育質量保障體系的建立提供一些有益啟示。

一、《評估框架》的出臺背景

(一)歐洲高校在線教育的迅速發(fā)展

人工智能、云計算、區(qū)塊鏈等數(shù)字技術的變革直接推動了歐洲在線教育的發(fā)展,根據(jù)歐洲大學協(xié)會(EUA)發(fā)布的《歐洲高等教育機構在線教育報告》統(tǒng)計,2014年已有53%的歐洲高校開設在線課程,已有39%的高校開設在線學位項目[3]。2018年,歐盟委員會發(fā)布了《在線教育行動計劃》,進一步強調了在線教育在教育數(shù)字化轉型中的重要作用,明確歐盟的重要戰(zhàn)略任務是提升教育機構的在線教育能力[4],這極大地推動了歐洲高校在線教育的發(fā)展。到2019 年,北歐已有84%的高校開展在線教育,開放大學的在線教育甚至達到了100%[5]。新冠肺炎疫情的流行更是全面加快了歐洲高校在線教育的普及,到2021年,歐洲已有95%的高校開展不同形式的在線教學[6]。在線教育的迅猛發(fā)展也使得在線教育的質量評估變得越來越重要。當前,歐洲高等教育區(qū)成員國普遍采用的高等教育質量評估是由歐洲高等教育質量保證協(xié)會、歐洲學生聯(lián)盟、歐洲大學協(xié)會、歐洲高等教育機構協(xié)會共同協(xié)商修訂的標準和指南——《歐洲高等教育領域質量保證標準和指南》(以下簡稱《ESG (2015)》)[7],該指南分為10個內部質量保證標準、7個外部質量保證標準、7個質量保證機構標準,其中內部質量評估指標中涉及了混合式教學,但是并不能完全適用于在線教育,缺乏對于在線教育質量評估的針對性。因此,建立更能適應在線教育特點并能充分體現(xiàn)21世紀新技能的在線教育質量評估模式是歐洲高等教育發(fā)展的當務之急。

(二)高校在線教育質量廣受爭議

伴隨著歐洲高校在線教育迅猛發(fā)展,質疑和批評的聲音也始終不斷,這些質疑和批評主要集中在在線教育質量方面。首先,在線教育雖然突破了時間和地域的限制,但是課堂教學的互動性、實踐性、操作性卻成為短板,難以有效培養(yǎng)學生的實踐能力和操作能力。其次,在線教育在確保學生聽課、考試中的真實性、客觀性、準確性等方面還需要進一步提升。這些短板使得在線教育被認為低于傳統(tǒng)學位教育的水準,因此大眾形成了在線教育是次于傳統(tǒng)學位教育的替代品的刻板印象,一些在線學習者將其稱為“廉價的消費品”[8],一些學者甚至將在線教育貶為“沒有營養(yǎng)的知識”[9]。這些質疑對于在線教育的持續(xù)發(fā)展構成了挑戰(zhàn)。而在線教育質量保障體系可以明確在線教育質量的衡量標準,保障在線教育質量,進而改善這一現(xiàn)實狀況,“建立在線教育質量評估體系,確保在線教育學習和在線教育評估的質量,對提高公眾對在線教育的信心至為重要”[10]。但是當前歐洲高等教育區(qū)僅有23%的高校嘗試制定具體的質量保證方法評估在線教育質量[11],因此建立系統(tǒng)的、受到廣泛認可的在線教育質量評估體系刻不容緩。

二、《評估框架》的理念傳承

為了有效應對上述機遇和挑戰(zhàn),歐盟委員會資助了地平線2020項目“基于信任的自適應學習在線教育評估系統(tǒng)”(TeSLA),該項目聚焦在線教育的質量,研究在線教育質量評估策略,“致力于將操作性標準融入在線學習環(huán)境中,為學生開辟新的機遇”[12]。為了保證該在線教育質量評估體系的科學性和有效性,TeSLA 系統(tǒng)于2016年至2019年開展了三輪大規(guī)模的試點評價[13],經(jīng)過三輪試點測試后,TeSLA 從地理范圍、規(guī)模、質量保證和虛擬學習環(huán)境等多個方面論證了在線教育評估體系標準的可行性,為《評估框架》的出臺奠定了基礎。

相較于《ESG (2015)》多維度指標體系,《評估框架》主要集中在內部質量保證標準指標,共分為8個一級指標體系,分別是在線教育評估質量保證的政策、結構和過程;學習評估;真實性、透明性和獨創(chuàng)性;基礎設施和資源;學生支持;教育工作者;學習分析;公共信息。一級指標體系可進一步劃分為43個二級指標體系。通過分析具體指標,可以發(fā)現(xiàn)《評估框架》的若干一級指標與《ESG(2015)》的內部質量保證標準一致(表1),可以說《評估框架》在一定程度上繼承了《ESG (2015)》的核心指標體系[14],體現(xiàn)其對《ESG(2015)》理念和文化的傳承。

表1 FQAEA 框架標準與ESG(2015)對應表

(一)傳承以學生為中心的理念

相較于傳統(tǒng)教育,在線教育中學生更具有多樣性和復雜性,在線教育質量也在更大程度上取決于學生的學習態(tài)度和學習體驗,因此《評估框架》在《ESG(2015)》基礎上,進一步突出了“以學生為中心”這一理念,例如在一級指標“學習分析”中明確目標為“促進學生的參與,適應學生和教育模式的多樣性”[15]。具體的二級指標也進一步突出學生在在線學習中的中心地位,“在線教育評估中的學習分析應用方法應該能夠體現(xiàn)對學生和學生群體多樣性的理解;鼓勵使用各種評價和評估方法;注重學生等利益相關者的反饋”[16],突出了學生在在線教育中的主體地位。《評估框架》的這些指標體系更加關注學生在線學習的體驗和反饋,更加突出在線教育中學生這一關鍵要素。

(二)延續(xù)持續(xù)改進的質量文化

《ESG(2015)》致力于提供高質量的教學、學習、研究保證措施和建議,以高質量的教育來實現(xiàn)區(qū)域社會、經(jīng)濟的可持續(xù)發(fā)展,并且通過增加歐洲高等教育的吸引力促進博洛尼亞進程[17]。為此,《ESG(2015)》強調教育質量保證需要動員所有的利益相關者,讓組織的每一個成員都能為質量負責,由此培育一種持續(xù)改進、追求卓越的質量文化。在線教育的虛擬性和復雜性客觀上增加了教師、管理人員等組織成員的工作量,相關學者指出,“教師開展在線教學需要投入更多的時間和精力,其教學工作量至少增加了14%”[18]?？梢哉f,在線教育對組織成員提出了更高的要求,只有教師、學生、管理人員形成持續(xù)改進的組織文化,才能有效保障在線教育質量。因此《評估框架》延續(xù)《ESG(2015)》倡導的質量文化,促使高校、教師、學生等組織和成員形成共同的價值觀和信念,針對在線教育質量的保證和提升達成共同的契約和承諾,進而影響和約束成員的態(tài)度和行為,從而促進在線教育質量的持續(xù)改進和提升。

三、《評估框架》的體系創(chuàng)新

在線教育與傳統(tǒng)教育的區(qū)別不僅僅在于物理校園結構、教學時空的不同,兩者教學模式、教學組織形式乃至面臨的挑戰(zhàn)都有所不同,這也決定了在線教育質量保障體系并不是對傳統(tǒng)教育質量保障體系的復制,因此《評估框架》在繼承《ESG(2015)》的基礎上在指標體系上進行了創(chuàng)新,進一步突出了在線高等教育的特征。

(一)注重學習分析,實現(xiàn)數(shù)據(jù)驅動的在線評估

《評估框架》增設了“基礎設施和資源”與“學習分析”兩個新指標,強調通過在線教育的評估,使學生能夠得到建設性和發(fā)展性學習的反饋,持續(xù)改善學生學習體驗,進而提高在線學習質量。

首先,《評估框架》強調對學生的學習維度進行全面、系統(tǒng)的數(shù)字化采集。其中“基礎設施和資源”這一維度強調在線教育系統(tǒng)的信息技術基礎設施和操作系統(tǒng)能夠適應不同的在線教育質量評估方法;“學習分析”強調突出信息技術的優(yōu)勢,強調運用學習分析技術、自適應學習技術、大數(shù)據(jù)分析等新興信息技術對學生的隨堂測試成績、在線課堂參與情況、課程目標達成情況等學習數(shù)據(jù)精準追蹤,以掌握學生的在線學習實況和學業(yè)進展水平。除了獲取學生的學術知識和水平數(shù)據(jù),《評估框架》還借助人工神經(jīng)網(wǎng)絡技術獲取學生在線學習過程中的眼神、面部表情、心率和肌肉皮膚活動、眨眼頻率、疲勞檢測等多模態(tài)數(shù)據(jù)參數(shù),形成基于多模態(tài)數(shù)據(jù)分析的學生在線學習狀態(tài)監(jiān)測系統(tǒng),自動識別學生在線學習過程中的情感,并進行可視化的呈現(xiàn),以此來幫助教師推斷學生參與在線學習時的心理狀態(tài)、學習深度,評估學生對于在線學習的滿意度等[19],從而全面推動在線教育評估的智能化和科學化。

其次,在采集學生在線學習數(shù)據(jù)的基礎上,《評估框架》更加注重對數(shù)據(jù)的深度挖掘和分析。《評估框架》指出,信息技術對學生學習數(shù)據(jù)的采集不是直接對學生在線學習和在線教育質量進行評判,而是通過數(shù)據(jù)分析改進學生的在線學習并提升教師在線教學的針對性,“利用信息技術持續(xù)收集學生在線學習信息,診斷學生在線學習的薄弱環(huán)節(jié),并提出改進質量的措施和策略進而持續(xù)改進在線學習”[20],因此,《評估框架》非常強調反饋的重要性,在多個指標體系中明確建立反饋機制,例如“學習分析”中二級指標規(guī)定“從利益相關者(學生、學術人員、支持人員等)收集相關信息,以促進學生學習體驗的改善……促進持續(xù)改進”[21]。在學習評估這一維度,明確規(guī)定“建立保障機制,確保向學生及時提供建設性和發(fā)展性學習的反饋;從學員、教學人員和管理人員那里收集有關在線教育評估方法和技術安排的反饋”[22]?！盎A設置和資源”指標也強調“制定有關學習環(huán)境和教育數(shù)字技術(包括虛擬學習環(huán)境)的反饋程序”[23]。此外,《評估框架》所建立的基于多模態(tài)數(shù)據(jù)分析的學生在線學習狀態(tài)監(jiān)測系統(tǒng)也形成了學生學習情感反饋機制,輔助教師開展更具有針對性的在線教學?！对u估框架》所建立的這些反饋機制不僅可以增強學生在線學習的交互性,促進個性化和適應性學習環(huán)境的設計,促進學生開展更加高效的在線學習,與此同時幫助教師開展更為精準的在線教學和輔導,從而雙向提升在線教育質量[24]。由此,《評估框架》構建了由數(shù)據(jù)驅動的“多方數(shù)據(jù)采集—數(shù)據(jù)深度分析—實時反饋修正—持續(xù)改進學習”的評估體系,將學習和評估鏈接形成了循環(huán)螺旋、不斷改進的動態(tài)過程。

(二)設置評估最低標準,發(fā)揮高校的自主性

《評估框架》增設最低質量要求這一新標準,這些最低要求基本都是在線教育過程中可以觀測到的行為和技術。例如“學習分析”的最低質量要求為“建立系統(tǒng)的數(shù)據(jù)收集和管理的程序;教師和學生參與制定學生學習表現(xiàn)的監(jiān)測指標;能夠持續(xù)追蹤學生的學業(yè)進展,并促進學生持續(xù)改進學業(yè)”,強調“學習分析”的最低標準是能夠收集和追蹤學生學業(yè)數(shù)據(jù)并做出及時反饋;“學習評估”的最低質量要求為“教師和學生反饋調查和評估的結果;為學生提供評估方法和標準的指導;由審查小組提供評估報告,并就新的教學模式提供建議”[25],明確“學習評估”的最低標準是多方參與評估,并能夠發(fā)揮改進作用。增設了最低質量要求,其目的是為歐洲各個高校提供在線教育評估框架的同時保留一定的空間,保證各高校的自主性,發(fā)揮各高校的能動性,促使各高校能夠在保持在線教育最低質量要求的共性要求下,結合自身的特色發(fā)展自己的質量保證文化、政策和策略,形成多樣化、個性化的在線教育評估體系。“該框架的目的不是限制高校創(chuàng)造性地使用在線教育評估方法和技術,而是提供最低評估標準,并指導高校進行可靠的、安全的在線教育評估實踐?！盵26]可以說,《評估框架》最低標準的設置不僅確定了各高校在線教育質量評估的共同性,同時保障了各高校的自主性。

最低質量要求的設置是由歐洲高等教育區(qū)成員國高等教育質量保障機制傳統(tǒng)和在線教育質量評估現(xiàn)狀所決定的。首先,《ESG(2015)》為了保持51個歐洲高等教育區(qū)成員國高校在教育評價上的多樣性,只是明確了高等教育質量保障的一般性原則,并沒有具體要求,這使得歐洲高等教育區(qū)成員國高校的質量保障機制具有一定的差異性,這一質量保障機制傳統(tǒng)為最低質量要求的設置奠定了基調[27]。其次,根據(jù)歐洲大學協(xié)會(EUA)2018年的調查報告,雖然91%的高校已經(jīng)開展了在線學習課程,但是僅有23%的高校設立質量保障機構評估在線教育質量[28],在線教育質量評估現(xiàn)狀也要求《評估框架》考量各高校的差異性。因此《評估框架》在具體的指標體系的基礎上設置最低質量要求,不僅可以明確在線教育的質量底線,保證高校在線教育質量保持基本的水準要求,同時也可以保障各高校的自主性、創(chuàng)造性、多元性。根據(jù)最低質量標準理論,最低質量標準的設置不僅可以提升產(chǎn)品質量,而且還會通過激發(fā)競爭進而降低成本。因此,《評估框架》設置最低質量要求,有效限定了各個高校的質量選擇空間,使得其中尚未關注在線教育質量的高校可以將最低質量要求作為在線教育質量保障的基本要求,而已關注在線教育質量評估機制的高?？梢越Y合以往經(jīng)驗、自身的發(fā)展特色以及最低質量要求建立更高水準的在線教育質量保障機制,這樣不僅保證了高校在線教育的基本質量,而且也促進不同高校形成具備自身特色的在線教育評估體系,進而在學術競爭中不斷提升在線教育質量。

四、《評估框架》對我國高校在線教育質量評估體系構建的啟示

近年來,中國高校的在線教育飛速發(fā)展,據(jù)統(tǒng)計,“2021 年,全國高校在線課程開出率達到91%”[29]。在線教育建設已經(jīng)成為我國高等教育改革與發(fā)展的重大問題,《中共中央關于制定國民經(jīng)濟和社會發(fā)展第十四個五年規(guī)劃和二〇三五年遠景目標的建議》指出:“發(fā)揮在線教育優(yōu)勢,完善終身學習體系”[30],突出強調了在線教育的重要地位,發(fā)展在線教育已經(jīng)上升為國家戰(zhàn)略。相應地,建立支撐高質量在線教育發(fā)展的在線教育教學質量評估和保障體系也成為新時代的命題。因此如何積極主動地建立全面系統(tǒng)的高校在線教育質量評估體系,引導我國在線教育規(guī)范發(fā)展,成為后疫情時代迫切需要解決的問題。

(一)理念先行:貫徹以學生為中心的理念

理念之于在線教育教學質量評估體系具有特定的目標導向價值,只有樹立和貫徹正確的理念,才能優(yōu)化在線教育質量評估體系的頂層設計,從而構建我國在線教育的新發(fā)展格局,為實現(xiàn)在線教育高質量發(fā)展提供根本保證。貫徹“以學生為中心”的理念不僅要求學生主體參與到在線教育質量保障的活動中,實現(xiàn)在線教育質量保障體系中評估主體的多元化,更重要的是在線教育質量評估體系的指標以學生的發(fā)展為核心,以學生學習為中心,以學生學習效果為重心,對學生的在線學習進行全面性、系統(tǒng)性監(jiān)測評價,使學生能夠得到建設性和發(fā)展性學習的反饋,進而持續(xù)改善學生在線學習體驗和教師的在線教學水平,實現(xiàn)在線教育的高質量發(fā)展。

(二)文化導向:培育追求卓越的在線教育質量文化

我國在線教育質量的提升和保障要注重文化的導向作用,充分發(fā)揮組織成員的主體地位,在組織成員內部中形成追求卓越的質量文化,以此來影響和約束教師教的行為、學生學的行為和管理人員的管理行為,敦促教師、學生和管理人員持續(xù)改進并永久提升教育質量,使得追求卓越成為組織成員的自覺追求和文化追求。在共同的質量觀的導向下,組織成員積極探索提升在線教育質量路徑,主動參與在線教育質量提升實踐,從而自下而上地去推動在線教育質量的持續(xù)改進和提升。

(三)實踐落實:建設中國特色的在線教育評估框架

為了有效保障在線教育質量,國內一些高校出臺了定期發(fā)布在線教學簡報、在線示范課程等方式作為應急管理的質量保障手段,但是并沒有建立系統(tǒng)的在線教育質量保障機制。當前一些學者嘗試建立在線教學質量評價標準,但是其外在效度還需進一步商榷。因此,當前國家應該組織教育評估、教育技術等不同學科的專家,結合在線教育質量評估的基本理念和在線教育的特點,在借鑒國際在線教育質量標準的基礎上,研制在線教育質量評估體系的具體維度和指標,并在試點的基礎上征求意見,持續(xù)修改和調整,形成具備中國特色的在線教學質量評估機制,為各個學術機構的在線教育的評估和監(jiān)測有效實施提供指南。

(四)創(chuàng)新發(fā)展:細化在線教育質量評估的最低標準

當前,我國不同類型高校已經(jīng)確定了分類分層的差別化發(fā)展路徑,因此其在線教育的發(fā)展也應避免均質化,更加注重科學定位、特色辦學。相應地,在線教育質量評估也應該突出高校的定位和特色。為此,我國在線教育評估框架可以細化在線教育質量評估的最低標準,明確我國高校在線教育質量評估的范圍和空間。各高校可以將在線教育質量評估的最低標準作為一般性原則,在此基礎上,結合自身辦學特色與定位建立在線教育質量保證策略和機制。在線教育質量評估最低標準既強調高校群體類型對內在一致性標準上的認同,同時也注重高校個體在具體指標體系的差異,由此形成具備框架準則同化和指標體系異化雙重屬性的在線教育評估體系。

(五)技術保障:改進教育信息技術

在線教育質量的提升離不開教育信息技術的支持,教育信息技術可以為在線教育質量監(jiān)控提供技術、設備和物理環(huán)境支持,實現(xiàn)在線高等教育的數(shù)字化、智能化。因此在線高等教育質量的提升還要充分發(fā)揮“互聯(lián)網(wǎng)+教育”的優(yōu)勢,將最新的教育信息技術廣泛運用到在線教育中,注重運用自動化設計教學技術、建模和動態(tài)虛擬仿真等關鍵技術,提升在線教育的真實性、客觀性、準確性,同時引進網(wǎng)絡交互系統(tǒng)、協(xié)作式白板、全息投影、多模態(tài)數(shù)據(jù)分析、自適應學習技術等新興技術,建立學生在線學習狀態(tài)監(jiān)測系統(tǒng)和學生學習情感等反饋機制,使其在線教育質量評估智能化、數(shù)據(jù)化、專業(yè)化,從而健全適應新要求、融合新技術的在線教育質量評估機制,形成高質量高等教育的支撐體系。