基于眾包思想的實(shí)時(shí)教學(xué)評(píng)價(jià)模式探索

王志波，胡佳慧，王 騫

（武漢大學(xué) 計(jì)算機(jī)學(xué)院，湖北 武漢 430072）

0 引 言

教學(xué)評(píng)價(jià)系統(tǒng)是近年來興起用于評(píng)價(jià)教師教學(xué)質(zhì)量的系統(tǒng)，已逐漸成為高校教學(xué)中不可欠缺的一環(huán)，對(duì)提高教學(xué)質(zhì)量發(fā)揮了重要作用。文獻(xiàn)[1]面向“算法與數(shù)據(jù)結(jié)構(gòu)”課程，提出一種全面、科學(xué)的教學(xué)評(píng)價(jià)方法，對(duì)教學(xué)的全過程進(jìn)行動(dòng)態(tài)、多因素的綜合評(píng)價(jià)，可有效促進(jìn)教學(xué)水平不斷提高；文獻(xiàn)[2]探討教學(xué)評(píng)價(jià)對(duì)于幫助教師總結(jié)教學(xué)經(jīng)驗(yàn)、改進(jìn)教學(xué)方法、提高教學(xué)質(zhì)量的好處；文獻(xiàn)[3]闡述智能化方法在課程評(píng)價(jià)中的應(yīng)用前景。目前，大多數(shù)高校采用教學(xué)評(píng)價(jià)系統(tǒng)來衡量教師教學(xué)水平，甚至部分學(xué)校引入評(píng)價(jià)結(jié)果來決定教師的工資和津貼待遇，使教師認(rèn)真對(duì)待學(xué)生評(píng)價(jià)從而提升教學(xué)熱情。然而，當(dāng)前的評(píng)價(jià)系統(tǒng)雖然能從某種程度上起到評(píng)價(jià)教師的積極作用，但同時(shí)存在參與性低、零交互、評(píng)價(jià)滯后等問題，導(dǎo)致教學(xué)評(píng)價(jià)的效果大大減弱。此外，偶爾發(fā)生的惡意評(píng)價(jià)情況，也大大損害教師教學(xué)的積極性。因此，亟須改進(jìn)現(xiàn)有的教學(xué)評(píng)價(jià)系統(tǒng)，真正促進(jìn)教師與學(xué)生之間的實(shí)時(shí)互動(dòng)，進(jìn)而推動(dòng)教師教學(xué)水平的提高，改善高校的整體教學(xué)質(zhì)量。

眾包（crowdsourcing）思想[4]是指通過大眾的廣泛參與實(shí)現(xiàn)某個(gè)共同目標(biāo)，它充分發(fā)揮“人多力量大”的特點(diǎn)，將大量用戶（在教學(xué)評(píng)價(jià)系統(tǒng)中用戶就是學(xué)生）擰成一股繩，并借助智能設(shè)備，實(shí)現(xiàn)隨時(shí)隨地的用戶參與。教學(xué)評(píng)價(jià)系統(tǒng)離不開學(xué)生的廣泛參與，只有實(shí)時(shí)收集大量的學(xué)生反饋信息，才能真正評(píng)價(jià)教學(xué)質(zhì)量的高低，才能快速發(fā)現(xiàn)教師教學(xué)中不足之處、掌握學(xué)生的學(xué)習(xí)狀況，從而提高教學(xué)質(zhì)量。

1 教學(xué)評(píng)價(jià)系統(tǒng)存在的問題

在現(xiàn)有的教學(xué)評(píng)價(jià)系統(tǒng)中，通常在學(xué)期結(jié)束之后，學(xué)生可進(jìn)入教師評(píng)價(jià)頁(yè)面，對(duì)教師的教學(xué)質(zhì)量做出評(píng)價(jià)，但該系統(tǒng)存在參與性低、零交互、評(píng)價(jià)滯后以及惡意評(píng)價(jià)等問題，難以真正起到促進(jìn)教學(xué)質(zhì)量改進(jìn)的效果。

1.1 參與性低

由于教學(xué)評(píng)價(jià)在課程結(jié)束之后，學(xué)生缺乏足夠的動(dòng)力或者激勵(lì)去參與評(píng)價(jià)：一方面，對(duì)于任何一位學(xué)生來說，本次的評(píng)價(jià)不會(huì)改變自己在本課程接受到的教育情況；另一方面，部分高校采取強(qiáng)迫的方式，要求學(xué)生必須做出評(píng)價(jià)。即便在這種情況下，學(xué)生的參與度仍然很低。筆者對(duì)此深有感觸，作為“數(shù)據(jù)庫(kù)原理及安全”課程老師，六十多位學(xué)生僅僅只有十幾位學(xué)生做出評(píng)價(jià)。此外，強(qiáng)迫評(píng)價(jià)的一個(gè)后果就是亂評(píng)價(jià)，在評(píng)價(jià)系統(tǒng)中經(jīng)常會(huì)發(fā)現(xiàn)“張冠李戴”情況，學(xué)生為完成評(píng)價(jià)任務(wù)，將對(duì)一位老師的評(píng)價(jià)復(fù)制到另外一位老師身上，這樣的評(píng)價(jià)毫無意義。基于該情況，必須改進(jìn)教學(xué)評(píng)價(jià)系統(tǒng)，提高學(xué)生的評(píng)價(jià)積極性。

1.2 零交互

在教學(xué)過程中，師生之間的交互性非常重要。教師要實(shí)時(shí)掌握學(xué)生的學(xué)習(xí)情況，學(xué)生要積極反饋教師的教學(xué)情況。只有實(shí)時(shí)交互，不斷改進(jìn)教學(xué)，才能起到良好的教育效果。然而，在現(xiàn)實(shí)中，大部分學(xué)生是不主動(dòng)的，或者對(duì)老師是畏懼的，并不會(huì)主動(dòng)反映老師的教學(xué)情況；而且學(xué)生評(píng)價(jià)是在課程結(jié)束之后，且只有一次評(píng)價(jià)的機(jī)會(huì)，本質(zhì)上沒有發(fā)揮任何交互的作用。沒有交互，則無法實(shí)現(xiàn)良好的教育效果。基于該情況，必須改進(jìn)教學(xué)評(píng)價(jià)系統(tǒng)，提供多次的交互功能，促進(jìn)師生相互了解、相互磨合，提高教學(xué)質(zhì)量。

1.3 評(píng)價(jià)滯后

學(xué)生參與評(píng)價(jià)，是為了反映教師的教學(xué)情況，比如教學(xué)形式的好壞、授課速度的快慢、教學(xué)重點(diǎn)是否突出，以及希望教師下一次授課的時(shí)候能夠注意哪些問題并加以改進(jìn)?，F(xiàn)有的教學(xué)評(píng)價(jià)是在授課結(jié)束之后，即便學(xué)生做了評(píng)價(jià)，等教師意識(shí)到問題后，這批學(xué)生也無法享受到改進(jìn)后的授課。此外，一門課程通常有固定的課程計(jì)劃安排，一般連續(xù)兩次上同一門課程的時(shí)間間隔為半年。既便教師在本次評(píng)價(jià)之后發(fā)現(xiàn)了問題，等半年之后也很容易忘記。此外，本次學(xué)生和下批學(xué)生的素質(zhì)不同，本次評(píng)價(jià)后的改進(jìn)并不一定適合下一批學(xué)生?；谠撉闆r，必須改進(jìn)教學(xué)評(píng)價(jià)系統(tǒng)，實(shí)現(xiàn)實(shí)時(shí)無滯后的評(píng)價(jià)機(jī)制，促進(jìn)師生間的相互了解，改善教學(xué)質(zhì)量。

1.4 惡意評(píng)價(jià)

在現(xiàn)有的教學(xué)評(píng)價(jià)系統(tǒng)中，經(jīng)常會(huì)出現(xiàn)一些惡意評(píng)價(jià)，甚至張冠李戴的情況，進(jìn)而影響學(xué)校對(duì)教師教學(xué)水平的實(shí)際評(píng)估，甚至以此為根據(jù)處分教師。惡意評(píng)價(jià)的出現(xiàn)是由幾方面因素導(dǎo)致的：①部分學(xué)生素質(zhì)較差，借助教學(xué)評(píng)價(jià)的機(jī)會(huì)，故意抹黑教師；②部分學(xué)校強(qiáng)制學(xué)生必須參與某些課程的評(píng)價(jià)，導(dǎo)致學(xué)生產(chǎn)生逆反心理，從而惡意評(píng)價(jià)教師，甚至張冠李戴。惡意評(píng)價(jià)會(huì)嚴(yán)重影響教師的授課積極性，進(jìn)而嚴(yán)重影響教學(xué)效果，最終受害的還是學(xué)生?；谠撉闆r，必須改進(jìn)教學(xué)評(píng)價(jià)系統(tǒng)，通過激勵(lì)而非強(qiáng)迫的方式鼓勵(lì)學(xué)生參與評(píng)價(jià)，表達(dá)真實(shí)想法，有效過濾惡意評(píng)價(jià)，提高教師的授課積極性。

2 實(shí)時(shí)眾包教學(xué)評(píng)價(jià)模式

基于教學(xué)評(píng)價(jià)系統(tǒng)中存在的問題，我們將眾包思想融入教學(xué)評(píng)價(jià)，提出基于眾包思想的實(shí)時(shí)教學(xué)評(píng)價(jià)模式，其基本流程是：通過適當(dāng)?shù)募?lì)引導(dǎo)，激發(fā)學(xué)生參與評(píng)價(jià)的熱情，實(shí)現(xiàn)課程教學(xué)的實(shí)時(shí)眾包反饋，從而實(shí)現(xiàn)師生實(shí)時(shí)交互，促進(jìn)教師改進(jìn)教學(xué)方式，提高教學(xué)質(zhì)量。在新的模式中，學(xué)生不再是授課結(jié)束后進(jìn)行一次性評(píng)價(jià)，而是每周做出教學(xué)評(píng)價(jià)，通過設(shè)計(jì)激勵(lì)機(jī)制激發(fā)學(xué)生參與評(píng)價(jià)的熱情；通過設(shè)計(jì)友好的評(píng)價(jià)界面以及提供移動(dòng)端界面方便學(xué)生評(píng)價(jià)；通過自動(dòng)分析系統(tǒng)撰寫評(píng)價(jià)報(bào)告供教師與學(xué)生參考。

2.1 每周實(shí)時(shí)評(píng)價(jià)

在新的模式下，采取讓學(xué)生每周進(jìn)行教學(xué)評(píng)價(jià)方式而非學(xué)期授課結(jié)束后進(jìn)行評(píng)價(jià)。相比以前的評(píng)價(jià)模式，每周進(jìn)行評(píng)價(jià)有幾個(gè)優(yōu)勢(shì)。

（1）細(xì)粒度的實(shí)時(shí)評(píng)價(jià)。原先的教學(xué)評(píng)價(jià)只能對(duì)整個(gè)學(xué)期的授課情況進(jìn)行評(píng)價(jià)，粒度太粗，無法反映課程中某個(gè)章節(jié)或者教師在某個(gè)階段的授課情況。采用每周評(píng)價(jià)后，學(xué)生可以對(duì)當(dāng)前周次的授課內(nèi)容、教師的授課情況作出實(shí)時(shí)評(píng)價(jià)，可以細(xì)粒度地實(shí)時(shí)反映當(dāng)前授課內(nèi)容的掌握情況和教師的授課情況。

（2）良好的交互性。原先的教學(xué)評(píng)價(jià)在學(xué)期結(jié)束之后，即便學(xué)生做了評(píng)價(jià)，教師做出改進(jìn)后，這批做出評(píng)價(jià)的學(xué)生也無法享受到改進(jìn)后的授課教育。換言之，原先的教學(xué)評(píng)價(jià)是沒有交互的。采取每周評(píng)價(jià)后，有了實(shí)時(shí)的評(píng)價(jià)信息，教師了解學(xué)生的掌握情況，授課速度的快慢以及教學(xué)內(nèi)容的重點(diǎn)情況，從而可以迅速做出調(diào)整，實(shí)現(xiàn)真正的交互教課。

（3）準(zhǔn)確的教學(xué)評(píng)價(jià)。原先的教學(xué)評(píng)價(jià)是對(duì)整個(gè)學(xué)期的評(píng)價(jià)，粒度粗且不夠準(zhǔn)確。采用每周評(píng)價(jià)，一方面是對(duì)每周的授課情況進(jìn)行評(píng)價(jià)，細(xì)粒度且評(píng)價(jià)及時(shí)準(zhǔn)確；另一方面，通過多次評(píng)價(jià)，可以真實(shí)反映教師的授課水平，可有效避免惡意評(píng)價(jià)對(duì)教師的影響。

2.2 簡(jiǎn)潔清晰的評(píng)價(jià)界面

為減少學(xué)生參與的負(fù)擔(dān)，提高學(xué)生參與評(píng)價(jià)的積極性，一個(gè)簡(jiǎn)潔清晰的評(píng)價(jià)界面是必不可少的。此外，還可以通過提供移動(dòng)端應(yīng)用或者在微信公眾號(hào)中引入評(píng)價(jià)界面，方便學(xué)生隨時(shí)隨地做出評(píng)價(jià)。這樣的界面設(shè)計(jì)要從以下幾個(gè)方面考慮。

（1）耗時(shí)要少。學(xué)生能夠在幾分鐘之內(nèi)回答問題并且做出評(píng)價(jià)，盡可能將時(shí)間控制在3分鐘之內(nèi)，減少學(xué)生參與的負(fù)擔(dān)。

（2）問題簡(jiǎn)短明確。首先，在問題類型上，盡可能以選擇題和評(píng)分題為主，容易回答且用時(shí)較短；其次，允許學(xué)生做出簡(jiǎn)短的反饋評(píng)價(jià)，從自己的角度評(píng)價(jià)課程教學(xué)的長(zhǎng)處和不足；再次，在問題內(nèi)容上，設(shè)計(jì)要有針對(duì)性，只設(shè)計(jì)反映本周課程內(nèi)容和教師教學(xué)水平的問題，保證反饋的實(shí)時(shí)性和準(zhǔn)確性；最后，在問題數(shù)目上，盡可能精煉準(zhǔn)確，減少問題數(shù)目。

（3）提供移動(dòng)端應(yīng)用或者公眾號(hào)平臺(tái)。學(xué)生不僅能在電腦上參與評(píng)價(jià)，還可在移動(dòng)端（如手機(jī)、平板）上參與評(píng)價(jià)。有了移動(dòng)端應(yīng)用或者公眾號(hào)平臺(tái)，學(xué)生可以隨時(shí)隨地做出實(shí)時(shí)評(píng)價(jià)反饋，比如吃飯、坐車甚至上廁所的時(shí)候，將極大提高學(xué)生的參與度。

2.3 評(píng)價(jià)激勵(lì)機(jī)制

雖然學(xué)生參與評(píng)價(jià)能夠反映真實(shí)的學(xué)習(xí)情況和教師的教授水平，然而在沒有明確的激勵(lì)機(jī)制下，學(xué)生的參與程度普遍是不高的。因此，有效的評(píng)價(jià)激勵(lì)機(jī)制就顯得非常重要了?？蓮囊韵聨讉€(gè)方面設(shè)計(jì)激勵(lì)機(jī)制，提高學(xué)生參與評(píng)價(jià)的積極性。

（1）將參與評(píng)價(jià)作為獎(jiǎng)勵(lì)成績(jī)。對(duì)于學(xué)生的每次評(píng)價(jià)作為一次有效記錄，將每個(gè)學(xué)生的參與評(píng)價(jià)次數(shù)作為一項(xiàng)指標(biāo)，折算為獎(jiǎng)勵(lì)分?jǐn)?shù)加到學(xué)生的最終成績(jī)中。通過該方式，學(xué)習(xí)好的學(xué)生會(huì)追求更高分?jǐn)?shù)，學(xué)習(xí)不好的學(xué)生會(huì)為了達(dá)到及格分?jǐn)?shù)，因此將激勵(lì)各個(gè)層次的學(xué)生參與評(píng)價(jià)，將有效提高學(xué)生的參與積極性。

（2）將參與評(píng)價(jià)抵消處分。隨著學(xué)校對(duì)學(xué)生上課的要求越來越高，部分學(xué)生由于缺堂導(dǎo)致收到學(xué)校處分。比如，武漢大學(xué)計(jì)算機(jī)學(xué)院在2016—2017學(xué)年曾連續(xù)幾次通報(bào)缺堂學(xué)生，缺堂一次做出警告，缺堂兩次則直接取消本學(xué)期評(píng)優(yōu)資格?？蓪⑴c評(píng)價(jià)次數(shù)與通報(bào)批評(píng)關(guān)聯(lián)，根據(jù)參與次數(shù)的不同抵消不同程度的處分。通過該方式，不僅有效激勵(lì)在學(xué)習(xí)過程中犯錯(cuò)的學(xué)生參與評(píng)價(jià)，還將激勵(lì)學(xué)生積極參與評(píng)價(jià)提前預(yù)防犯錯(cuò)。

2.4 自動(dòng)分析模塊

現(xiàn)有的評(píng)價(jià)系統(tǒng)中只是對(duì)于某些評(píng)分項(xiàng)目做出平均處理，并沒有針對(duì)評(píng)價(jià)做出總體分析，也沒有撰寫評(píng)價(jià)報(bào)告，并不利于教師及時(shí)發(fā)現(xiàn)教學(xué)問題。因此，一個(gè)能夠分析學(xué)生評(píng)價(jià)并形成總結(jié)報(bào)告的自動(dòng)分析模塊就顯得尤為重要。評(píng)價(jià)系統(tǒng)中的自動(dòng)分析模塊需要提供以下幾個(gè)功能。

（1）匯總結(jié)果的直觀顯示。對(duì)于評(píng)分題、選擇題，可以通過柱狀圖、直方圖的形式顯示統(tǒng)計(jì)結(jié)果，比如平均值、頻率值、最大值、最小值等。對(duì)于文字評(píng)價(jià)，可采用自然預(yù)言處理，提取關(guān)鍵詞，并對(duì)相應(yīng)關(guān)鍵詞進(jìn)行重要性評(píng)價(jià)，以圖標(biāo)的形式進(jìn)行展示。

（2）匯總報(bào)告自動(dòng)撰寫。人工智能技術(shù)已成功應(yīng)用于新聞撰寫。通過自然語(yǔ)言處理以及引入人工智能，將匯總結(jié)果撰寫為直觀清晰且自然閱讀的匯報(bào)報(bào)告，供教師和學(xué)生參考。

為解決現(xiàn)有評(píng)價(jià)系統(tǒng)中面臨的參與度差、零交互、滯后甚至惡意評(píng)價(jià)的問題，本文提出一種實(shí)時(shí)眾包的教學(xué)評(píng)價(jià)模式，是對(duì)現(xiàn)有教學(xué)評(píng)價(jià)系統(tǒng)不足的有益探索和理念的創(chuàng)新。該模式從評(píng)價(jià)頻率、界面設(shè)計(jì)、激勵(lì)機(jī)制、智能分析等多個(gè)維度提出改進(jìn)措施，系統(tǒng)實(shí)現(xiàn)較為負(fù)責(zé)，有待需要進(jìn)一步實(shí)現(xiàn)并應(yīng)用到真實(shí)教學(xué)評(píng)價(jià)系統(tǒng)中。

3 結(jié) 語(yǔ)

教學(xué)評(píng)價(jià)系統(tǒng)的好壞將影響一個(gè)學(xué)校的教學(xué)質(zhì)量，而教學(xué)質(zhì)量又與師生息息相關(guān)。隨著互聯(lián)網(wǎng)+、大數(shù)據(jù)、移動(dòng)計(jì)算的快速發(fā)展，基于眾包思想的實(shí)時(shí)教學(xué)評(píng)價(jià)模式將在教學(xué)質(zhì)量評(píng)價(jià)體系中發(fā)揮更好的作用。

[1]王曉東, 吳英杰, 林偉, 等. 課程教學(xué)評(píng)價(jià)方法的探索與實(shí)踐[J]. 教育與教學(xué)研究, 2008(14): 107-109.

[2]楊爽, 李剛. 課堂教學(xué)質(zhì)量評(píng)價(jià)實(shí)踐與探析[J]. 計(jì)算機(jī)教育, 2006(10): 69-71.

[3]邵允學(xué), 周建濤. 智能化方法在課程評(píng)價(jià)中的應(yīng)用前景[J]. 計(jì)算機(jī)教育, 2017(8): 152-154.

[4]劉云浩. 群智感知計(jì)算[J]. 中國(guó)計(jì)算機(jī)學(xué)會(huì)通訊, 2012(10): 38-41.