CET—4作文評閱中的信度探析

劉婷婷

摘要信度在大學(xué)英語四級考試的作文評分中非常重要，指出了目前存在的缺陷，并提出提高其信度的對策——教師與計算機結(jié)合閱卷的可行性，對其他全國統(tǒng)一的英語作文考試評分有一定的參考價值。

關(guān)鍵詞大學(xué)英語四級考試信度問題與對策

中圖分類號：H315 文獻標(biāo)識碼：A

大學(xué)英語寫作極其重要。董亞芬（2003）認(rèn)為“我國的英語教學(xué)應(yīng)始終以讀寫為本”。在聽、說、讀、寫、譯五項技能中，寫是比較難的，但它最能使學(xué)生有成就感，也是激發(fā)學(xué)生非智力因素的最好方法之一。①但目前對于作文評閱信度的研究深度和廣度都不夠，打開學(xué)術(shù)期刊網(wǎng)站，相關(guān)研究屈指可數(shù)。在介紹相關(guān)概念后，指出了目前存在的缺陷，并提出提高其信度的對策——教師與計算機結(jié)合閱卷的可行性，對其他全國統(tǒng)一的英語作文考試評分有一定的參考價值。

1信度的概念及大學(xué)英語四級作文評閱要求

1.1相關(guān)概念

信度，指的是測試結(jié)果是否穩(wěn)定可靠。也就是說，測試的成績是不是反映了受試者的實際語言水平。例如，如果同一套測試在對同一測試對象（即受試者本身沒有變化）進行的數(shù)次測試中，受試者的分?jǐn)?shù)忽高忽低的話，則說明該測試缺乏信度。②大學(xué)英語四級考試作文題型主要是測試學(xué)生的綜合語言運用能力，作為一種主觀題型，閱卷教師的操作流程直接關(guān)系到寫作考試的信度。

1.2大學(xué)英語四級考試大綱作文部分的評分要求和閱卷流程

目前大學(xué)英語四級考試的作文按檔次計分，作文部分的總分大概為105分，把105分按語言的能力，篇章結(jié)構(gòu)以及綜合水平劃分為5個檔次。譬如最高分的那檔就要求語言幾乎沒有錯誤，篇章組織好，作文條理清晰等。這個評分標(biāo)準(zhǔn)基本保證了大學(xué)英語四級作文評閱的信度，但還是有一定的缺陷。從閱卷流程來看，首先教育部在全國主要高校選拔認(rèn)真負(fù)責(zé)的大學(xué)英語教師參加閱卷，然后進行相關(guān)培訓(xùn)。閱卷是按小組劃分的。過去集中在上海外國語大學(xué)或上海交通大學(xué)閱卷。現(xiàn)在把閱卷權(quán)限放到了各個省的省會城市主要重點大學(xué)進行。總體流程比較規(guī)范，但由于時間緊迫，任務(wù)大，差錯難免。

2大學(xué)英語四級作文評閱中信度的問題

（1）閱卷高強度的工作負(fù)荷減少了閱卷的信度。盡管存在統(tǒng)一的評分標(biāo)準(zhǔn)，目前網(wǎng)絡(luò)閱卷便利快捷，但由于教師人數(shù)有限，很多大學(xué)英語四級作文的閱卷時間少于1分鐘，加上有少數(shù)教師責(zé)任心缺乏，使其信度大大打了折扣。

（2）教師的教學(xué)理念存在偏差，作文評閱模式存在諸多缺陷。③

（3）有些閱卷教師閱卷帶有強烈的個人主觀色彩，或過多的拘泥于語法和評寫等語言錯誤而忽視總體內(nèi)容，可謂是只見樹木不見森林，抓住局部忽視主體。

3人工與智能機器結(jié)合閱卷的可行性

要提高大學(xué)英語四級的作文評閱的信度，我們可以采納國外同行的經(jīng)驗，將人工與智能機器結(jié)合閱卷結(jié)合起來。近年來，國外考試研發(fā)機構(gòu)均將傳統(tǒng)由人工進行的作文評閱環(huán)節(jié)納入計算機評卷系統(tǒng)。2007年，美國麥克勞-希爾加州考試中心研發(fā)的WritingRoadmapTM2.0在線英語教學(xué)軟件進入中國，該系統(tǒng)不但可以為學(xué)生在線提交的作文作出及時評分、生成分析報道，也可以為教師全面了解學(xué)生的寫作情況提供多維分析報告。此外，“托福、GMAT這類全球性、大規(guī)模的國際性英語考試也已開始廣泛應(yīng)用機器自動化作文評閱系統(tǒng)”。④計算機評分系統(tǒng)雖然省事，但也存在不少弊端，它只能對學(xué)生的語言水平作出評定，而始終無法對作文的風(fēng)格，內(nèi)容等進行公平的打分。基于此，特推薦一種人工與智能機器結(jié)合閱卷方式，來提高大學(xué)英語四級的作文評閱的信度。

第一步為機器閱卷，給出考生的語言分，該項占大約百分之五十的比例。第二步，教師按照大學(xué)英語四級的作文評閱的評分要求按檔打分，重點看寫作內(nèi)容和篇章布局及修辭等。第三步為不同閱卷小組對在線交換評閱作文，有爭議的考生作文在線由閱卷組長定奪。以2011年6月的全國大學(xué)四級作文話題onlineshopping為例，首先電腦對學(xué)生的語法，拼寫和字?jǐn)?shù)給出一個基本分，再有教師按評分要求分檔次記分，最后閱卷組復(fù)核。有時要掌握靈活性，如對語言功底好的考生可以總體加7分，當(dāng)年一位考生的結(jié)尾這樣寫“Theforemostistoenforceestablishsomerelevantlawsandregulations，withstrongsupervisionoversomeshoppingwebsitesbeingreinforcedaswell.Then，theconsumersalsoshouldbeequippedwithmorealertincaseofbeingtrapd…”。由于其表達很地道，最后小組決定多加7分。

總體說來，教師與計算機結(jié)合閱卷有切實可行性，節(jié)省了時間和物力，最大限度地保證了大學(xué)英語四級考試的作文部分評分的信度，對其他全國統(tǒng)一的英語作文考試評分有一定的參考價值。

注釋

①吳斐.大學(xué)英語四級作文評閱的信度問題與對策[J].科教文匯，2009（11）.

②丁往道.英語寫作手冊[M].外語教學(xué)與研究出版社，1994.

③Gray.Hill 托福考試一本通[M].世界圖書出版社，2007.

④Jacob，G.M.，Bal，l.J.AnInvestigationoftheStructureofGroupActivitiesinEFTCourseBook[J].EFLJournal，1996（50）：99-107.