黃辛 于陳辰



【摘要】傳統的試題庫已不能滿足現代教育的要求,為更好實現標準化考試,高職院校公共英語需要建立一個以“網絡技術為基礎、適應高校學生學習特點與能力培養的試題庫管理系統。本課題探討以“項目反應理論”為理論依據建設試題庫,通過對網絡試題庫的實踐應用,總結了試題庫建設所取得的經驗和成果,以及存在的不足和今后努力的方向。
【關鍵詞】網絡試題庫 建設與應用 自主學習 理論依據
一、試題庫建設的必要性
1.傳統考試機制的弊端。以前,公共英語考試通常是由幾名老師根據《考試大綱》,以及教授的內容來擬定幾套考題,學校教務處再從中隨機抽取一套用于考試,一套用于補考,最后由全年級的老師共同以流水方式批改試卷。雖然這種傳統的人工命題和流水批改方式已在中國盛行了很多年,但是此種考試機制存在很多漏弊:
(1)傳統的人工命題在試題難度、題型、范圍等方面沒有一個科學的標準,有較多人為因素。如:教師的教學風格和命題方式將直接影響到試題命題結果,很難較全面、客觀、系統地考查學生對所學知識的綜合掌握情況;
(2)雖然英語作為一門公共必修課,大部分高職院校采取統一命題考試和流水批改試卷的方式在一定程度上考慮到了公平原則,但仍會發生個別命題教師在自己所授課的班級有意或無意地提示某些問題和重點題目的現象,這不但違背了公平、公正的考試原則,而且也無法反映學生真實的學習效果。
(3)許多學校的英語測試內容目前主要仍與教材內容掛鉤,只檢驗學生對課本知識點掌握的情況,忽視了對整個英語階段所應掌握的看、聽、讀、寫、譯等綜合能力的重視,這樣很容易讓學生覺得只要學習課本就能考試得高分,導致他們學習的功力性很強,對英語綜合能力把握不足,最終教學質量無法保證。
(4)傳統的人工閱卷一直成為教師們的困擾。譬如:紙質試卷評閱時因學生字跡潦草、書寫不規范而出現影響加分的問題;人工加分時可能出現的漏加、錯加分等問題;人工登分時,復查、簽名等繁瑣的程序也給教師們增加負擔;
(5)傳統的試卷一般是采購外部的試題,或由教委提供,但每所學校由于教學水平,教學現狀和教學質量要求不同,總會出現試題的考核內容與該校教學的實際情況相悖,這樣不利于提升該校教學水平和質量。
通過我校公外教研室自行研發、組建的試題庫可以按照我校的實際教學情況來命題,組卷和修改,更有利于指導公共英語教與學。
2.教育現代化發展的需要。隨著信息技術的發展以及高職院校計算機和網絡資源的豐富,用試題庫進行考試成為可能。現代化的考查方法與傳統考試手段相比具有極大的優勢,試題庫建設是試卷命題和組卷于現代化技術在教育發展中的重要體現。目前,伴隨著不少專業考試機構在發達國家的成立,適應大規??荚嚨脑囶}庫系統也孕育而生,我國教育考試題庫建設也已經提上曰程。
試題庫,即試題的倉庫,它是由相對獨立的試題構成。這些經過仔細篩選并附有參數的試題進行有機組合,可以編織成性質、難度、信度和效度各不相同的試卷。由此生成的試卷質量會更高,性能也會更穩定。這樣極大提高了命題和組卷的工作效率,做到靈活、經濟、高效,尤其適用于大規模的常態化考試,也同樣適應于高職院校公共英語終結性測試。
二、試題庫構建的基本理論
試題庫的建設經歷了漫長一段時間,在此基礎上發展起來的理論很多,最有代表性的是經典測量理論(ClassicalTestTheory),亦稱標準化理論(StandardTheory),和項目反應理論(Item ResponseTheory),其中項目反應理論是一種針對經典測量理論的局限性提出來的新興的教育測量理論。它將被測試者的能力水平與其在項目上的行為關聯起來,并將其參數化、模型化,所獲得的項目參數具有恒久性的特點,意味著不同測量量表的分數可以統一。
與其它理論相比,項目反應理論具有其獨特之處:
1.項目參數的估計獨立于被試組——這對大型題庫建設具有重要意義;
2.平衡試題的功能;
3.題庫的功能;
4.考生能力的估計獨立于測試;
5.測試的適應性功能。
雖然項目反應理論有很多優點,但在實際操作中卻沒有經典測量理論應用廣泛,這主要是因為項目反應理論的理論假設非常嚴謹,是構建于復雜的數學模型之上的測驗理論。對于教育工作者而言,現代應用技術和專業知識的結合在實際操作中也存在著一定的不足。隨著計算機技術的快速發展,項目反應理論模型中的各種計算都可以通過計算機的應用高效完成,使得以項目反應理論為基礎的計算機自適應考試逐步在社會各個方面得以應用。目前,國內以項目反應理論為基礎進行的試題庫建設還較少,對其的應用研究還處于探索階段,尤其是對計算機自適應測試題庫的研究還處于初級階段。
三、試題庫建設的構成及策略
為保證試題庫的科學性和有效性,高職英語課程性試題庫在組卷時應堅持遵循以下策略:
1.我們根據《高職高專教育英語課程教學基本要求》和《高等職業教育英語課程教學要求>(試行),以用人單位崗位(群)技能需求,對目標學生所需理論知識和必備職業技能進行培養為目標對教學大綱、考試大綱進行修訂。新的教學大綱和考試大綱緊緊圍繞學生就業崗位所需要的技能和能力,明確考核要點,列出知識點、考點。
2.以教材和過級試題(可以從已公開使用的基礎英語題庫中遴選試題,也可以從未公開使用但考過的公開的大學英語 二、三、四級試題中選題)為主要試題來源,主要測試教學大綱所要求掌握的知識點,指向性強。同時,難度應與學生實際水平相符,容易、中等、困難三個難度等級的題目各占一定比例。以我校為例,根據學生英語分層差異,選用了三種不同版本的教材和二、三、四級過級試題進行教學。在建立試題庫時,由命題小組依據教材和試題難易程度的不同建成三個單獨的試題庫。
3.嚴格分類,題型多樣,題量合適,切實體現語言學習的看、聽、讀、寫、譯等能力測試。以我校為例,英語試題庫題型設計由聽力、詞匯與結構、閱讀理解、翻譯等客觀題構成。每套題設計有聽力15個選擇題,分別為10個對話練習和一篇短文組成;詞匯與結構一共30個選擇題;閱讀理解4篇,其中一篇來自課文補充,另三篇來自過級試題;翻譯5個題;寫作由一個寫作在線測試平臺完成,不計入本試題庫。其中50%的試題來自教材,50%選自課外材料(難度接近二、三、四級試題),且課外材料主要分布在聽力和閱讀理解和部分翻譯題型中??荚嚂r間為90分鐘。
4.由具備高度責任感且經驗豐富的一線教師組成命題小組,嚴格篩選知識的重點難點,并經資深命題專家審題,確保進入試題庫的題目各項指標 (指難易指數、效度、信度、可區分指數等)都合格。測試項目保持相互獨立,且不重復考查同一個知識點,避免計算機隨機組卷時出現同一套試題多次考查同一知識點的情況。為此,命題小組成員間做好分工,各自負責不同的單元、知識點。編制試題完成后安排專人檢查,修改或刪除重復考點。
5.為了充分體現試題庫的科學性、公正性和可操作性,題庫總題量應盡可能多并且隨時更新。這樣在計算機隨機組卷的時候,可以更好地體現出差異化,更好地保證本次考試的保密性和安全性。
6.每個題都給出標準答案,以便計算機自動閱卷。同時當學生完成提交后,系統給出分數時,學生可任意調出整套試題,查看正確和錯誤試題,針對性的給與修改,為以后參加過級考試打下了良好的基礎。教師也可在后臺實現全面地動態連續監控,能夠有效地控制每個學生的考試過程、考試質量,并能得到數字形式的實時反饋,從而掌握總體做題情況,能夠及時發現問題,最大限度地實現對學生做題過程及結果的有效監控,為教師在復習期間的教學提供參考性建議。
7.利用計算機管理系統進行存貯。在計算機中建立相對應的高職英語試題的文字試題庫、語音和聽力試題庫、詞匯與語法試題庫、閱讀理解試題庫、翻譯(英譯漢)試題庫、答案及評分標準庫和相關的標準參數庫等試題子庫。
8.試題庫建設不僅涉及建立題庫、組卷等,還提供試卷效度、信度和項目區分度的分析,同時附有自動評分系統,每次測試后為師生提供分數分布曲線圖。這樣題庫將試卷生成、試題管理和測試分析、成績錄入、成績分析融為一體。既可以有力地提高試題庫的質量,也可以通過學生成績了解其掌握基礎知識情況,以便教師盡早發現教學過程中是否存在何題。
四、高職英語課程試題庫的應用與效果
1.應用情況。該課題進入試驗性階段,一類班進行“試題庫”演練,另一類班使用傳統人工命題方式演練。我校公共英語教研室與校內計算機專業教師合作開發的英語課程性試題庫建成以后,安排14C級5個班的學生到機房進行在線測試(其測試的樣題不會出現在正式考試中)。測試后,學生反映測試平臺界面友好,操作方便,且試題難度適中,題量合適。于是在2014-2015學年第一學期英語期末考試時,公共英語教研室與校教學管理部門合作,組織全校14C級學生參加了網絡在線測試。由于是計算機隨機組卷,學生無法猜題,教師也無法事先勾劃重點,只是在考前通知學生考試內容大部分為課本上學過的知識。測試結果顯示:認真復習的學生考了高分,嘗到了甜頭,增強了信心;不認真學習課本的學生考完后后悔不迭,決心以后上課一定要認真聽講,好好學習教材內容。測試成績的分析表明,在線測試的成績基本與學生平時表現相符,測試結果能反映學生對所學知識的掌握情況。
2.效果情況。以《高職高專教育英語課程教學的基本要求》和《考試大綱》為主要依據的課程性試題庫的建成以及計算機隨機組卷的實施,讓學生認識到提高英語學習效果除了課堂上專心聽講,離不開課下的不懈練習,方能取得良好的收獲!在2014-2015學年第二學期,在公共英語教研室的安排下,學生在空余時間能進入網絡在線測試中心進行有效練習。在期末進行網絡在線測試中,學生的成績普遍比第一學期更好。
C14-5參加“音標網絡學習平臺”訓練;而C14-15未參加“音標網絡學習平臺”訓練。C14-5班學生通過“音標網絡學習平臺”練習,經過正音和大膽開口說英語后,積極參加校內口語活動,如“外語文化周”中參加演講配音、歌曲比賽并獲得優異成績;參加“英語角”等,增加他們學習英語的自信心。
圖2反映的是C14-5班通過四學期“網絡試題庫”練習后和C14-15班經過傳統練習后,各學期參與二級測試的過級率比較。
C14-20在2014-2015期間,學生進行“網絡試題庫”練習,在第一次過級考試中,省二級過關率為:17.6%,三級通過率為:25.5%,還有4%的同學通過國家四級考試。
五、高職英語課程性試題庫建設的實踐意義
網絡試題庫建設是實現標準化考試的一項重要的基礎性工作。它的建立和應用,不僅可以全面客觀地評價學生學習的效果及教師的教學質量,減輕其負擔,促進教學水平的提高,而且也是教學管理工作規范化的有效途徑,具有突出的實踐意義。
1.適用于高職英語分層教學的考核。經過幾年的建設,高職英語應用能力網絡試題庫的題量豐富,題型多樣,各試題的技術參數齊備。可根據試題的技術參數來進行挑選,優化組合成內容、難度、題量等各不相同的試卷,使試卷符合預定的各項質量指標,保證測試的信度和效度,適用于對不同層次學生的英語應用能力進行考核。
2.提高教學管理水平,減少紙質測試管理的程序。測試是學校教學管理工作的一項重要內容。目前學校的階段性測試或終結性測試,一般都是由教師自主命題和制定評分標準,這樣就不可避免地帶有較強的主觀隨意,缺乏科學性和公正性,教學管理部門很難將這樣的測試成績作為標準來評判教學效果,而建立基于互聯網平臺的規范試題庫,把經過檢驗的信度高的題目按知識點、難易程度、題型、內容編成題庫,需要時可以直接從題庫隨機抽題組卷;同時根據教師各自的需要,使試題庫的數據生成不同的題型,對不同層次的學生進行測試,使教學管理工作更加規范,同時也減少了紙質測試管理的程序。
3.為師生教學與學習提供參考。網絡試題庫中的試題可作為學生平時練習和復習的工具。學生可通過測試平臺考查自己所學知識的掌握情況,以便查漏補缺,使自己的復習更有針對性,能全面地掌握所學知識。同時,題庫也可作為教師教學的參考,利用題庫對各種典型問題進行分析,再設置相應的試題供學生練習以提高學生的興趣和學習效果。還可利用計算機的分析功能,找出學生知識點掌握的薄弱環節,完善教學中遺漏點,以規范今后的教學工作。
4.減輕任課教師的負擔。編制試題是一項吃力不討好的工作。教師需要翻閱教材及大量的參考資料,既要考慮試題的難易程度,是否符合《考試大綱》和《課程標準》,又要考慮試題的信度、效度,是否符合學生實際情況,這些需要測試才能得到的數據,卻必須在測試前由教師苦思冥想估算而來,其難度是可想而知的。網絡試題庫的建立,為教師節約了寶貴的時間,保障教師有足夠的精力和時間改進教學方法,研宄探索,以提高教學質量。
六、結語
綜上所述,網絡試題庫的建設在理論研宄與教學實踐中發揮著相當重要的作用。英語學習的持久性特點決定了試題庫建設只有不斷地更新,才能滿足當今社會對高職學生英語綜合技能的發展需要。雖然,我國對英語試題庫建設的研宄開始的比較晚,但是令人可喜的是如今我國很多的試題庫項目有了長足的進展并且投入實踐運用。今后,我們應充分利用現代教育技術,整合多方資源,更加深入地研宄和建設課程性試題庫,不斷完善試題庫的內容和標準,進一步提高高職英語教學質量。
參考文獻:
[1]Ur,P.ACourseinLanguageTeachingIPracticeandTheo?ry |M].Beijing:ForeignLanguageTeachingandResearch Press,2000.
[2]教育部高教司.高職高專教育英語課程教學基本要求:試行[M].北京:高等教育出版社,2000.
[3]唐秀娟.大學英語期末考試題庫建設與研究[J].考試周刊, 2011,(5):3-L.
[4]王國鋒.大學英語課程性試題庫開發與應用初探[J].山東外語教學,2010,(2):63.
[5]教育部.關于全面提高高等職業教育教學質量的若干意見[Z]·教高〔2006〕16號文件.
[6]教育部高教司.高職高專教育英語課程教學基本要求:試行[M]·北京:高等教育出版社,2000.
[7]蔣曉燕.突出實踐能力考核的高職試題庫建設與應用[J]·職教論壇,2007(12): 55-56.
[8]李兆增.外語測試題庫理論及試題編制策略的研究[J].山東師范大學外國語學院學報,2002(1):95-98.
[9]張權.語言測試中的項目分析與等值技術[M].北京高等教育 出版社,2004:2.
[10]劉江鷹.項目反應理論在大學英語分級測試題庫建設中的應 用[D].長沙:湖南大學,2008:115.
[11]教育部考試中心題庫工作小組.談教育考試國家題庫建設[J].中國考試,2008(4):9-12.
[12]劉新平.劉存俠.教育統計與測評導論[M].北京:科學出版 社,2009:172.
[13]漆書青.題庫和題庫的建設與應用[J].湖北招生考試,2002 (10):6-8.
[14]李光明.如何做好題庫建設[J].中國考試,2011(12):3-8.
[15]教育部高等教育司.大學英語課程教學要求[M].北京:外語教 學與研究出版社,2007:1.
[16]鄧利蓉.論大學英語分級教學改革模式[J].四川教育學院學 報,2004(1):42-44.
[17]朱靖華.基于項目反應理論的計算機自適應考試系統的研究[D].長沙湖南大學,2008:2.
[18]夏船,王敏.大學英語考試網絡試題庫建設研究[J].現代營銷,2012(3).
[19]鄒申,陳煒.TEM4 評分效度與計算機輔助評卷[J].外語電化教學,2010(1):56-72.
作者簡介:黃辛(1977-),女,漢族,湖北宜昌人,成都紡織高等??茖W校外語學院講師,碩士,研究方向:英語語言文學。