2005～2012年英語專業四級完形填空題的考點效度分析

摘 要：本文以2005～2012年的英語專業四級完形填空為研究對象，運用李筱菊的考點效度理論對該部分試題進行了統計分析。結果表明：英語專業四級改革后，該部分試題以句子層次和語篇層次考點為主，側重句子及語篇意義的理解，并涉及語法和詞匯，符合新考綱的要求，考點效度較高。

關鍵詞：TEM4；考點效度；考點層次；考點因素

0 引言

英語專業四級（TEM4）考試的目的是全面檢查已完成英語專業基礎階段課程的學生是否達到了《高等學校英語專業英語教學大綱》所規定的各項英語專業技能要求。根據2004年新版的《高校英語專業四級考試大綱》，完形填空試題考試時間和總分比重不變，題量由原來的15題增加到20題。本部分采用多項選擇題，短文約250單詞，題材熟練，難度中等，填空的詞涉及語法和詞匯。該試題測試學生的綜合語言知識和能力。該題型在改革后的實際應用中試題效度如何？是否符合新考綱的要求？本文將對200～2012年的TEM4完形填空進行考點效度分析，以期為今后TEM4的命題工作提供參考。

1 完形填空試題的考點效度

考點效度的概念是由我國的語言測試專家李筱菊教授在《語言測試科學與藝術》一書中首次提出。我們現在最常用的完形填空題是“合理刪詞分題選擇”完形填空，信度，評分效率有保證，但是更根本的結構效度、使用效度、反撥效度等仍有待改進。而考點效度就是指命題者在命題時對所要刪除的項目進行分析考察，盡量提高刪除項目的語篇制約范圍的考點層次，充分發揮完形填空語篇語境的優勢，以便真正考查受試者綜合運用語言知識的能力。這也正是專四考綱中對完形填空這一題型的測試要求。李筱菊認為，考點效度主要包括考點層次和考點因素兩方面。考點層次可以分為4個層次，即單詞、詞組、句子和語篇層次。單詞層次最低，指光看單詞，無須看單詞之外的上下文就能決定填什么詞；詞組層次主要看要填的詞和它前后的詞的固定搭配關系，只要看空缺前或后的詞便能決定該填什么；句子層次指空缺需要填什么詞，本句之內就可以決定；語篇層次則是指空缺要填的詞要超出句子，在語篇層次上考慮才能決定。顯然，語篇層次考點的題目比單詞層次的考點更能測出受試者運用語言的真正能力。而且高層次的考點，在考高層次能力的同時，必然也考到低層次的能力，而低層次的考點卻不能反過來包含高層次考點要考的能力。因此，考點層次越高，意味著考點的效度就越高。

李筱菊認為，考點因素涉及三個范疇：語法因素、慣用搭配因素和意義因素。一個考點往往兼考兩或三個因素，但每個考點都有側重考的因素即焦點因素，以及附帶考到的因素。語篇層次的題目，側重意義因素的考查；單詞層次的題目，側重語法因素的考查；詞組和句子層次的題目，其考點的焦點可能是意義，慣用搭配或語法因素。同一層次中，以意義為焦點的題目同時能考到慣用搭配和語法；以慣用搭配為焦點的題目，也同時能考到語法；但是以語法為焦點的題目，卻不能反過來考到意義因素和慣用搭配因素。

2 考點效度分析與討論

根據李筱菊的考點效度分析方法，筆者對2005～2012年TEM4完形填空試題從考點層次和考點的焦點因素兩方面進行分析。以新考綱出臺后的2005 TEM4完形填空題為例，這里列出其考點分析結果（見圖1）。

由圖1可知，2005年TEM4完形填空20題中，語篇層次考點9個，占總數的45%，句子層次考點10個，占總數的50%，詞組層次考點1個，占總數5%。考點以語篇層次和句子層次為主，考點層次較高；就考點因素而言，考查意義因素的占總數的65%，考查詞組搭配的占30%，考語法的占5%。綜合這兩方面因素，2005年的專四完形填空試題以中高層次考點為主，側重對意義理解的考查，兼顧考查短語搭配和語法項目，符合新考綱的要求，試題的難度和區分度較好，考點效度比較理想。筆者對2005～2012年TEM4完形填空試題的考點效度和考點層次進行了統計，結果如下：

表1中的字母依次代表年份，單詞，詞組，句子，語篇和百分比。從該表可以看到，除了2006年有一道考查單詞層次的題外，其他年份都沒有單純考查該層次的題；詞組層次的考點在2005～2012年完形填空中所占的均值為20.6%，句子層次的為51.3%，語篇層次的為27.5%。由此可見，這八年的完形填空中，句子層次和語篇層次考點的比重較大，尤其是句子層次的考點，比重最大。從考點層次來講，語篇層次的比重越高，試題的效度就越高，就越能發揮完形填空試題的優勢：從語篇語境考查受試者運用語言的真正能力。因此，改革后完形填空的效度還有待進一步提高，命題人應爭取更多地突破句子層次，達到語篇層次，以發揮完形填空試題的優點。表2中的字母依次代表年份，語法，慣用搭配，意義和百分比。在表2中可以明顯看到，考查意義的考點因素比重最大，均值為64.4%；考查慣用搭配因素的比重次之，均值為22.5%，考查語法因素的比重最少，均值為13.1%。這些以考查意義為考點因素的題目，答案的確定往往取決于句子的含義，或者跨越段落甚至語篇，需要受試者通過閱讀上下文信息，綜合起來進行分析判斷。這樣的題目就能考查受試者的綜合運用語言知識的能力，效度也就較高。

綜合圖1，表1和表2，2005～2012年TEM4的完形填空試題以中高層次的考點為主，雖然語篇層次的考點比重在總體上沒有占到最大，但是以意義為考點因素的題目比例卻最大，題目涉及語法和詞匯，測試學生的綜合語言知識和能力；其中2005年的完形填空試題的區分度和考點效度較之其他七年更為理想。因此整體上改革后的TEM4完形填空試題的難易度適中，效度很高，命題符合新考綱的要求。

3 結語

本文運用李筱菊的考點效度理論，分別從考點層次和考點因素兩方面對2005～2012年TEM4完形填空試題的考點效度進行了分析比較，發現這一題型在這八年中以句子及語篇層次的考查為主，偏重對句子及語篇的意義理解方面的考查，同時也涉及語法及詞匯的運用，雖然整體上句子層次考點的數量較之語篇層次來講仍然較多，但該題型題目的設計符合改革后新的考綱要求，難易度適中，比較適合對英語專業基礎年級學生的考查，效度很高。就考點效度這一概念而言，命題者在命題過程中，應充分利用完形填空試題的語篇語境優點，突破句子層次，更多地設計語篇層次考點的試題，進一步提高試題效度，盡量體現這種題型的特點和效度。

參考文獻：

[1] 高等學校英語專業四級考試大綱修訂小組.高校英語專業四級考試大綱[M].上海：上海外語教育出版社，2004（9）.

[2] 顧曉微.TEM-4改革前后完形填空的考點效度對比分析[J].安徽工業大學學報社科版，2010（1）：81-83.

[3] 李筱菊.語言測試科學與藝術[M].長沙：湖南教育出版社，2001.

[4] 鄒申，楊任明.簡明英語測試教程[M].北京：高等教育出版社，2000.

作者簡介：沈艷靜（1983—），女，碩士，福建師范大學閩南科技學院助教，研究方向：為第二語言習得與測試。