周 橋
(成都職業技術學院 外語部,成都 610041)
四川省大學英語3級考試(以下簡稱SCET-3)是目前四川省針對高職高專學生的標準化語言測試,參與面廣,影響力大。對于英語學習者而言,閱讀是重要的能力之一。在各類英語考試中,閱讀測試起著至關重要的作用,SCET-3也不例外。無論從時間還是分值分配上來說,閱讀理解都是SCET-3的最重要組成部分;而且,根據考生答題情況,閱讀理解往往又是失分較多的部分。閱讀理解對于教師和考生而言,既是重點又是難點。因此,研究SCET-3閱讀理解試題,對于試題的科學命制,教學質量的提高具有重要的理論和現實意義。而且,在鮮有針對SCET-3閱讀理解試題進行研究,尤其是定量研究的背景下,為今后的研究提供了有價值的研究數據。
作為科學的語言測試,效度(validity)和信度(reliability)是2個最重要的衡量指標。“效度”是一種相關性,表明測試與測試目標的關聯程度,即考試是否檢測了需要檢測的東西,是否達到了預定的測試目的。通常認為“效度”有表面效度(face validity)、內容效度(content validity)、結構效度(construct validity)和經驗效度(empirical validity)幾個方面。其中“內容效度”是指測試內容是否反映了測試要求,即試題內容的代表性和覆蓋面,是樣本(試題)體現整體(預期測試任務)的程度。內容效度的衡量標準是考試大綱,從這個意義上講,內容效度就是指試題是否考查了考試大綱規定的需要考查的內容。
本文以此為依據,選取了近4年(2007—2010年,每年2次考試)SCET-3閱讀理解試題(共計32篇)作為樣本,以《四川省大學英語3級考試大綱》(以下簡稱“大綱”)中對閱讀理解試題的具體規定為依據,采用定性、定量相結合的研究方法,從題材、體裁、易讀度和閱讀技能考核4個方面對其內容效度進行了分析討論。

表1 題材分布
《大綱》對題材作了如下規定:題材包括傳記、社會、文化、日常生活、科普知識等,涉及的背景知識能被學生理解。對樣本的題材進行分析得出以下數據(如表1所示)。從表1可知:SCET-3閱讀理解文章的題材分布總體較為合理,通常涵蓋3~4種題材。其中,以社會、科普知識方面的文章居多,同時也適當選取了傳記、文化和日常生活方面的文章,基本符合《大綱》對題材選擇的要求。文章內容包括:大學畢業生找工作的寫作技巧,如何使用信用卡,青少年美容,地震預警,語言的消亡,防范網絡欺詐,老齡化社會等社會生活中考生們熟悉和感興趣的熱點話題,有利于激發考生閱讀興趣。文章題材泛而不偏,沒有出現過于專業或生僻的話題。保證了對不同專業背景的學生公平,體現了考試的公平性。因此,SCET-3近年來的命題從題材角度較好地保證了閱讀理解試題的內容效度。

表2 體裁分布
《大綱》對體裁作了如下規定:體裁包括敘述文、說明文、議論文等。樣本統計分析如表2所示。所選文章涵蓋了《大綱》要求的主要體裁,又以議論文為主,較好體現了《大綱》要求。但值得注意的是,高職高專教育有很強的職業導向性,在《高職高專教育英語課程教學基本要求》中對于閱讀有如下要求:能讀懂通用的簡短實用文字材料,如信函、技術說明書、合同等,理解正確。在絕大多數考生為高職高專學生的SCET-3閱讀理解試題的命題中,應該充分體現高職高專英語教學的要求和特色。據此,筆者認為應該選用一定數量的應用文體,如廣告、說明書、圖表和招聘啟示等。

表3 閱讀材料樣本易讀度對比

表4 理想的閱讀測試模式易讀度數值區間與樣本易讀度實際分布對比
易讀度(readability),也稱易讀性或可讀性,在閱讀測試和閱讀教材的選材、命題及評估中都有一定的應用價值。對文本的語言學特征進行量化分析是易讀度研究的主流[1]。本研究采用Flesch易讀度公式對樣本進行評估:易讀度=206.84 -0.85 × wl-1.02 × sl。(式中:wl指每100個單詞中的音節數;sl指每個句子的平均單詞數)。
《大綱》對于閱讀理解文章難度有如下規定:文章的難度不應超過3級閱讀材料,允許3%的生詞,影響理解的關鍵詞用漢語注釋。但是這一規定不夠具體、不夠詳細,缺乏一定的可操作性。因此,我們首先參照大學英語4級考試(以下簡稱“CET-4”)閱讀理解文章易讀度相關研究來確定SCET-3閱讀理解文章易讀度數值的合理范圍。根據陳柳青,辜向東、關曉仙的研究:CET-4閱讀理解材料的易讀度數值理想區間是50~60[2]。據此,SCET-3閱讀理解材料的易讀度數值理想區間應該是60~70。
采用Flesch易讀度公式對SCET-3閱讀材料樣本易讀度數值進行統計得出表3和表4。
通過表4可知,SCET-3閱讀理解材料的易讀度總體控制基本符合《大綱》要求,樣本易讀度平均值62.5,位于理想區間之內。但是,存在的問題也是顯而易見的。首先,樣本的易讀度實際分布與SCET-3理想的易讀度區間之間還存在較大差距。每次考試都有超出理想易讀度區間的文章出現。其中有5次考試都出現CET-6難度的文章,有2次考試僅有1篇文章的易讀度位于理想區間。命題者應該確保絕大多數文章的易讀度數值位于理想區間之內,這樣有助于更好地體現不同級別英語測試對于閱讀理解能力的不同要求。其次,樣本易讀度波動幅度偏大。平均跨越參考量表等級3.5,平均易讀度波動幅度高達21.41,最大一次甚至達到了32.71。僅有1次考試(1006)的樣本易讀度波動在理想范圍(平均跨越參考量表等級2,平均易讀度波動幅度10)之內,但這次考試的4篇文章卻僅有1篇在理想易讀度區間之內,其余3篇均屬于CET-4難度的文章。
因此,作為省級標準化考試SCET-3的命題者應該對上述問題引起高度重視,嚴格控制閱讀文章易讀度數值和波動幅度,使文章的難度更合理,具備更高的內容效度。
目前,大多數語言測試傾向于把閱讀能力分為高層能力和低層能力2個基礎部分,而它們又由各種不同類型、不同層次的能力構成[3-4]。《大綱》對于閱讀技能的考核有如下規定:理解句子水平的意義,理解字面意思和理解事實、細節的題量占70%;根據上下文邏輯關系、主旨大意、推理判斷的題量占30%。前者是對低層能力的考核,后者則是對高層能力的考核。據此,對樣本中共計160個閱讀技能考核題目進行了分類統計,詳見表5。不難看出,閱讀技能考核題目分布比例總體符合《大綱》要求,應繼續控制好題目分布并注意合理控制波動幅度。

表5 閱讀技能考核題目分布表
1)試題在總體設計上符合《大綱》要求,具有相應的內容效度,具體體現在:題材選取具有較好的廣泛性和代表性,涉及考生熟悉和感興趣的熱門話題。體裁以敘述文、說明文、議論文為主,符合《大綱》要求。在易讀度方面有所控制,基本符合《大綱》要求。在閱讀技能考核方面覆蓋了不同層次的閱讀技能,分布比例符合《大綱》要求。
2)SCET-3閱讀理解試題目前存在的問題也不容忽視。第一,在體裁方面應該結合高職教育的要求和特點涵蓋應用文體。第二,易讀度控制方面還存在較大問題,易讀度數值超出理想范圍的文章數量較多,易讀度波動幅度偏大。
作為針對全省高職高專學生的標準化考試,SCET-3具有較大影響力,其試題的命制無疑應該做到科學、嚴謹和規范。通過對試題中比重最大的閱讀理解試題樣本進行定性和定量分析,發現了值得命題者引起注意和需要改進的問題。
[1]晏生宏,黃莉.英文易讀度測量程序開發探索[J].重慶大學學報:社會科學版,2005(2):92-97.
[2]辜向東,關曉仙.CET閱讀測試與大學英語閱讀教材易讀度抽樣研究[J].西安外國語學院學報,2003(3):39-42.
[3]WEIR C J.Understanding and Developing Language Tests[M].New York:Prentice Hall,1993.
[4]WEIR C J.Language Testing and Validation[M].Pal grave:Macmillan,2005.
[5]劉潤清,韓寶成.語言測試和它的方法[M].北京:外語教學與研究出版社,2004.
[6]陸巧玲.CET-4閱讀理解內容效度分析[J].高教論壇,2008(5):110-114.
[7]王振亞.現代語言測試模型[M].保定:河北大學出版社,2009.
[8]四川省教育廳高等教育處.四川省大學英語二三級考試大綱[M].成都:四川大學出版社,2007.