基于Bachman和Palmer的測試有效性模型評析2017年高考英語全國卷I試題命題質量

摘 要：高考是中國教育體系中最重要的考試之一，而英語又是高考中的重要科目之一。因此，高考英語試卷的命題質量直接關系到學生的升學和未來發展。本文旨在分析2017年高考英語全國卷I試題，應用Bachman和Palmer的測試有效性模型評析該試卷的命題質量，并提出一些意見和建議。

關鍵詞：語言測試；高考英語；信度；效度

作者簡介：劉詩琪（1996-），女，四川江油人，中國民航飛行學院綿陽分院。

一、基本介紹

全國高考英語測試（NMET）是一種大規模的、有規范參考的高風險考試，對考生未來的學習和生活有很大的影響。因此，高考英語試卷的質量一直是一個有爭議的問題。人們擔心，NMET是否可以被信任作為決定考生未來的重要甚至唯一途徑。在文獻檢索過程中，筆者發現相關研究主要集中在以下幾個方面：第一，對NMET的某一個特定組成部分的研究；第二，測試策略研究；第三，全國卷與自主命題試卷的比較研究。然而，從整體上對高考英語試題進行評析的文獻卻很少。鑒于此，本文利用Bachman 和 Palmer的測試有效性模型對高考英語全國卷進行評析。首先對NMET進行概述，接著利用Bachman 和 Palmer的測試有效性模型評析NMET試卷的質量。

二、全國高考英語測試（NMET）概述

（一）考試目的

由“一核”為指引的高考評價體系，英語科命題堅持立德樹人，促進學生形成開放意識和獨立思考能力，以高等學校人才選拔的要求為依據，評估考生的英語能力，考試結果將與語文、數學等其他科目的成績一起作為高校錄取新生的依據。

（二）考試題型

目前，NMET的題型有聽力、閱讀、語言知識運用和寫作。表1對NMET的題型進行了匯總。根據表1，單項選擇題占總分的比例最高（66.7%），非單項選擇題占總分的33.3%。非單項選擇題分別是完形填空、語法填空、短文改錯和短文寫作，非單項選擇題中，短文寫作所占比例最大（16.67%）。

截屏2023-11-18 上午11.42.21

（三）閱卷

單選題直接由機器評分，而主觀題由人工閱卷。閱卷人員主要為高校教師、高中骨干教師等。此外，會有一組人負責監督閱卷工作，他們每半小時抽查一次閱卷人的工作。在評分之前，所有閱卷人員都要接受一天的培訓，學習如何遵循評分標準評卷。

高考實行電子閱卷的形式，答題卡經掃描后，由系統將答題卡圖片切割（無考生個人信息），每個閱卷人員只負責評閱一道大題，且評閱對象是隨機分配的。為確保評卷的公正性，人工評卷中主觀性較大的題目，如作文題采用多評形式，由兩人以上評閱，如果所給分數的差值在2分以內，他們將取平均分，如果兩人的評分差值大于規定的分值，則進行三評。如果三評后誤差仍然過大，則交由評卷組長處理（或者退回后，重新隨機安排其他閱卷人員評閱）。

三、基于測試有效性模型的全國高考英語測試（NMET）試卷評析

（一） 測試有效性框架概述

1996年Bachman和Palmer提出的測試有效性框架為評析測試提供了一個更加具體的模型，彌合了語言測試理論和實踐之間的差距。受Messick的統一效度框架的影響，Bachman和Palmer將“效度”這個傳統上以各種方式解釋和區分的復雜概念重新置于“測試有效性”的概念中，將測試評估的重點轉移到測試的預期用途和使用背景上。該模型包括測試有效性評估的六個標準（見圖1）。該模型已被廣泛應用于大量研究不同類型語言測試的研究中。

下面，筆者將基于此模型評析NMET試卷，重點關注其信度、結構效度、真實性。

（二）真實性

Bachman與 Palmer用目標語言使用任務（TLU）的特征與測試任務的特征的對應程度來測試真實性。Bachman認為，可以通過IA（交互能力方法）來分析確定測試真實性的兩個前提條件：一個是考生的特征；另一個是測試任務的特征。通過測試情景、測試項目和考生之間的交互性來衡量測試的真實性。交互作用越強，測試的真實性就越高。下面以2017年高考英語全國卷I為例，分析其真實性。

1.與現實生活相關的寫作主題。現在的高考英語試題更加注重英語語言知識、中國傳統文化和社會主義核心價值觀的整合，通過高考的反撥效應，在高中英語教學中拓寬學生的國際視野，培養學生的愛國主義精神。這種改進在寫作部分中尤為突出。本試卷寫作的題目要求是：“假設你是李華，正在教你的英國朋友Leslie學習中文。請寫一封電子郵件，告知下次上課的計劃。”學生可以通過這樣的寫作題目，提升自己的交際任務完成能力，能夠學以致用。本試卷閱讀文章的選擇結合了英語國家文化和中國文化。表2總結了本試卷的文章主題，可以看出，試題包含了大量的中西方文化元素和日常話題元素。這些元素貼合考生的認知水平，文章主題會吸引考生。Widdowson認為，語言的真正使用是語言使用者和他的話語之間的互動。這里的互動指的是考生在測試中參與的程度和類型。因此本試卷具有較高程度的真實性。

（三）考試信度

孫成崗指出，試卷的信度反映了測試結果與測試項目和考生之間的關系。人們普遍認為，如果所有考生某次測試中的分數相近，那么該測試的信度就不高。如果考生的分數有差異，則信度越高。也就是說，如果使用了高可靠性和中等難度的測試題，則可以區分不同語言水平的學生。

1.評分標準。

提高測試可靠性的關鍵是制訂科學合理的、易于實施的標準。以2017年高考英語全國卷I寫作部分的評分標準為例。

從這個評分標準不難發現，重點是對語法和詞匯等語言知識的規范使用，而不是寫作能力。閱卷者更喜歡標準使用語言的文章，但忽視了文本的邏輯和批判性思維，這將不可避免地導致教師采用以考試為導向的教學策略。例如，學生花時間去記憶不同的句型和觀點，這些句型和觀點可以用于許多寫作主題，即使沒有個人見解，也可能贏得閱卷者的青睞。這個不科學的標準極大地影響了測試的可靠性。因此筆者認為修改評分標準是提高NMET可靠性的方法之一。

2.閱卷者。

閱卷者也是影響可靠性的關鍵因素。命題者的命題意圖，閱卷者具備達到要求的語言能力才能完全理解。NMET的閱卷者來自不同的學校，閱卷者的水平無法完全保證。有一個詳細和全面的評分標準固然重要，但合格的閱卷者也是提高NMET可靠性的關鍵因素。因此，除了制訂可靠的試卷和評分標準外，還應重視對閱卷者的培訓，建立NMET閱卷人員資格認證體系是提高檢測信度的重要保證。

3.評分。從表1可以看出，在NMET試卷中，66.7%的測試項目是選擇題的形式，這樣可以避免評分的主觀性。同時，選擇題的答案將由機器自動評分，可以保證其可靠性。通過機器評分的方式自動屏蔽考生的信息，確保公平性和客觀性。其次，實時監控功能保證了評估的進度和質量。另外，通過自動評分和統計分析，避免了人工操作中可能出現的錯誤。

（四）考試的效度

Bachman和Palmer認為，語言測試的構念效度是指測試滿足理論要求的程度以及測試是否基于有效的語言觀點和語言學習觀點。本文以NMET的閱讀理解題為例，討論了其效度。

閱讀理解題全部是單選題，側重于訓練學生歸納總結、預測推理的能力。作為一種被動測試形式，單選題側重考查學生的閱讀認知能力，但對考查語言輸出方面有一定的不足。

第二，語言學習的目標是用語言來實現交際，完成某項任務。換句話說，語言作業交流的一種工具，用于完成不同的任務，但單選題通常很難評估學生的綜合語言運用能力，這可能導致學生可以得到一個好成績，但在現實生活中無法很好地應用英語。

第三，選擇題的廣泛使用帶來負面反撥作用，不利于提高學生的綜合語言運用能力。不難發現，排除法、猜測法等各種考試策略，一定程度上阻礙了正常的閱讀教學。教師和學生都更注重使用考試策略來獲得更高的分數，而不是提高閱讀能力。在測試中，即使考生不明白文章大意，也可以通過使用這些策略來選擇正確的答案。

Bachman認為，語言的學習不只是對語言知識的學習，更要掌握語言在語境中的用法。由于單選題具有局限性，NMET試卷中出現了七選五閱讀題目。其主要考查學生將文章內容與選項連接起來的能力。這種基于任務的閱讀可以測試學生對文章的理解程度，也可以評估學生從文本中選擇有用信息和完成任務的能力。因此，學生的語言輸入能力和輸出能力能被同時測試。這是一種高效的測試方式，具有較高的信度和效度。因此，在筆者看來，任務型閱讀的效度高于單純的閱讀單選題。

然而，NMET的目的是考查學生的英語綜合能力，目前的七選五閱讀只是要求學生從選項中選擇答案，主要考查學生對單詞、語法和搭配的理解，不利于NMET目標的達成。因此，閱讀測試的效度還有待提高。

四、結語

從效度、信度、影響、真實性四個方面來看，即使是最大規模的國家級考試，NMET的質量也沒有人們想象的那么高。盡管對高考英語試卷不斷進行改革，但仍然存在很多問題。“啞巴英語”仍然是當前英語教學的一大癥結，口語考查的缺失降低了考試的效度，也導致大多數考生甚至教師更愿意把時間花在做練習和掌握考試策略上，而不是語言的使用。為了進一步提高學生的英語語言能力，NMET仍然需要進一步改進。

參考文獻：

[1]韓寶成.語言測試：理論、實踐與發展[J].外語教學與研究，2000（1）：47-52.

[2]單筱筱，黃芳. 淺談2016年高考英語全國卷Ⅰ卷閱讀信度效度[J].亞太教育，2016（31）：42，19.

[3]吳數元.高考英語閱讀理解的應試策略分析與研究[J].英語廣場研，2017（11）：150-151.

[4]Bachman L F. Fundamental considerations in language testing[M]. Oxford： Oxford University Press， 1990.

[5]Bachman，L F ， Palmer A S Language testing in practice [M]. Oxford： Oxford University Press， 1996.

[6]Cheng Liying ， Qi Luxia. Description and Examination of the National Matriculation English Test[J]. Language Assessment Quarterly： An International Journal， 2006（3）：1，53-70.