全國國際商務(wù)英語聽力一級模擬題效度研究

　　摘 要： 基于Bachman和Palmer的任務(wù)特點(diǎn)框架，結(jié)合聽力理解的理論實(shí)際和考試大綱對聽力理解的要求，作者以《2009年版國際商務(wù)英語聽力一級聽力模擬試題》為對象，提出了內(nèi)容效度研究評估框架，從語篇輸入、預(yù)期回答和題項(xiàng)設(shè)計(jì)等三方面分析，并對模擬試題進(jìn)行同期效度檢驗(yàn)。最后根據(jù)研究結(jié)果為商務(wù)英語聽力模擬試題的設(shè)計(jì)提出建議。
　　關(guān)鍵詞： 《2009年版國際商務(wù)英語聽力一級聽力模擬試題》 內(nèi)容效度 同期效度
　　
　　一、前言
　　為提高考生應(yīng)試效率，考試模擬題目具有重要作用。一套模擬題必須能準(zhǔn)確地測試了它的測試內(nèi)容才具有效度，對應(yīng)試才具有積極意義。效度即考試的有效性，考試在多大程度上達(dá)到所考目的（李筱菊，2001）。上世紀(jì)六十年代，語言測試學(xué)家提出外在效度和內(nèi)在效度等八種測試方式。內(nèi)在效度指測試本身的效度，包括內(nèi)容和結(jié)構(gòu)效度。外在效度指利用測試外的標(biāo)準(zhǔn)驗(yàn)證，包括同期和預(yù)測效度。本研究以我院英語專業(yè)二年級學(xué)生使用的六套《2009年版國際商務(wù)英語聽力一級聽力模擬試題》（中國商務(wù)出版社，2008）為對象，從內(nèi)容效度和同期效度兩方面進(jìn)行檢驗(yàn)。
　　二、內(nèi)容效度分析
　　我參照Bachman和Palmer（1996）的任務(wù)特征框架，對商務(wù)英語聽力六套聽力理解試題三個(gè)部分（見表1）的語篇輸入，預(yù)期回答和題項(xiàng)設(shè)計(jì)進(jìn)行分析與討論。并結(jié)合《全國國際商務(wù)英語考試（一級）大綱》（下稱“考綱”）的聽力要求，確定分析框架。語篇輸入指題材、難度和語速，預(yù)期回答任務(wù)特征主要分析所考查的聽力技能，題項(xiàng)設(shè)計(jì)則考查題目設(shè)計(jì)（辜向東，2010）（如表1）。
　　1.語篇輸入
　　（1）題材
　　商務(wù)英語短對話和短篇聽力材料題材的覆蓋面較廣。按考綱，其主要涵蓋了商務(wù)活動(dòng)十二個(gè)方面和市場營銷六個(gè)方面的內(nèi)容。句子填空的題材以價(jià)格談判（37%）和接聽電話（27%）為主；短對話側(cè)重于工作流程組織和監(jiān)督（30%）；聽力短篇以市場營銷（27％）的話題為主。從整體分布上看，工作流程組織監(jiān)督，價(jià)格談判和電話接聽出現(xiàn)率明顯高于其他主題。
　　（2）難度
　　聽力短篇涉及難度分析，難度通常用易讀度來衡量。易讀度指語篇易于閱讀和理解的程度或性質(zhì)（辜向東、關(guān)曉仙，2003）。根據(jù)Flesch易讀度參考量表，易讀度值越低的材料越難理解?？荚嚧缶V對聽力選材難度沒有作細(xì)致要求。因此我根據(jù)公式Flesch統(tǒng)計(jì)六份聽力短篇的易讀度，并與2007—2009年商務(wù)英語一級真題聽力短篇易讀度進(jìn)行參照（見表2）。結(jié)果顯示，模擬題材料整體難度比真題低。其中只有第一套題目比較接近真題難度，而第2、4和6套題目則明顯偏向容易。
　　（3）語速
　　本文分析的語速是朗讀每套試題所有題型聽力材料（不含題目）的平均語速。計(jì)算公式為：每套試題聽力理解部分的平均語速（wpm）=不同題型聽力材料（不含題目）的總詞數(shù)（W）／朗讀這些材料的總時(shí)間（m）。統(tǒng)計(jì)六套題目朗讀的時(shí)間發(fā)現(xiàn)，聽力理解的平均語速主要集中在125—130wpm之間，與考綱要求的130wpm相符。
　　2.預(yù)期回答
　　考試大綱要求技能涵蓋：掌握要點(diǎn)和相關(guān)細(xì)節(jié)；領(lǐng)會(huì)說話人的態(tài)度、感情和真實(shí)意圖。我研究六套試卷后發(fā)現(xiàn)：第一部分全部題目均為細(xì)節(jié)考查；短對話和短篇理解部分（即2、3部分）則以考查“說話人的態(tài)度、感情和真實(shí)意圖”（65%）為主。整體看來，這三部分基本覆蓋了考綱規(guī)定要考查的技能，與考綱要求基本相符，而且考查技能分?jǐn)?shù)分配相對平均。
　　3.題項(xiàng)設(shè)計(jì)
　　題項(xiàng)設(shè)計(jì)的合理性同樣影響著考題的效度。對六套試卷的120道題目進(jìn)行分析之后，發(fā)現(xiàn)題目設(shè)置基本合理，考查技能全面有創(chuàng)意，但同時(shí)也發(fā)現(xiàn)題目的設(shè)計(jì)存在明顯問題。包括兩方面：（1）試題考查常識。如第三套第20題，問題詢問哪種人對購車有興趣，考生憑常識便可從成年人、青少年、汽車生產(chǎn)商和殘疾人中選出正確答案，并沒有考查到位。這種現(xiàn)象共出現(xiàn)兩次。（2）題目間透露答案信息。第二套第16、17題之間，16題已經(jīng)提出文章講述電話出現(xiàn)系列問題，17題D選項(xiàng)卻說還沒有安裝電話，明顯矛盾，因此答案明顯是D沒有被文中提及。
　　三、同期效度分析
　　同期效度是標(biāo)準(zhǔn)效度的一種。它是將考生在短期內(nèi)參加的考試和另一個(gè)公認(rèn)是標(biāo)準(zhǔn)化的考試進(jìn)行比較，然后計(jì)算兩者的相關(guān)系數(shù)，看它們的一致性程度（李筱菊，2001）。相關(guān)系數(shù)在0.7以上，說明兩者關(guān)系相當(dāng)密切；0.20以下為關(guān)系甚少（桂詩春，1986）。為了檢驗(yàn)?zāi)M試題的同期效度，我選用了2008年全真題作為標(biāo)準(zhǔn)，讓學(xué)生在短期內(nèi)參加這六次模擬題和一次全真題的考試，并分別計(jì)算出它們之間的相關(guān)系數(shù)（見表3）。表中系數(shù)顯示，這六套模擬題與標(biāo)準(zhǔn)化考試相互關(guān)系密切或有一定相互關(guān)系，基本具有標(biāo)準(zhǔn)化考試的特征。這說明第2、3和5套模擬試題還不能達(dá)到標(biāo)準(zhǔn)化考試的模擬實(shí)戰(zhàn)要求。
　　四、思考與提議
　　綜上分析，商務(wù)英語聽力一級六套模擬試題具有一定效度，基本符合考綱思路。選材廣泛，語速適中，考查技能平衡，但仍然存在局限性。為能提高模擬試題的作用，我從以下四方面提出改進(jìn)建議：第一，在題材方面應(yīng)考慮多樣化。工作流程組織和監(jiān)督，價(jià)格談判及電話接聽，市場營銷為高頻率出現(xiàn)主題，可增加實(shí)用性較強(qiáng)的內(nèi)容，如工作崗位和產(chǎn)品描述等。第二，大綱應(yīng)對短文聽力難度要求具體化。目前由于大綱沒有具體的聽力選材難度要求，因此會(huì)造成模擬試題難度偏離現(xiàn)象?？山梃b大學(xué)英語四級的考綱做法，對聽力和閱讀的選材難度要求細(xì)化，方可規(guī)范考試及相關(guān)模擬題。第三，題項(xiàng)設(shè)計(jì)應(yīng)該合理化。個(gè)別題目的設(shè)計(jì)應(yīng)嚴(yán)謹(jǐn)遵循語言測試設(shè)計(jì)原則，不斷完善，方能確實(shí)測出應(yīng)考者能力。第四，模擬考題注意科學(xué)化。同期效度不高，證明模擬題仍然有待提高。只有考綱不斷細(xì)化，才能更好地指導(dǎo)測試工作者對模擬試題和考試進(jìn)行完善。
　　
　　參考文獻(xiàn)：
　?。?］Bachman，L.F.，Palmer，A.S.LanguageTestinginPractice［M］.Oxford：OUP，1996.
　　［2］李筱菊.語言測試科學(xué)與藝術(shù)［M］.長沙：湖南教育出版社，2001.
　?。?］辜向東，關(guān)曉仙.CET閱讀測試與大學(xué)英語閱讀材料易讀度抽樣研究［J］.西安外國語學(xué)院學(xué)報(bào)，2003.
　?。?］辜向東.改革后CET聽力測試語篇輸入與預(yù)期回答任務(wù)特征分析［J］.西安外國語大學(xué)學(xué)報(bào)，2010，（4）.
　?。?］中國國際貿(mào)易學(xué)會(huì)商務(wù)專業(yè)培訓(xùn)考試辦公室.國際商務(wù)英語聽力（一級）（2009年版）［M］.北京：中國商務(wù)出版社，2008.