中學英語教材中多模態的促學功能及教學對策

李桔元，楊賀

(1.廣州大學 外國語學院，廣東 廣州 510006；2.佛山市第三中學 初中部，廣東 佛山 528051)

在社會符號學看來，所謂模態，就是在社會文化中形成的創造意義的符號資源[1]。在人類交際中，語言是主要的模態，其它各種非語言符號，如圖像、手勢、動畫等屬于輔助模態。非語言符號不像語言，它們沒有詞匯語法，但是同樣具有語篇語義系統，而且這些非語言符號和語言符號一樣，其意義并不是固定的，而是在具體語境下建構意義的資源。隨著科學技術，尤其是數字技術的發展，人類生活和交際模式發生了深刻變化。單一的語言媒介逐漸由語言、圖像、聲音等構成的復雜媒介所取代[2-3]。讀圖時代的到來正影響著當代教育的發展[4]，引導著教學和教材的圖像轉向。

在多模態教學時代，是否具有解析和組構圖像的學習能力將直接影響著信息的交流傳遞，因而視覺素養的培養成為英語課程教學的一個新的必然要求[5]。《普通高中英語課程標準(2017年版)》(以下簡稱《新課標》)適應新的形勢，向高中英語學習者提出在多模態背景下應具備的理解性技能要求：“通過高中階段的學習，學生能理解多模態語篇中文字信息與畫面、圖像、聲音、符號、色彩等非文字資源傳達的意義。”[6]《新課標》明確強調英語教學應培養學生利用語言和非語言符號理解和表達意義的多模態意識和多模態識讀能力，進而培養學生多元讀寫能力。

教材是教學內容的載體，也是培養目標的體現。最新出版的中學英語教材大幅度增加可視化效果來訓練學生的讀圖能力和視覺素養[7]。為了更好地認識多模態教材，提高多模態教學的效果，本文以王薔教授主編的《普通高中教科書英語必修第1—3冊》(2019)(以下簡稱《新教材1—3》)為例，考察中學英語教材中多模態符號的促學功能，并提出使用多模態教材的教學對策。

1 中學英語教材多模態的促學功能

中學英語教材通過語言符號和豐富的非語言符號的有機結合，圖文并茂，生動活潑，從而大大促進英語學習。其促學功能體現為三個方面。

1.1 通過知識可視化促進學習認知

教材多模態實現了復雜知識的可視化。Eppler和Burkhard[8]首次提出知識可視化概念，認為它是研究在兩個以上人之間運用視覺表達手段提高知識創造和傳遞作用。簡言之，知識可視化就是運用視覺表征手段促進群體知識的傳播和創新，包括所有可以用來建構和傳遞復雜見解的圖解手段[9]。常見的可視化表征形式包括概念圖、語義網絡、矩陣圖、認知地圖、示意圖、時間線以及思維導圖和思維地圖等。作為可視化工具，這些圖解手段將抽象信息具體化，條理化，簡單化。如思維導圖有助于讀者提取文本關鍵信息，提煉知識要點，將內隱的、分散的文本信息變成外顯的、綜合的知識內容；思維地圖以圖像的形式將知識和信息進行組織和建構，以加強學習者對所學內容的理解和記憶，進而達到提高學習者學習效率的目的[10]。常見的思維地圖有八種類型：圓圈圖、起泡圖、雙起泡圖、樹型圖、括號圖、流程圖、復流程圖、橋型圖，分別可以起到不同作用，如對比、比較、分類、描述、定義等。從上述可知，教材實現多模態化，也就是實現知識可視化。多模態教材能提高學生對文本信息的分析、整合與概括能力。此外，各模態的呈現方式會使觀察者獲得不同的感官體驗，如排版和頁面布局，圖像的尺寸、亮度、色彩對比度、凸顯度以及文字的字體、大小、位置等都會影響學生的注意和認知。知識可視化自然會啟動學生的視覺學習。視覺學習的過程主要涵蓋了三種認知活動，即視覺注意、視覺感知和視覺思維。視覺思維更強調學習者通過頭腦對信息的圖化和想象，將抽象信息具體化，復雜信息簡單化、條理化[11]。

Paivio[12]的視覺與文字學習的雙層編碼理論與實驗結果說明，人們在學習過程中, 既對文字進行加工處理, 也對插圖進行加工處理, 而且兩者之間往往相互促進, 增進信息理解的準確性和延長保持時間[13]。在多媒體學習過程中，學習者有三種認知過程參與其中：選擇、組織和整合。首先，將文字信息和圖像信息輸入不同的處理中心；然后，將處理中心的不同種類的信息轉化為有待解釋的文字信息模型和視覺信息模型；最后，學習者將兩種信息模型整合，從而達到認知目的[13]。中學英語教材中的多模態實現了語言認知的雙重編碼，從而強化學生認知。

從上述可知，教材通過多模態將知識可視化，將內隱的復雜知識顯化，同時通過語言和非語言符號相結合實現對語言認知的雙重編碼從而強化認知。教材多模態對學生認知的促進作用是多維度的。

(1) 有助于預測語篇整體內容。如《新教材1》Unit 1 Lesson 3中，大寫加粗的藍色標題YOUR LIFE IS WHAT YOU MAKE IT異常醒目，兩幅實景圖穿插在文本中(如圖1和圖2所示)。圖1中，不同年級的小學生在同一個破舊的教室中上課；圖2描繪了一個名叫張天的陽光大男孩背著背包、手拿日記本站在簡陋教室中的場景。結合標題與兩幅圖像，利用圖文協同互動的方式，在單元主題語境下，學生可以很容易對文章大意做出預測，即該文是關于一個大學生在鄉村小學支教的故事。兩幅圖與課文標題的凸顯形式使學生的內容圖式和背景知識被激活，主動同化或順應頭腦中的已知信息結構，構建新意義，對文章大意和主要情節做出預測，做好閱讀或聽力準備。

圖1 鄉村小學復式教學課堂

圖2 支教大學生教師在鄉村小學

(2) 有助于理解文本具體內容。非語言模態可以使得復雜的文本信息條理化、清晰化、形象化，從而強化學生對文本內容的理解。例如，圖形表現手段比文本更能有效地促進文本與讀者之間的信息交流[14]。新教材讀后和聽后活動中有大量的圖表和思維地圖等可視化表征幫助學生迅速、清晰地了解文章整體信息和細節信息，如在《新教材3》Unit 9 Lesson 1 ACTIVE LEARNING的讀后活動中，練習4通過思維導圖將文字信息轉變為直觀清晰的可視化知識，圍繞核心主題的五個分支主題以及下一層級的各部分內容幫助學生簡明扼要地梳理出主動學習的五種方法及其緣由和結果(如圖3所示)，使學生在理解語篇整體內容的基礎上加深對細節信息的系統化和邏輯性認知。

圖3 主動學習讀后活動思維導圖

(3) 有助于理解語境意義。非語言模態彌補文本的部分細節信息，從而有助于學生理解文本之外的語境意義。教材中的圖像、圖表等非語言模態和文本等多種意義表征模式相輔相成，促進學生主動建構知識，深入理解文本內容。上文提到的《新教材1》Unit 1 Lesson 3中，文本并沒有具體介紹張天所在支教小學的教學條件和環境，而圖像則詳細描繪了這個小學的環境和條件：臟污破爛的土墻壁、木制的屋頂、陳舊的木制課桌、衣著樸素的學生、沒有教科書、沒有教學設備，這些細節詳細補充了文本內容，加強了學生感性認識。

(4) 有助于培養綜合思維能力。多模態教材中圖文并茂、顏色鮮明的思維導圖和思維地圖能引導學生思考、分析、概括、整理、比較并展示知識信息，學生和教師的關注點從知識深入到思維，促進學生綜合思維能力的不斷發展。如《新教材1》Unit 3 Lesson 2 SPECIAL OCCASIONS利用思維導圖激發學生思考參加婚禮或生日聚會需要準備的東西，中心圖用虛擬的大腦圖片繪制，三個一級分支分別用粉色、藍色、綠色繪制，接著繼續向四周發散出去，能夠有效拓展學生的思維空間，鍛煉發散思維(如圖4所示)。此外，思維導圖留有空白部分供學生進行深層次思考，給出個性化答案，思路不斷清晰的同時，學生的創新意識也在潛移默化中得到提升[15]。

圖4 參加婚禮或生日宴會所需準備之思維導圖

1.2 通過弱化“情感過濾”促進學習體驗

Krashen[16]認為情感因素對二語習得具有重要影響。情感過濾指的是阻礙學習者內化可理解性語言輸入的心理屏障。學生學習語言時，語言輸入內化為語言習得必須經過“情感過濾”這個心理屏障，心理屏障強的人，語言習得效果就差，反之亦然。對語言輸入起過濾作用的情感因素主要包括動機、興趣、自信心和焦慮。動機是促使學生在學習過程中克服困難的持久穩定的推動力，而興趣是激發學生內部動機的保障，二者相輔相成，所以興趣和動機是影響學習者二語學習效果的重要因素。自信心是對自我價值和知識水平給予肯定的一種積極的心理狀態。自信心強，不怕犯錯誤，利用一切機會和條件學習運用外語的學習者更容易取得更快的進步。焦慮是指個體處于緊張、煩惱或擔憂的狀態，高焦慮導致高情感過濾，語言“吸入”量減少，阻礙二語習得。

視覺作為一種特殊的話語形態，往往比抽象的語言更加具有直觀性和表現性，更容易影響認識主體的思想、情感和行為[17]。教材圖像拓展了使用者的審美活動范圍，將“讀”延伸到了“看”，增強了學生對語言描述的內容的體驗感。這種親臨其境的審美體驗，激發學生的想象，引導其正面情緒，刺激其積極反映。這種積極情感通過增強學習興趣與信心，減少焦慮，最終弱化學習英語的情感過濾，強化學習效果。

多模態教材由文字、圖像、視頻、聲音、圖表等多模態構成。其中，文字起主導作用，但同時與其它模態相互協作，豐富語言輸入形式，多維度刺激學生感官，激發學習興趣，增強內部動機。

首先，多模態教材不僅通過五彩繽紛、圖文并茂的排版以及拓展主題知識的視聽資源，悅目娛心，強化多模態的視覺功能，尤其是閱讀部分采用不同的背景色、多樣化的排版和頁面布局、生動多彩的圖像，配以特殊的印刷版式，如加粗、有色字體、大寫以及下劃線、斜體等，給學生帶來豐富的閱讀體驗，也有助于激發學生的好奇心和求知欲。例如，《新教材1》Unit 1 Reading Club 1 Teatime主要講述Afternoon Tea 和 Yum Cha，語篇以柔和的藕粉色為背景色，上方的圖片中粗獷的竹墊上，斑駁的石碗盛著清冽的山泉，青翠的嫩葉搭在碗邊，增添了一抹別致的綠意(如圖5所示)。紛紛擾擾，一葉茶，出一盞香茗，淡然寧靜，讓學生不自覺地就靜下心來品讀文章。

圖5 圖文并茂的茶文化介紹

其次，教材中的可視化工具，幫助學生對知識進行“精加工”。它將隱性、模糊、零散的“知識點”，變成顯性、清晰、系統的“知識網”，在“結網”的過程中，學生會體會到較強烈的有效思考的快樂及獲得明確成果的成就感[18]，進而有利于加強內部學習動機。如《新教材3》Unit 8 Viewing Workshop-SOLAR ENERGY 中，教材利用流程圖填空的形式幫助學生清晰地了解太陽能如何影響地球上的其他生命和人類生活，學生需要在看的過程中提取出關鍵信息，并根據流程圖對這些信息進行思考和整合(如圖6所示)。這一過程不僅需要學生具備一定的相關內容圖式，同時也要將已有的背景知識和視頻中的重要信息以及流程圖中的文字、流程線相結合，調動多種感官，對視頻中的信息進行分析和加工，自主體驗獲得知識的過程及其樂趣，享受學習，激發學習興趣和動機。

圖6 太陽能對生命和生活影響的流程導圖

1.3 通過顯性和隱性方式培養學習策略

學習策略包括一切有利于提高學習效率和學習質量的計劃、規則、技巧、方法及調控管理方式，它幫助學習者分辨、修正、存儲及使用信息，是影響學習效果的一個重要因素。學習策略既可以是內隱的規則系統，也可以是外顯的操作程序與步驟。教師培訓學生學習策略可以采取顯性和隱性方式進行，前者指直接教給學生具體的學習策略，后者指將學習策略培訓融入教學環節中，讓學生在課程學習中不知不覺地掌握學習策略。

教材中的多模態設計同樣具有對學生進行顯性和隱性學習策略培訓的功能。如《新教材1—3》每個單元中的Word Builder、Text Builder、Sentence Builder、Writing Help、Skill Builder、Unit Diary以及Peer Editing Sheet板塊，以便簽的形式，用雙引號、斜體、彩色字體、分行符、下劃線、不同字體等多模態印刷版式與文字協同互動，清晰醒目，為學生提供豐富的學習技巧與方法，幫助學生逐步培養學習策略運用意識和能力，發揮了顯性學習策略培訓功能。教師以教材中的多模態為依托，在實踐操作中通過對教材的處理和教學設計及多模態呈現方式，培養自主記憶、理解、分析、歸納、綜合等學習策略，這就是教材多模態發揮的隱性學習策略培訓功能。

2 多模態教學對策

《新課標》提出培養學生的多模態識讀和多元讀寫能力，要求教師在教學中將非語言模態的視覺符號當作語言教學的重要內容和對象[19]。多模態教材為教師提供了豐富的圖片和圖表等教學資源，然而，如果照搬教材內容，那么教師就僅僅是一個執行者，所以教師要善于利用教材中的各種符號資源設計教學，從教材的“執行者”轉變為教材的“設計者”[20]。教師多模態教學對策主要包括三個方面。

2.1 從文字模態轉向多模態教學

于福順[21]的調查發現，盡管教師認識到插圖對教學的重要性，但在實際的教學中，教師卻忽略了對學生“看”的技能培養。教師要主動培養多模態教學意識，創設多模態教學環境，從傳統的單一文字模態教學轉向關注各種非文字模態的意義分析。首先，充分關注非文字模態概念意義、人際意義、語篇意義以及不同模態間的相互關系[22]。非文字符號也像文字一樣，既能表達對客觀世界的描述，也能表達符號使用者對世界的態度，還能表征對語境中的語篇的組構意義。在具體的圖文關系中，圖像對文本能添加豐富的意義內涵。其次，在教學的具體環節中引導學生“讀圖”并整合“看”與其他技能的培養，促進學生在看圖過程中理解、分析、批判和創新的思維品質，發展學生獨立思考和解決問題的綜合能力[23]。

2.2 靈活利用教材多模態輔助語言教學

多模態學習像把雙刃劍，處理不好反而會分散學習者的注意力，發生對知識點記憶力的干擾，導致瞬間“熱鬧”而事后“空空”之感[24]。教師要掌握解讀非語言模態的規則和方法，分析非語言模態與語言之間的關系，挖掘其對文本學習的價值和意義，最大限度發揮多模態的教學價值。教師在設計教學時，應根據教學目標、教學內容和教學階段，從多模態教材中選擇最佳的模態進行必要的補充。例如，《新教材2》 Unit 6 Lesson 1 A MEDICAL PIONEER介紹了諾貝爾獎獲得者屠呦呦的基本信息及其主要成就。教材中的導入和讀前活動首先采用文本練習檢測學生對屠呦呦的了解情況，但對于內容圖式相對不足的學生而言，這種單模態較難引起他們的閱讀興趣，反而容易產生感官疲勞，因此，教師可以用一個有關瘧疾知識的簡短視頻或相關圖片對其進行替換，配以教師適當的口頭講解，使學生獲得清晰的系統化背景知識，做好閱讀準備。這樣，聽覺、視覺模態與語言模態相互配合，獲得最佳信息傳遞效果，從而提升學生的接受能力。

2.3 利用教材培養學生多模態自主學習能力

培養學生自主學習能力是新課標的要求，也是促進人終身發展的需要。因此，教師要以新教材中的各類學習內容和學習資源為依托，引導學生利用先進的信息手段主動學習、自主學習。例如，在設計《新教材1》Unit 3 Writing—An Event Description時，上課前教師可布置學習任務，要求學生閱讀活動2部分的文章，觀察教材中的兩幅圖片，學生自主學習并思考前兩個活動中所提到的問題，從而了解寫作任務的情景知識和基本語言表述，對如何用英語描述慶祝活動有一個初步認識。上課時教師利用課件引入寫作主題，接著留給學生足夠的時間，讓學生根據新教材中的思維導圖以及Sentence Builder自主分析文章結構，學習語言表達方式，教師適當補充，從而激活并豐富學生的語言圖式和內容圖式，為接下來的寫作輸出做好準備。

教材中多模態學習資源可以在學生自主學習的過程中充當腳手架。教師在設計教學時應該根據學生認知特點和需求，充分利用新教材中的多模態資源，為學生創造自我探索的實踐機會，培養學生自主學習能力，有效提高認知能力，加快知識內化進程。

3 結語

本文基于多模態交際的現實背景以及《新課標》對學生英語視覺信息素養的要求，分析了中學英語教材中多模態的促學功能及使用多模態教材的教學對策。本文的討論有助于教材使用者適應新的形勢，更好地認識多模態教材，從而科學地利用教材促進教學和學習，尤其是啟發教師充分認識多模態的優勢，靈活運用多模態，引導學生分析非語言模態信息的技能，發展自主學習能力。這在教師普遍忽略插圖的意義、忽略看圖能力培養以及忽略插圖與表達性技能培養的當下[23]，具有特殊意義。