我國多模態外語教學研究綜述

李文琪 李珊

摘要：本文基于多模態外語教學研究內涵和理論基礎，從歷年刊文量和研究內容的視角，對2009年至2018年國內中文核心期刊關于多模態外語教學研究載文進行統計與分析。分析結果顯示： 多模態外語教學研究論文數量略呈下降趨勢; 研究內容呈多維度特征;非實證研究較多，實證研究偏少;研究對象以高校外語教學為主?？傮w而言，國內多模態外語教學研究還處于初級階段。

關鍵詞：多模態;外語教學;綜述

doi：10.16083/j.cnki.1671-1580.2020.04.026

中圖分類號：H319 文獻標識碼：A 文章編號：1671—1580（2020）04—0110—04

一、引言

隨著信息技術的飛速發展和多元文化的相互滲透，多種形式的表達方式已經滲透到我們日常生活的方方面面。例如，越來越多的書籍帶有精美的印刷插圖和CD，而這些插圖和音頻資源極大地豐富了讀者的閱讀信息。電視廣告和新聞充分利用了聽覺和視覺的結合，通過圖像、文字、聲音和其他符號資源向觀眾傳達信息。由此不難看出，人們對新事物的感知方式正在悄然發生變化。人們不僅依靠文字來表達含義，而且還結合視覺、聽覺、圖像、色彩、音樂和其他多模態感知和交流方法來表達含義?，F代話語正變得越來越多模態化，傳統單一的讀寫能力已不能滿足讀者的需求。

同時，隨著數字、網絡和多媒體技術在教學領域的廣泛應用，教學信息交流和意義表達方法也逐漸多樣化，聲音、圖像、色彩等副語言積極參與意義的建構，使教學模式變得多模態化。幾乎每個學生都有很強的新媒體接受能力。如何培養學生的多元識讀能力，已經成為新時代教師在多模態教學環境中的新教學任務。

10多年前，歐美學者開始在教學領域應用多模態話語分析理論。而在中國，基于社會符號學和系統功能語法研究的不斷豐富和完善，學者們近年來才開始將重點放在教學領域的多模態研究上。因此，中國的多模態外語教學研究可以說是處于青年時期，教師們還需要繼續探索。本文對2009年至2018年在國內核心期刊上發表的46篇文章進行整理和歸納，希望能為國內多模態外語教學研究提供一些必要的信息。

二、相關概念及理論基礎

（一）多模態相關概念定義

1.模態的產生

人類在進化過程中，逐漸形成了5種穩定的感官，并由此產生了5種感覺，分別是視覺、聽覺、嗅覺、味覺和觸覺。正是這5種不同的感覺為人類提供了感知這個世界的5種通道：視覺通道、聽覺通道、嗅覺通道、味覺通道和觸覺通道。5種感知渠道的獲得分別促使了以下5種交際模態的產生：視覺模態、聽覺模態、嗅覺模態、味覺模態和觸覺模態（朱永生，2007）。

2.三個概念的區別

模式是指人們交流的渠道，如口頭模式、書面模式、電子模式等。媒介又稱為媒體，指的是語言交流時所使用的技術，如文本、聲音、圖像等。模態則是交流渠道與技術的結合，包括了語言、技術、圖像、顏色、音樂等符號系統（朱永生，2007）。

3.單模態與多模態

單模態是指在交際過程中，只用了一種感官，比如看書時只使用眼睛來閱讀文字。多模態則分為兩種，一種是同時運用多種感官來交際，比如人們在視頻聊天時需要用眼睛來看對方的圖像，用耳朵來聽對方的語言，用嘴巴來表達思想;而另一種則是只使用一種感官，但交際涉及了多種符號系統，比如同樣是看書，若書中既有文字又有圖畫，涉及了兩種符號系統，那么也可被稱為多模態運用。

（二）理論基礎

1.多模態外語教學理論

多模態教學研究開始于20世紀90年代，并在21世紀初期得到迅速的發展，形成了自己的理論體系和研究方法。1994年，新倫敦小組提出了“多元識讀”的概念，這是研究多元識讀能力的先驅。這一理論表明，由于科學技術的飛速發展，現代人只具有文字閱讀能力是遠遠不夠的。相反，學生非常需要了解組成多元識讀能力的五個部分，分別是語言成分、視覺成分、聽覺成分、手勢成分和空間成分。詳細地說，語言成分包括詞匯、隱喻、結構等，視覺成分包括顏色、角度、矢量、前景、背景等，聽覺成分包括音階、音樂、音效等，手勢成分包括行為、身體控制、情緒、運動等，空間成分包括生態、幾何和建筑空間（Gentle，Knight和Corrigan，2006）。

2.多模態話語分析理論

多模態話語分析主要是探討多模態話語的結構和功能，張德祿教授（2009）根據韓禮德的系統功能語言學理論和對大學英語課堂案例的研究成果，在《多模態話語分析的綜合理論框架探索》中，首先對多模態語話語分析研究進行了簡明扼要的綜述，然后在系統功能語言學的基礎上建立了多模態話語分析的綜合理論框架。張德祿教授將多模態話語系統劃分為五個層次，分別是：（1）文化語境層，（2）情境語境層，（3）意義層，（4）形式層，（5）媒介（實質）層。同時，他還研究了不同模式之間的關系，包括互補關系和非互補關系，以及非語言模態語法體系的建立和不同模態的語法結構如何實現概念意義、人際意義和語篇意義（譚美玲，2019）。

三、國內多模態外語教學研究統計與分析

（一）研究方法

本文采用文獻計量法和比較研究方法。在CNKI上，作者用“多模態”和“外語教學”作為關鍵詞，并在期刊類別中選擇中文核心期刊進行搜索。在檢索完所有多模態外語教學研究文章之后，作者對所有文章進行了總結和逐一篩選，共獲得46篇文章，構成了本文的主要研究對象。最后，根據論文的研究內容和發表時間，作者使用EXCEL表格對文章進行分類和統計。

（二）統計結果與分析

本文根據研究內容和發表時間對多模態外語教學研究文章進行了分類。多模態外語教學的研究數量總體上呈下降趨勢，從2009年到2018年分3個階段。從2009年到2013年為第一階段，該領域的研究呈迅速上升趨勢，占文章總數的一半。從2014年到2016年為第二階段，開始呈下降趨勢，但下降幅度較小，其數量仍接近總數的一半。從2017年至2018年為第三階段，多模態教學研究的數量已顯著下降，只有4篇文章，甚至沒有達到總數的零頭。

（三）主要研究內容

根據作者從CKNI中篩選出的46篇文章，多模態外語教學有六個研究熱點：多模態外語教學的綜合建設，語言能力培養，多元讀寫能力培養，多模式話語分析，多媒體輔助教學和多模態教材研究。

1.多模態教學綜合建設

從多模態外語教學綜合建設的角度出發，學者們進行了許多研究。李慶杰（2011）對大學英語課堂教學的一個優秀案例的描述展示了外語教學中不同模式的相互作用。楊劍英和杜平（2012）的研究表明，由于外語學習者的記憶系統和認知結構的影響，各種模式的不同組合會產生不同的認知負荷并產生不同的學習效果。因此，在外語學習的意義建構中，教學設計應遵循一定的原則。郭萬群（2013）根據大學英語課堂教學的互動性原則、多模態原則和跨文化原則，提出了大學英語課堂教學設計原則模型，稱為MAP教學模型。張德祿和丁肇芬（2013）將教學過程與教學目標聯系起來，并使教學過程能夠在多語言培訓框架的基礎上進行建模。陳爭峰、楊躍和曹志宏（2014）探索了如何利用教室、多媒體和互聯網的不同功能，在多模態和多媒體的環境下，優化大學英語課堂中教師與學生、教師與教材、學生與教材的平衡。馬利芳（2016）認為，在多模式話語的框架下，外語教學應堅持“以學習為中心”的教學理念，注重學生綜合應用能力的培養，有效地將信息技術與傳統教學方法相結合，最終促進外語教學質量的提高。張琳琳（2017）試圖將數字故事引入英語教學中，以引導學生完成英語創新實踐，總結和反思了不足之處，并提出改進建議。

2.語言能力培養

這里的語言能力包括聽、說、讀、寫、譯。從歷史演變的角度，康志峰（2012）探討了新時代三維多模態口譯教學的可行性、實際應用和最終效果，并提出了一種不同于傳統的“ 1 + 4”立體口譯教學方式。王蓮（2013）探討了多模態視聽教學模式對學習者學習態度、自主學習能力和學習效果的影響，并獲得了一種新的課堂教學策略。王娟和楊躍（2014）嘗試從語言學習的輸入源入手，引導學習者改變他們的學習習慣，并使用多模態突破日常教學各個方面的語言障礙。基于認知語言學理論，梁曉暉（2015）設計了一種具體的教學模式，用于培養各層次寫作思維。黃偉（2016）認為，多模態環境下的大學英語聽力教學活動可以提高學生的聽力理解能力和口語表達能力，并能促進學生的全面發展。許幸和劉玉梅（2018）從多模態理論的角度構建了一個五位一體的“時事訪談”預寫作項目。其研究表明，預寫作階段的多模態“時事訪談”實驗項目可以激發學生的預寫作動機，提高整體寫作水平。

3.多元讀寫能力培養

多元識讀能力培養作為多模態教學的長遠目標也引起了許多教師的關注。葛俊麗和羅曉燕（2010）對多元識讀教學方法進行了評價，并指出了其對我國外語教學的啟示。張德祿（2012）在已有研究的基礎上，發展了多元識讀學與教的模式，探索了多元識讀培養的學習模式和學習內容，最終建立了多元識讀培養的教學框架。張征（2013）探討了多模態課堂教學設計中的情境、意義、模態、媒體和其他元素的方法和原理，并提出了培養多元識讀能力的途徑和方法。張德祿和劉睿（2014）提出了英語課堂多元識讀能力培養的框架，認為口頭報告在英語課堂教學中的案例研究，對于探索日常課堂教學活動中培養學生的多元識讀能力具有重要意義。梁惠梅（2016）認為，教師可以采用雙管齊下的課堂教學和課外活動訓練模式，并將課內活動與課外活動有機地結合起來，有效地提高學生的多元識讀能力。宋英（2018）認為，構建“教學評估”三位一體的外語多模態能力訓練模式可以有效地提高大學生的外語多元識讀能力，可以幫助大學生克服經濟全球化、文化多元化和交流多模態化帶來的挑戰。

4.多模態話語分析

張德祿（2009）進一步探討了系統功能語言學理論，為多模態話語分析和研究提供了理論框架，并為現代媒體技術條件下的外語教學實踐提供選擇有效教學過程和實踐的指導。張德祿和王璐（2010）發現，教學中主要涉及的是口語模態，而其他模態僅起到補充、加強和優化的作用。根據研究結果，他們總結了教師在教學中需要注意和改進的六個方面。劉秀麗、張德祿和張宜波（2013）根據教師的人格魅力和哲學理論，建立了一個理論模型，認為運用適當的多模態話語能激發學生的外語課堂教學學習熱情。鄭秀梅（2014）研究了多模態話語分析視角下高校外語課堂教學改革，為高校外語人才的培養提供理論參考。

5.多媒體教學研究

由于多媒體與多模態教學密切相關，并且對多模態教學有著很大幫助，這也成了多模態外語教學研究一個主要內容。張征（2010）研究了多模態PPT演示教學環境中大一非英語專業學生的學業表現變化情況。研究表明，多模態PPT演示教學可以提高學生的學習成績，有助于提高學生的短期記憶效率，但與長期學習成績的相關性不顯著。張征（2013）探討了多模態PPT演示教學在改變學生的學習態度和學生對該教學模式的態度方面的影響。其研究表明，多模態PPT演示教學可以讓學生的學習態度變得積極，并且大多數學生都接受這種教學模式。張振虹、何美和韓智（2014）介紹了使用Elan軟件構建大學公共英語多模態語料庫的方法和過程，并探討了這種小型的自建多模式語料庫在大學公共英語教學中的應用。

6.多模態教材研究

教材是一種非常重要的教學資源，因此，學者們也做過教材方面的一些研究。 張德祿和張淑杰（2010）討論了編寫具有多模態特征的外語教科書的原則。劉明和胡加圣（2011）運用多模態外語教學理論和相關認知理論，探討了多模態發展趨勢以及大學外語視聽教材的設計原理和技術特點，并在對現行聽力教材進行抽樣分析的基礎上，總結了多模態外語視聽教材中內容選擇的要求，最后提出了編寫多模態大學外語視聽教材的新思路和新建議。李鳳和李娜（2012）首先闡明了多模態外語教材的定義。其次，他們分析了多模態外語教材的特點：協同性、多維性、網絡化和智能化;最后，他們討論了在教育學、生物學、心理學和語言學領域編寫多模態外語教科書的基本原理。

7.其他

除上述研究熱點外，還有其他一些有關多模態教學的研究，涉及多方面的內容。張德祿（2010）探討了外語課堂教學中可能存在的教學階段以及每個階段的可選教學步驟和方法，最后討論了教學設計中模態系統的選擇原則。張維、劉曉斌和周榕（2012）研究了高中生對多模態英語語法教學的適應性。研究結果表明，多模態英語語法教學具有傳統語法教學所沒有的優勢。李廣鳳（2014）認為，在多模態外語課堂教學中，教師主要通過三種方式發揮作用來提高教學效果。華裕濤和馮宇玲（2015）簡要分析了外語教學中模態的選擇和文化輸入的方法。同時，他們還討論了多模態在外語教學文化輸入中的作用，通過合理選擇和運用多種模態，能提高學生的跨文化交際能力。夏穎（2016）以某大學的英語課程為例，在“開放與妥協”原則的指導下，設計了一套獨特的大學英語自主學習模式，并通過分級改革班一年的教學實踐，初步驗證了該模型的有效性。

四、國內多模態外語教學研究特點

（一）從研究方法角度看

在筆者分析的46篇文章中，僅有一小部分進行了課堂實證研究，并從實際教學效果中探索了多模態教學的經驗。因此，他們的研究基本實現了理論與實踐的結合，具有非常重要的實際應用價值和實踐指導意義。此外，大多數研究仍是非實證性研究，主要從宏觀角度探討多模態教學模式的構建，雖然具有重要的理論指導意義，但在研究方法方面，多模態外語教學研究處于一邊倒的局面，缺乏大量的實證研究檢驗理論層面的建議。

（二）從研究對象角度看

國內學者研究幾乎都集中在大學英語課堂教學上。因此，研究對象的范圍太過局限了。實際上，初中課堂和高中課堂，甚至是小學課堂，都需要更多的多模態外語教學來豐富教學內容和提升教學效果，讓學生真正地學習一種語言，而不僅僅是學習一些語言知識。

（三）從研究結果實際運用角度看

盡管多模態外語教學研究已經進行了近十年，并取得了一些成果，但一線教師在實際教學中并不經常使用這些成果，許多教室仍采用傳統的教學模式。因此，令人感到遺憾的是學生們無法分享到最新的科研成果。

五、結語

近年來，中國網絡信息技術和媒體技術的發展加速了多模態話語及多模態外語教學的研究。本文通過統計，梳理和分析2018年至2019年的46篇多模態外語教學文章，總結了國內研究的特點。統計結果表明，多模態外語教學研究論文數量呈小幅下降趨勢;研究內容呈多維性;非實證研究較多，實證研究較少;研究對象主要是大學英語課堂。本研究的局限在于對統計文獻的分析可能有遺漏或不完整，希望之后的研究可以對此進行彌補。筆者希望此次的文獻綜述能夠為學者們研究國內多模態外語教學提供一些幫助。

[參考文獻]

[1]Gentle， F. M. Knight， M. & Corrigan. Mutiliteracies and Information &Communications Technologies： Ensuing Information Access in the Classroomfor Students with Vision Impairment [EB/OL]. http：//www.ridbe.Org.au.2006.

[2]陳爭峰，楊躍，曹志宏.多模態、多媒體環境下高校英語課堂動態平衡模式探究[J].西安電子科技大學學報（社會科學版），2014（04）.

[3]葛俊麗，羅曉燕.新媒介時代外語教學新視角：多元識讀教學法[J].外語界，2010（05）.

[4]郭萬群.論間性理論視閾下的大學英語多模態教學與研究——兼論外語教育技術的哲學基礎[J].外語電化教學，2013（01）.

A Review of Studies on Multimodal Foreign Language Teaching in China

—— An Overview of the Publications with CNKI Journals in Latest Decade

LI Wenqi，LI Shan

（Chengdu University of Technology，Chengdu Sichuan 610051，China）

Abstract：Based on the studies of definition and theoretical basis of multimodal foreign language teaching， this paper conducts statistics and analysis on the research papers on multimodal foreign language teaching in Chinas core journals from 2009 to 2018 from the perspective of the amount of literature and research contents. The results show that the number of research papers on multimodal foreign language teaching has a slight downward trend; the research content is multi-dimensional; there are more non-empirical studies and less empirical research; the research subjects are mainly foreign language teaching in colleges and universities. In general， domestic multimodal foreign language teaching research is still in its infancy.

Key words：multimodality; foreign language teaching; review

[責任編輯：張麗麗]