多模態語篇的視覺語法視角解讀
——以一則“亞投行”政治漫畫為例

陳　俊

(淮陰工學院 外國語學院，江蘇 淮安　223003)

?

多模態語篇的視覺語法視角解讀
——以一則“亞投行”政治漫畫為例

陳俊

(淮陰工學院 外國語學院，江蘇 淮安223003)

[摘要]文章以Kress和van Leeuwen的視覺語法理論為基礎，通過對《中國日報》的一則關于亞洲基礎設施投資銀行的政治漫畫進行視覺功能分析，探究其是如何通過視覺元素互動構建多模態語篇意義的。

[關鍵詞]多模態語篇；視覺語法；政治漫畫；“亞投行”

一、視覺語法理論及政治漫畫多模態語篇相關研究

模態是進行信息交流的途徑，它主要由語言文字、圖像圖形、顏色、聲音等多種形式和符號所構成的。顧曰國指出，“模態是人類通過感官(如視覺、聽覺等)跟外部環境(如人、機器、物件、動物等)之間的互動方式。用單個感官進行互動的叫單模態，用兩個的叫雙模態。”[1]綜合利用聽覺、視覺和觸覺等三個或以上感官，通過語言、聲音、顏色、圖像等多種符號模態創造和傳達意義的方式則叫多符號或多模態。因此，融合了語言、圖像、動畫、聲音等多種模態來表達信息的語篇是多模態語篇。[2]張德祿也對多模態語篇進行了定義，他認為，運用感官感覺如視覺、聽覺、觸覺等去進行交流交際的過程中，離不開語言文字、圖像圖形、顏色、聲音等這些多種模態形式和符號。[3]就交流交際的本質而言，其過程中所使用的話語是多模態的，只有這樣通過多種途徑、渠道和模態形式，才能實現將所要建構的含義和所要傳達的意思表達地更加清晰。潘艷艷也認為，對多模態語篇進行分析就是為了研究單個模態對話語意義的產生所起的作用，同時關注各個模態之間是如何實現互動的，從而使多模態語篇獲得意義。[4]多模態語篇分析主要以Halliday的社會符號理論和功能語法理論為基礎，Kress和van Leeuwen[2]將這兩個理論中的一些知識運用到視覺圖像這種社會符號分析中，提出了視覺語法分析的三個方面，包括圖像的再現意義、互動意義以及構圖意義。

政治漫畫屬于一種圖像與語言符號相結合的視覺方面的多模態語篇，因為政治漫畫一般是用圖像敘述故事，反映、揭露或批評、諷刺一些政治、社會現象，以激起讀者思考、反思為目的。同時，政治漫畫在以圖像向讀者傳遞其所蘊含的意義時，當然離不開語言文字所起到的輔助解釋、說明作用。否則的話，有時讀者僅看圖像本身可能會誤解創作者的本意或真實創作意圖。因此，就政治漫畫而言，圖像和文字相結合，共同敘事，共同構建，互動傳遞意義，兩者缺一不可。“圖像與文字之間是一種很明顯的互補關系，它們共同產生一種合力來體現圖像表征者和觀看者之間的互動。”[5]因此從這方面來說，政治漫畫是一種多模態語篇，是一種視覺元素與語言元素相結合的“合成品”。因此，“要解讀圖像，對多模態語篇進行分析，就必須把圖像中的文字與圖像結合起來進行整體考慮，既要關注圖像符號模態，又不能忽視圖像中的文字符號模態，同時還要‘密切注意’文字模態和圖像模態的協同、互動共同構建語篇的過程，只有這樣才能使多模態語篇的意義獲得最佳的解構。”[6]

目前，關于政治漫畫的研究主要集中在多模態隱喻、轉喻方面，從多模態視角對政治漫畫語篇文字模態、圖像模態等進行全面、整體的分析研究也較少。因此，對于政治漫畫這種以圖像為主，文字為輔的多模態語篇，要從視覺方面與語言方面進行全面、綜合的分析，結合Kress和van Leeuwen的視覺語法理論的圖像再現意義、圖像互動意義以及圖像構圖意義，來探討政治漫畫是如何通過視覺與語言的互動來共同達到構建意義的目的，解讀政治漫畫的視覺功能意義，從而揭示政治漫畫所蘊含的道理或所要傳達的特定思想。

二、政治漫畫的視覺語法分析

政治漫畫一般以原創的、比較詼諧的方式來反映現實生活中存在的一些社會現象，并試圖描寫、評論或諷刺這些現象中的事件、人物，解釋令人困惑的政治現象。如前所述，政治漫畫屬于一種視覺方面的多模態語篇，因為政治漫畫一般是用圖像敘述故事，反映、揭露或批評、諷刺一些政治、社會現象，以激起讀者思考、反思為目的的。政治漫畫在以圖像向讀者傳遞其所蘊含的意義時，當然離不開語言文字所起到的輔助解釋、說明作用。便于漫畫讀者(觀者)更好地理解漫畫，解讀、揣摩漫畫創作者的創作意圖，通過漫畫讓讀者(觀者)在某一方面引起其情感或立場的共鳴。政治漫畫這一多模態語篇是通過“模態的構建、意義的相互協同作用來共同創造出一個完整的語篇和交際事件”。[7]

本文通過一則關于亞洲基礎設施投資銀行(Asian Infrastructure Investment Bank，縮寫為AIIB，下簡稱“亞投行”)的政治漫畫從其再現意義、互動意義以及構圖意義分析，以探究其多模態語篇意義。這則政治漫畫發表于2015年3月25日的《中國日報》，作者羅杰，漫畫題目為《羨慕嫉妒恨》(見圖1)。

圖1　羨慕嫉妒恨

1.政治漫畫中圖像的再現功能解析

圖像的再現功能由敘事再現功能和概念再現功能兩個方面構成，Kress和van Leeuwen認為敘事再現是一個矢量，它是對發生的動作和事件、變化過程以及瞬時空間安排的表達。[8]概念再現是從類別、結構或意義方面來再現參與者。圖像中每一個矢量將參與者之間聯系起來，它表示著圖像參與者是在為別人做事或相互做事。圖像中的元素形成一種斜線，一般來說這種斜線被稱為對角線，即矢量，而矢量具有方向性的特點，具有方向性的矢量是完成敘事再現的一種典型特征。[7]

圖1中身材高大的“美國人”(從其頭戴由美國國旗圖案制成的禮帽，下身穿具有美國國旗特征的紅白相間的條紋褲子可以判斷他是美國人)正手持一碩大放大鏡從地球的一邊(美國本土)跨過半個地球注視著這邊(亞洲)的人們，他們正在喂養、呵護一頭“奶牛”，奶牛身體上標有AIIB字母。這讓漫畫觀看者想到“亞投行”，它是一個政府間性質的亞洲區域多邊開發機構。2013年10月2日，習近平主席同印尼總統蘇西洛舉行會談時提出了籌建“亞投行”的倡議；2014年10月24日，21個首批意向創始成員國的財長和授權代表在北京簽署了“亞投行”籌建備忘錄，決定共同成立“亞投行”。截至2015年4月15日，“亞投行”意向創始成員國確定為57個，但美國奧巴馬政府對該銀行至今仍然持反對態度，并且拒絕加入，其最主要原因是該銀行牽頭的是中國，美國擔心該銀行將與其主導建立布雷頓森林貨幣體系和以此為基礎的國際貨幣基金組織和世界銀行相抗衡，影響其全球金融領域的霸主地位。圖1漫畫中共有兩個矢量來進行敘事圖像再現。其中一個矢量是在“美國人”與“奶牛”及其周圍人群之間構成的，這是及物表示心理過程的敘事圖像。圖像中持放大鏡的“美國人”是感受者，亦可稱為再現參與者，在他對“奶牛”及其周圍人群注視的過程中，“美國人”面部表情非常憤懣，以至于在用放大鏡注視奶牛及其周圍的人群時，左眼的眼珠子都“飛到”放大鏡的鏡片上了，此處漫畫創作者運用了夸張的修辭手法，說明“美國人”十分關注“亞投行”，并且急切地想知道“亞投行”正在做哪些工作，哪些國家已經加入到該銀行。第二個矢量是由“奶牛”及其周圍人群對“美國人”而構成。然而在這一敘事圖像再現過程中，“奶牛”及其周圍人群絲毫未將“美國人”的注視放在心里，“奶牛”正在吃周圍人群喂給它的青草，周圍人群正忙碌著為“奶牛”準備著飼料，沒有人抬頭看一眼上方的“美國人”，這一舉動更加刺激著“美國人”的心理，使他越發氣憤。圖像中手持放大鏡的“美國人”應該是敘事圖像再現的突顯參與者，這是因為，整個圖像構圖中“美國人”占據較大的比例，處在整幅圖像中右上方的顯著位置，“美國人”圖像顏色鮮亮，且觀看者極易將目光聚焦到他身上。因此，綜合以上這幾個方面考慮，可以判斷“美國人”是該幅政治漫畫中圖像再現的突顯參與者。

2.圖像互動功能解讀

Kress和van Leeuwen認為，圖像之間的人際意義表現為一種互動關系。[8]這種互動表現為圖像中多個參與者之間的相互交流溝通，“即再現參與者(圖像中所描繪人、地、事)和互動參與者(通過圖像相互交流的人、圖像作者以及圖像觀看者)之間互動”。[7]由于漫畫創作者一般情況下是不可能與漫畫讀者(觀看者)之間形成直接互動，因此，漫畫讀者(觀看者)所看到的僅是漫畫本身。圖像只是一種情景再現，是參與者之間的互動，這種互動關系主要通過接觸、社會距離、情態以及態度四個要素來體現，讀者或圖像觀看者需要根據自己的經歷、背景知識、對現實中已發生或正在發生的事件的了解以及對一些政治人物的熟悉程度和自身所處在的社會、文化背景來解讀政治漫畫。

作為互動關系之一的接觸，就是再現參與者通過目光指向與圖像觀看者之間建立起來的一種想象性的接觸關系。[7]Kress和van Leeuwen認為，圖像能夠提供兩種信息，一是“要求”或“索取”，二是“提供”。[8]因此，在圖像中，如果圖像表征參與者的目光直視圖像觀看者時，那么圖像中的參與者是向觀看者索取信息，這類圖像稱為“索取”型圖像；反之，如果圖像中的表征參與者與圖像觀看者之間沒有這種目光接觸關系，這類圖像稱為“提供”型圖像。圖1中“美國人”手持放大鏡緊緊盯著下方的“奶牛”及其周圍人群，因此他所關注的是他下方的人群，更為重要的是關心被人群包圍、細心呵護著的“奶牛”動態，這點從“美國人”放大鏡所對準的角度以及放大鏡上被創作者通過夸張手法而畫上去的“美國人”的其中一個“眼珠子”可以分析出，“美國人” 特別關注“奶牛”，其次是“奶牛”周圍的人群，“美國人”與圖像觀看者之間沒有目光接觸，應該是“提供”類圖像，其所提供信息是“美國人”對中國倡導成立的“亞投行”極其關注、驚愕，對其他國家紛紛宣布加入到該銀行更是惱怒。

在視覺圖像交流中，由于社會距離的不同，圖像參與者與圖像觀看者之間的社會關系也存在著不同。社會距離指表征參與者與互動參與者間的距離，主要尺度有親近距離、個人近距離(遠距離)、社會近距離(遠距離)和公共距離等。圖1中再現參與者占據整個圖像大小二分之一，圖像觀看者可以看到再現參與者“美國人”除了腳以外的身體其他部分，因此顯示再現參與者“美國人”與圖像觀看者之間并非是親密關系，即作為再現參與者“美國人”與讀者(觀看者)之間是疏遠的人際關系。而對于圖1中左邊的“奶牛”及其周圍身著不同服飾、來自不同國家的人群，讀者(觀看者)能夠清晰地看到大部分人的全身，這些人在做什么事情或相互協作做事都可以清楚地看到，甚至圖像里面遠景中的一個人物他正一手拎著小水桶、一手拿著青草急匆匆向“奶牛”趕來也清晰可見，而且是全身圖像。這些都說明，無論是位于整幅圖像中右下方的成長中的“奶牛”，還是周圍穿著不同服裝、來自不同國家的人們，他們與讀者(觀看者)之間的關系應該屬于一種個人近距離關系。

態度是由圖像的視角來表現的，是對再現參與者持有主客態度還是客觀態度的一種表達方式，主要分為水平視角和垂直視角。水平視角由正面角度和傾斜角度構成。圖1從水平視角來看，總體上屬于正面角度，表明讀者(觀看者)與圖像中的參與者之間是一種平等的社會關系，其進一步說明了漫畫觀看者對圖像所描繪的事實、事件、人物感同身受，與該漫畫作者創作意圖持有相同的觀點和看法，而所持觀點和看法是圖像中“美國人”正時刻關注著“奶牛”即“亞投行”的誕生、成長、發展動態。垂直視角由俯視角度、平視角度和仰視角度構成。“俯視角度表示圖像觀看者處于強勢地位，平視角度表示圖像觀看者與再現參與者之間平等的人際關系，仰視角度表示再現參與者處于強勢地位。”[7]從垂直視角看，圖1總體屬于采用仰視角度構圖，表明圖像中的再現參與者“美國人”看上去讓觀看者覺得他處于強勢地位，這也說明奧巴馬政府在其心理上依然覺得自己仍處于全球金融領域的霸主地位。從這點來看，該政治漫畫也反映了美國政府雖然從其內心來講十分關注、遏制“亞投行”成立和壯大發展，但是也表現出美國奧巴馬政府的焦慮和無奈，同時說明了這樣一個事實，即中國經濟、中國的發展與崛起是不以人的意志為轉移的，是無法遏制的。

情態是互動意義中的一個重要元素，被分為三種程度：高情態、中情態和低情態，指對關注世界做出陳述的真實度或可信度。[8]圖1“美國人”身著紅白顏色相間、條紋形長褲，其圖案為美國國旗的右下角部分，上身著藍色西裝，這也是美國國旗左上角的背景色，頭戴由完整的美國國旗圖案制成的帽子。因此，整個“美國人”賦予圖像強烈視覺沖擊。而處在“美國人”注視下的“奶牛”、周圍人群、地球以及海洋，都采用不同的顏色，如“奶牛”為黑白色、周圍人群身著紅、藍、綠等衣服以及蔚藍的海洋和綠色的地球。圖像中運用更加飽和、不同顏色是具有更高的真實價值。[8]該幅圖像的畫面十分豐富，因此，圖1具有高情態值，極易引起圖像觀看者的關注和關心，同時這也使得圖像觀看者對圖像創作者提供的信息真實性和可靠性比較相信、贊同，能夠激起圖像觀看者在情感上、心理上與圖像創作者達到一種共鳴效應，從而實現了政治漫畫創作的初衷。

3.圖像構圖意義解讀

圖像的構圖意義主要指多模態語篇一種整體構架，是對語篇元素的空間次序安排，一般是指觀看者第一次接觸圖像時頭腦中所產生的對該圖像的整體印象。它通過信息值、顯著性或突出和框架三個方面讓讀者(觀看者)獲得整體的視覺印象，與前文所述的圖像再現意義、圖像互動意義共同完成圖像整體意義的構建。Kress和van Leeuwen認為，信息值的實現是通過圖像成分在整個圖像中的位置不同來進行的，處在圖像中不同區域的成分具有不同的意義，位于區域上方是“理想的”，下方是“真實的”。[8]左側的表示已知信息，右側表示未知信息或新信息。從信息值來看，圖1中“奶牛”、周圍人群、人們手中所拿的裝滿水的小水桶、人們手中所拿的“奶牛”愛吃的青草、地球圖案以及地球上的部分海洋都處于構圖位置的左下方，屬于已知信息，且是現實生活中的確存在的事實，即“亞投行”已經成立，這是不爭的事實，并且現在已有多個國家加入該銀行，而且目前發展勢頭良好；圖像中“美國人”處于整個構圖的右上方，是新信息，是信息最顯著部分，這使得觀看者目光更容易聚集在圖像中右上方的“美國人”身上，注視他正在做的事情，對于其他國家紛紛宣布加入到該銀行無可奈何。

從顯著性來看，被比喻為“亞投行”的“奶牛”以及身著不同服飾被喻為不同國家的人們被前景化，而且占據了整個圖像構圖的二分之一以上，圖像創作者想突出“亞投行”的重要性及其良好的發展勢頭的用意不言而喻；同時， “美國人”也被創作者以夸張的手法突顯出來，如圖像中“美國人”從地球的另一側拉長身體橫垮過來、他的一只眼珠“掉”在了其手持的放大鏡上，這些都是以最大的程度和顯著性來吸引觀看者的注意力。框架是指通過圖像中框架結構的出現或缺失來連接或分割圖像成分，反映圖像成分間的關系。[7]圖1中最突出框架“美國人”與“奶牛”分別作為一個信息的分割成分，也說明了這兩者間的不統一關系。

三、結語

本文根據Kress和van Leeuwen的視覺語法理論，從圖像再現意義、互動意義、構圖意義方面對來自《中國日報》的一則關于“亞投行”的政治漫畫進行了較為全面的分析、解讀。研究發現，政治漫畫《羨慕嫉妒恨》是敘事再現圖像。從互動意義看，圖1屬于提供信息類圖像，其所提供信息是“美國人”對中國倡導成立的“亞投行”極其關注、驚愕、羨慕，對其他國家紛紛宣布加入到該銀行無可奈何。圖像再現參與者“美國人”與“奶牛”處于強勢地位，情態值為高情態，使中西方觀看者相信信息的真實性、可靠性；從圖像的構圖意義來看，已知的、有關“亞投行”的信息，以及寓意美國政府的“美國人”和象征“亞投行”的“奶牛”，都以最大化的程度和顯著性來吸引觀看者，觀看者結合該漫畫的標題，將會對美國政府的真實意圖進行更加深入的思考。

本文就一則關于“亞投行”的政治漫畫做了一些討論，討論結果存在一定的主觀性，因此需要日后進行更為深入、系統地研究。

[參考文獻]

[1]顧曰國.多媒體、多模態學習剖析[J].外語電化教學，2007，(2).

[2]Kress，G.&T.van Leeuwen．Multimodal Discourse：The Modes and Media of Contemporary Communication[M].London：Edward Arnold，2001.

[3]張德祿.多模態話語分析綜合理論框架探索[J].中國外語，2009，(1).

[4]潘艷艷．政治漫畫中的多模態隱喻及身份構建[J].外語研究，2011，(1).

[5]孫鳳娟.多模態汽車警示語的人際互動意義探析[J].哈爾濱學院學報，2015，(11).

[6]Martin，J.Intermodal Reconciliation：Men in Arms[A].In L.Unsworth(ed.).New Literacies and the English Curriculum：Multimodal Perspectives Continuum[C].London，2008.

[7]吳安萍，鐘守滿．視覺語法與隱喻機制的多模態話語研究[J].外語與外語教學，2014，(3).

[8]Kress，G.&T.van Leeuwen. Reading Images：The Grammar of Visual Design[M].London：Routledge，2006.

責任編輯：思動

[文章編號]1004—5856(2016)08—0087—05

[收稿日期]2015-08-18

[基金項目]江蘇省大學生創新訓練計劃項目，項目編號：201511049046X；淮陰工學院科研基金項目，項目編號：HGC1418。

[作者簡介]陳俊(1977-)，男，江蘇漣水人，講師，碩士，主要從事認知語言學、多模態研究。

[中圖分類號]H0

[文獻標識碼]A

doi：10.3969/j.issn.1004-5856.2016.08.021

A Visual Grammar Study on Multi-modal Discourse——A Case Study on “AIIB” Political Cartoon

CHEN Jun

(Huaiyin Engineering Institute，Huai’an 223003，China)

Abstract：With Kress and van Leeuwen’s visual grammar theory as instrument，a political carton about AIIB is analyzed to explore the way that multi-modal meaning is constructed with the interaction of visual elements.

Key words：multi-modal discourse；visual grammar；political cartoon；“AIIB”