漫畫語篇的多模態(tài)分析

摘要多媒體時代的到來使語篇構(gòu)成呈多模態(tài)化。應(yīng)運(yùn)而生的多模態(tài)話語分析，逐漸成為語言學(xué)研究的熱點(diǎn)之一。本文以從韓禮德的系統(tǒng)功能語言學(xué)基礎(chǔ)上發(fā)展起來的視覺圖像語法為理論，以一例美國家喻戶曉的漫畫為分析藍(lán)本，進(jìn)行多模態(tài)話語的社會符號學(xué)分析，以期對讀者多模態(tài)識讀能力的提高有所幫助。

關(guān)鍵詞:多模態(tài)再現(xiàn)意義互動意義構(gòu)成意義

中圖分類號:J519文獻(xiàn)標(biāo)識碼:A

一引言

隨著多媒體和計算機(jī)技術(shù)的飛速發(fā)展，人類交際活動中多種符號同時出現(xiàn)的現(xiàn)象越來越突出，人類的語篇世界也呈現(xiàn)出數(shù)字化和多模態(tài)化的特點(diǎn)。那些以圖像符號為構(gòu)成元素、以視覺可以感知的樣式為外在表現(xiàn)形態(tài)的“視覺文化”，在20世紀(jì)80年代興起，圖文并茂的多模態(tài)交際手段開始蓬勃發(fā)展并沖擊著人們傳統(tǒng)的思維方式和欣賞習(xí)慣。

國內(nèi)外的大批學(xué)者紛紛撰文指出:在全球化背景下，視覺文化及視覺文化傳播，正在成為這個時代越來越重要的文化現(xiàn)象。在這個背景下，胡壯麟也指出，在人類進(jìn)入社會符號學(xué)的多模態(tài)化的新世紀(jì)，多模態(tài)識讀能力的培養(yǎng)應(yīng)引起重視。

漫畫主要由“畫”配以說明性的語言構(gòu)成，是一種圖文并茂、以圖為主、語言表達(dá)為輔的文學(xué)形式，是一種以“畫”為主導(dǎo)模態(tài)，語言符號為輔助模態(tài)的多模態(tài)語篇。因此運(yùn)用多模態(tài)語篇的分析模式對漫畫的語篇意義進(jìn)行分析，不失為一種較為全面和透徹的分析方法。

二多模態(tài)語篇分析的理論基礎(chǔ)

1、多模態(tài)語篇及多模態(tài)語篇分析

語篇的多模態(tài)觀(multimodal perspective)指的是各種符號資源(如有聲語言、形象、聲音、設(shè)計、動作等)共同參與我們?nèi)粘５娜穗H交往活動。在這種語境下，模態(tài)可以定義為參與交際的所有渠道和媒介，除了傳統(tǒng)的語言符號，它還包括圖像、顏色、音樂、技術(shù)等符號系統(tǒng)。這些模態(tài)的選擇和使用可以形成一種合力，共同引導(dǎo)讀者理解語篇和語境意義。

多模態(tài)語篇分析方法興起于20世紀(jì)90年代，以克瑞斯和凡利文(Kress and van Leeuwen)為代表。多模態(tài)語篇分析方法以系統(tǒng)功能語言學(xué)理論為基礎(chǔ)，嘗試把系統(tǒng)功能語言學(xué)對于語言研究的方法，應(yīng)用到其他的一些符號資源(如面部表情、手勢、圖像、音樂等)的研究上。多模態(tài)語篇分析是對一個語篇或一個交際事件(如一則雜志廣告的文本和形象，或者一部電影的影像、音樂和有聲文獻(xiàn)等)的幾個或所有不同符號模態(tài)的分析。多模態(tài)分析的目的在于把由這些不同交流模態(tài)所體現(xiàn)的再現(xiàn)意義、互動意義和構(gòu)成意義融合起來考慮，分析它們是怎樣共同協(xié)作，創(chuàng)造出一個完整的語篇或交際事件。

2、多模態(tài)語篇分析的功能語言學(xué)基礎(chǔ)

多模態(tài)話語分析從系統(tǒng)功能語言學(xué)那里接受了語言是社會符號(social semiotic)和意義潛勢(meaning potential)的觀點(diǎn)，認(rèn)為語言以外的其他符號系統(tǒng)也是意義的源泉;系統(tǒng)功能語言學(xué)對于語言研究的方法，同樣也可以應(yīng)用到其他符號資源(圖像，音樂，手勢)的解讀，其他符號資源同樣也具有語言的系統(tǒng)性和功能性。

在多模態(tài)語篇分析方法中，Kress and van Leeuwen 的研究最為突出和具有代表性。在將圖像也看作社會符號的前提下，他們將Halliday 功能語言學(xué)中的純理功能思想延伸到視覺模式，創(chuàng)建了以“再現(xiàn)意義”、“互動意義”和 “構(gòu)成意義”為核心內(nèi)容的分析圖像的視覺語法(the grammar of visual design)。其中再現(xiàn)功能(representational metafunction)對應(yīng)于概念功能，包括敘事的再現(xiàn)(narrative representations)和概念的再現(xiàn)(conceptual representations);互動功能(interactive metafunction)對應(yīng)于人際功能，涉及接觸、社會關(guān)系、態(tài)度三要素和情態(tài)(modality);構(gòu)成功能(compositional metafunction)則相當(dāng)于語篇功能。由此，系統(tǒng)功能語言學(xué)的理論開始被運(yùn)用到除了各種語言語篇以外的符號資源，如對視覺圖像、聲音、印刷體式、建筑設(shè)計、身體動作、電子媒體和電影等多模態(tài)交際手段的研究。

三多模態(tài)分析對漫畫語篇的解讀

本文試圖運(yùn)用多模態(tài)語篇分析的方法，分別對所選取的漫畫語篇的“再現(xiàn)意義”、“互動意義”和“構(gòu)成意義”進(jìn)行分析，以證明多模態(tài)語篇分析方法在漫畫語篇意義解讀中的重要作用。本文分析的漫畫摘自于美國著名的漫畫家Brad Anderson所創(chuàng)造的系列漫畫MARMADUKE。在這組系列漫畫中，MARMADUKE是Winslow家養(yǎng)的大寵物狗。漫畫作者賦予了MARMADUKE大量的其他寵物狗所不具備的希奇古怪的行為特征，從而賦予了這組漫畫一種既現(xiàn)實又虛幻的藝術(shù)色彩。

在我們所選取的這副漫畫作品中，冰箱、沙發(fā)，壁畫(概念再現(xiàn))等構(gòu)成了故事發(fā)生的特定背景——Winslow家的客廳。位于漫畫中心位置的女主人Dottie 正大步走向位于漫畫左邊的大冰箱，冰箱門大開，而MARMADUKE大半個身子鉆在冰箱里，只露出兩條后腿和不停搖動的尾巴。冰箱前的地面上則是由碗、碟、杯子和各種湯水組成的一片狼藉。此時，女主人Dottie 雖然整個身體是朝向冰箱，試圖去制止MARMADUKE，但她的面部卻是朝向圖像右邊沙發(fā)所坐的女人。從這個女人手捧茶杯的動作以及女主人對她的態(tài)度可以判斷，她是來Winslow家做短暫拜訪的客人。而在圖畫的下方有一行文字“Excuse me. I have to stop a raid on the refrigerator”。下面，我們將分別分析這副漫畫的再現(xiàn)意義、互動意義與構(gòu)成意義。

1、漫畫的再現(xiàn)意義

對應(yīng)于系統(tǒng)功能語法的概念意義，Kress and Van Leeuwen 提出了多模態(tài)語篇的再現(xiàn)意義。他們將再現(xiàn)意義區(qū)分為敘事和概念兩大類。其中敘事再現(xiàn)包括行動過程、反應(yīng)過程及言語和心理過程三類。概念再現(xiàn)則相當(dāng)于功能語法中所描述的關(guān)系過程和存在過程。而將敘事再現(xiàn)與概念再現(xiàn)區(qū)分開的唯一要素則是判斷圖像中有無矢量的產(chǎn)生。

在圖像中，矢量是代表過程與方向的力量，圖像中的參與者被矢量這條無形的線條相連，觀看者則可以通過圖像中的矢量關(guān)系判斷參與者之間的互動關(guān)系?！霸趫D片中，使圖中的元素形成斜線，通常是強(qiáng)烈的對角線，就形成矢量。矢量是敘事圖像的標(biāo)志。在敘事再現(xiàn)的行動過程中，動作者即為發(fā)出矢量的參與者?！痹趫D像中，他們通常最為突出。

在我們選取的這副漫畫中，位于圖像正中間的女主人是敘事語篇的主人公，也是矢量的主要發(fā)出者。她身體的正面與位于圖像左上角的冰箱形成一條無形的斜線，即矢量，表明了女主人此時的走向及所關(guān)注的東西:盡快阻止MARMADUKE對冰箱的掃蕩。

這個矢量關(guān)系構(gòu)成了敘事在現(xiàn)中的行動過程(action process)，女主人相當(dāng)于及物系統(tǒng)中的行為者(actor)，而冰箱和狗則充當(dāng)了行為的對象(goal)。而與此同時，女主人與位于圖像右下角、坐在沙發(fā)上的女客人面面相向，她們兩個的視線在空中成斜線相交，形成另一個矢量，這個矢量關(guān)系構(gòu)成了敘事再現(xiàn)的反應(yīng)過程(reaction process)。這個反應(yīng)過程表明了女主人與客人之間的信息交流與感知，也表明了女主人對客人的歉意，女主人相當(dāng)于反應(yīng)者(reactor)，而客人則相當(dāng)于現(xiàn)象(phenomena)。

2、漫畫的互動意義

對應(yīng)于功能語法的人際意義，Kress and van Leeuwen 在其視覺語法框架中，用互動意義表示功能語言學(xué)中的人際純理功能的含義。具休地說，互動意義是關(guān)于圖像的制作者、圖像所表征的事物(包括人)和圖像的觀看者之間的關(guān)系，同時提示觀看者對表征事物應(yīng)持的態(tài)度?；右饬x由四個要素構(gòu)成，它們是接觸、社會距離、態(tài)度和情態(tài)。這四要素分別自成體系，體系內(nèi)每個要素的變化和選擇都會最終影響圖像與觀看者之間的互動關(guān)系。

(1) 由“接觸”所體現(xiàn)的圖像參與者與觀看者之間的相互關(guān)系

在圖像分析中，接觸指圖像中的參與者通過其目光的指向與觀看者之間形成的一種想象中的接觸。根據(jù)圖像中的參與者與圖像觀看者之間有無直接的視線接觸，Kress and Van Leeuwen 將接觸分為“索取”(demand)和“提供”(offer)兩種關(guān)系。如果圖像的參與者與觀看者有直接的目光接觸，則表明圖像中的參與者向觀看者有所“索求”，如，信息、意見、評論、看法等，它是要求觀看者深度介入并參與到圖像表述的事件與活動中來。相反，如果圖像的參與者與觀看者沒有直接的目光接觸，則認(rèn)定他們之間不存在想象中的人際關(guān)系，是“提供”類圖像，圖像中的參與者就像是在櫥窗中展覽的標(biāo)本供觀看者欣賞、思考或娛樂。

在我們所選取的這副漫畫中，圖像中的參與者與觀看者之間均無直接的目光交流，因此，圖像中參與者與觀看者之間是典型的“提供”類接觸。由于漫畫是對現(xiàn)實生活的一種夸張型的再現(xiàn)，領(lǐng)略一件漫畫并把握它的深層意義，需要借助欣賞者的聯(lián)想、想象以及推理、判斷等心理過程，才能把握到它邏輯意義和情感意義。因此漫畫中所體現(xiàn)的“提供”類接觸為觀看者提供了充足的空間去品味與思考，使觀看者在輕松的氣氛中領(lǐng)略圖像中深刻的內(nèi)涵。

(2)由“社會距離”所體現(xiàn)的圖像參與者與觀看者之間的社會關(guān)系

圖像中參與者與觀看者之間的親疏關(guān)系，取決于圖像的社會距離。它通常與鏡頭取景的框架大小有關(guān)。親近距離:只看得見臉部、頭部;個人近距離:頭部和肩部;個人遠(yuǎn)距離:腰部以上;社會近距離:整個人;社會遠(yuǎn)距離:占據(jù)整個取景框架一半左右的整個人;公共距離:占據(jù)整個取景框架不到一半的整個人。正如社會關(guān)系影響社會距離，圖像中參與者取景距離的長短，則決定了參與者與觀看者之間的社會關(guān)系和社會距離。

在我們選取的這副漫畫中，漫畫的創(chuàng)作者采用的是社會遠(yuǎn)距離，觀看者可以清晰地看到畫面中參與者整個人以及周圍的環(huán)境。這表明漫畫中的主要人物與觀看者之間不是一種親密的私人關(guān)系，這種關(guān)系的確立也符合漫畫作為一種夸張的娛樂文化的特征。

(3)由“態(tài)度”所體現(xiàn)出的圖像參與者介入程度及與觀看者之間的權(quán)勢關(guān)系

視覺語法中的態(tài)度，指圖像觀看者與圖像中的參與者對所敘述事跡的介入程度及參與者與觀看者之間的權(quán)勢關(guān)系。圖像的態(tài)度通過“視角”來體現(xiàn)，表達(dá)對參與者所持的主、客觀態(tài)度。從水平的視角看，正面角度給觀看者帶來的是感同身受、融人其中的感覺，而傾斜的角度則表現(xiàn)出作為旁觀者的漠然與事不關(guān)己;從垂直的視角看，俯視代表觀看者處于強(qiáng)勢，仰視則代表了觀看者處于弱勢，而平視表示觀看者和參與者相對平等的關(guān)系。

在選取的這副漫畫中，觀看者與參與者是一種側(cè)面、平視的視角。圖像中的女主人略微傾斜的身體，表明了她作為漫畫中的參與者與信息提供者所具有的超脫介入，從而也為觀看者創(chuàng)造了一種輕松的氛圍。而創(chuàng)作者所選取的水平視覺，則說明了觀看者與圖像參與者之間平等的社會關(guān)系。

四 結(jié)語

與大眾的真實形象相區(qū)別，漫畫形象的虛擬性、夸張性和抽象性都更加決定了它是形象符號的集合體，具有超越本體指稱他意的功能，有著更深層的間接性和更深廣的意義。漫畫形象的許多造型充滿怪誕的意味，卻是引人注目最直接的因素。多模態(tài)語篇分析，為我們有效理解這些漫畫形象的象征意蘊(yùn)提供了新的途徑，而讀者則可以通過提高自身的多模態(tài)語篇解讀能力，更加充分的體會動畫形象的象征意味。

參考文獻(xiàn):

[1] 李戰(zhàn)子:《多模式話語的社會符號學(xué)分析》，《外語研究》，2003年第5期。

[2] 胡壯麟:《社會符號學(xué)研究中的多模態(tài)化》，《語言教學(xué)與研究》，1997年。

作者簡介:魏曉茹，女，1969—，河南偃師人，碩士，講師，研究方向:社會語言學(xué)、應(yīng)用語言學(xué)，工作單位:河南科技大學(xué)外國語學(xué)院。