社會符號學(xué)視角下的多模態(tài)話語分析

摘 要： 隨著科技、多媒體、數(shù)字化的發(fā)展，語言不再是意義的唯一表現(xiàn)形式，各種符號資源也成為表意的工具。克瑞斯和賴文在韓禮德系統(tǒng)功能語法的基礎(chǔ)上提出了多模態(tài)話語分析理論，創(chuàng)建了以“再現(xiàn)意義”、“互動意義”和“構(gòu)圖意義”為核心內(nèi)容的視覺語法。本文利用社會符號學(xué)視角下的視覺語法理論，對第16屆廣州亞運(yùn)會會徽進(jìn)行了多模態(tài)話語分析，從而揭示了圖像和文字是如何表現(xiàn)意義的。

關(guān)鍵詞： 社會符號學(xué) 多模態(tài)話語分析 視覺語法 第16屆廣州亞運(yùn)會會徽

1.引言

隨著數(shù)字化時代的到來，語篇日益凸顯多模態(tài)化，多模態(tài)話語分析成為了國內(nèi)外語言學(xué)家研究的熱點之一。胡壯麟指出，在人類進(jìn)入社會符號學(xué)的多模態(tài)化的新世紀(jì)，對多模態(tài)識讀能力的培養(yǎng)應(yīng)引起重視［１］。李戰(zhàn)子說：“圖像時態(tài)的到來，特別是圖像在媒體，教育和兒童文學(xué)中的大量生產(chǎn)，使我們無法忽視多模態(tài)，也不應(yīng)該認(rèn)為它比單一模式的話語低下而置之不理。”［２］Kress提出，所有模態(tài)都具有表達(dá)意義的潛勢［３］。

第16屆亞洲運(yùn)動會在我國廣州舉行，此屆亞運(yùn)會會徽以柔美上升的線條，構(gòu)成了一個造型酷似火炬的五羊外形輪廓，構(gòu)圖以抽象和具象相合，在靈動中不失穩(wěn)重，象征著亞運(yùn)會的火炬熊熊燃燒、永不熄滅，既體現(xiàn)了廣州的城市象征，又表達(dá)了廣州人民的美好愿望，還表現(xiàn)了運(yùn)動會應(yīng)有的動感。

本文從多模態(tài)話語分析的角度，以第16屆廣州亞運(yùn)會會徽為例，運(yùn)用視覺語法的研究方法進(jìn)行分析，進(jìn)而解讀圖像作為一種社會符號是如何產(chǎn)生意義的，并且揭示圖像和文字的表意功能。

2.理論背景

2.1多模態(tài)話語的普遍性

話語的多模態(tài)并非是一個新現(xiàn)象，而是人們一直以來在實踐甚至理論研究中總是趨向于關(guān)注一種模式而忽略其他模式，例如，朱永生認(rèn)為話語分析基本上局限在語言本身，即只注重語言系統(tǒng)和語義結(jié)構(gòu)本身及其社會文化和心理認(rèn)知之間的關(guān)系，忽視了諸如圖像、聲音、顏色、動漫等其他意義表現(xiàn)形式［４］。圖像建構(gòu)的意義，以及只有通過兩種模式共同作用才能表達(dá)的意義就被置于邊緣地帶或者完全被忽略。實際上，各種符號模式也參與意義表達(dá)，只是它們屬于意義構(gòu)建的不同層次。例如，“一圖抵千言”的俗語就側(cè)重單獨(dú)圖像意義的構(gòu)建，新聞報道中文字與圖片的結(jié)合則強(qiáng)調(diào)文字與圖片的互補(bǔ)性。“語言使用，不管是口語還是書面語，總是不可避免地由多種交際模態(tài)構(gòu)建”［５］，所以，“所有的文本都是多模式的”［６］。隨著社會的發(fā)展和科技的進(jìn)步，特別是隨著數(shù)字、網(wǎng)絡(luò)和多媒體技術(shù)的廣泛使用，傳統(tǒng)語法認(rèn)為是副語言的圖像、顏色、聲音和動作等符號在現(xiàn)代交流中不再處于輔助位置，而是正在和語言符號一起形成更為寬泛的符號資源共同參與構(gòu)建意義。

2.2多模態(tài)話語分析的社會符號學(xué)理論基礎(chǔ)

首先提出“多模態(tài)話語”的是克瑞斯和賴文。理論基礎(chǔ)是韓禮德系統(tǒng)語法功能中的相關(guān)理論。韓禮德在其《功能語法介紹》一書中主張語言是社會符號系統(tǒng)，提出了三大元功能，即表示概念意義的概念功能，表示說話人和聽話人之間的關(guān)系和說話人對說話內(nèi)容態(tài)度的人際功能，以及表示語篇構(gòu)建意義的語篇功能。因此，多模態(tài)話語分析理論的社會符號學(xué)基礎(chǔ)即是把語言作為社會符號所具有的三大元功能延伸到除語言之外的其他符號，并把包括語言在內(nèi)的各種符號看作是各自獨(dú)立而又相互作用的符號資源，在分析語言特征的同時強(qiáng)調(diào)圖像、顏色、聲音和動作等視覺、聽覺和行為方面的符號模態(tài)在話語中的作用。Hodge和克瑞斯歸納出用以指導(dǎo)闡釋多模態(tài)話語兩個理論前提，并進(jìn)一步強(qiáng)調(diào)社會符號在社會實踐中的應(yīng)用，強(qiáng)調(diào)符號的動態(tài)表意功能［７］。由此可見，社會符號學(xué)為理解視覺化語篇提供了一個總的描述的語法。

2.3視覺語法

克瑞斯和賴文基本接受了韓禮德的系統(tǒng)功能語言學(xué)觀點，并且進(jìn)一步發(fā)展了自己的理論。克瑞斯和賴文指出多模態(tài)話語分析也是一個符號系統(tǒng)，每種模態(tài)（文字、圖像、聲音）在語篇中作為獨(dú)立的部分存在并產(chǎn)生意義；所有的模態(tài)系統(tǒng)組合，作為一個整體產(chǎn)生語篇意義［６］。克瑞斯和賴文在韓禮德三大元功能基礎(chǔ)上，主張圖像的社會符號性，認(rèn)為：“正如語言的語法決定詞如何組成小句、句子和語篇，視覺語法將描寫所描繪的人物、地點和事物如何組成具有不同復(fù)雜程度的視覺‘陳述’。”［６］他們將韓禮德的語法功能延伸到圖像分析，建立了以“再現(xiàn)意義”、“互動意義”、“構(gòu)圖意義”為中心的視覺語法理論框架，與韓禮德三大元功能一一對應(yīng)。

3.1會徽的圖像解讀

第16屆亞運(yùn)會會徽可以看作是一個由圖像、文字、顏色構(gòu)成的多模態(tài)語篇。整個語篇由意象、文字、顏色構(gòu)成，以紅色為主要基調(diào)，黃色和黑色搭配而成。意象的創(chuàng)作來自“五羊的傳說”，在會徽的意象中“五羊”被設(shè)計成四條跑道，又作火焰狀，意喻亞運(yùn)火炬，一直延伸向天空中的太陽。圖像下方是“16th Asian Games”和“Guangzhou 2010”，中西合璧；兩行文字均采用黑色，但是“Guangzhou 2010”采用粗體漢字字體，突出我國文化底蘊(yùn)的深厚。

3.2會徽的多模態(tài)話語分析

3.2.1再現(xiàn)意義

克瑞斯和賴文認(rèn)為再現(xiàn)意義包括敘事和概念兩大類，其中敘事的再現(xiàn)包括行動過程、反應(yīng)過程、言語和心理過程。概念的再現(xiàn)包括分類過程、分析過程和象征過程。李戰(zhàn)子［２］指出在圖片中，使圖中的元素形成斜線就形成矢量。矢量是敘事圖像的表示。敘事再現(xiàn)指圖像中參與者被連接起來后對相互做某件事。行動過程中最為突出的參與者可以通過尺寸、位置、顏色等判斷。克瑞斯和賴文認(rèn)為概念再現(xiàn)中分類過程是將參與者分為主從的過程；分析過程是分析顯性和隱性的過程；象征過程是關(guān)于參與者是什么或者意味著什么。

會徽中的主要意象基于廣州“五羊的傳說”，五只羊演化成了燃燒的火焰，一直伸向天空的太陽，隱含著行動過程的參與者；五只羊又可以理解成四條跑道，一直延伸到世界的盡頭，寓意了亞運(yùn)會的發(fā)展將永無止境；火焰、跑道的“目光”投向天空中的太陽，形成了反應(yīng)過程。在整個圖像中，“五只羊”是圖像中最突出的參與者，扮演者“主角”，用紅黃這種高飽和的顏色填充，強(qiáng)調(diào)了五只羊的化身——廣州人民將以最熱情的態(tài)度、最友好的方式傳遞亞運(yùn)社火的精神。

3.2.2互動意義

克瑞斯和賴文認(rèn)為圖像中包含圖像的制作者、圖像表征的事物、圖像的觀看者之間的關(guān)系，并提示觀看者對所再現(xiàn)的事物應(yīng)持的態(tài)度。在此過程中，有接觸、距離、視點和情態(tài)四大要素。克瑞斯和賴文將圖像的參與者直接看著觀看者的過程叫做“索取”，將圖像人物的展示叫做“提供”；距離主要包括親密、非個人、社會距離的展現(xiàn)；通過仰視、俯視、平視等不同視點展現(xiàn)權(quán)勢；情態(tài)與圖像的真實度和可信度有關(guān)，通過色彩飽和度、色彩、區(qū)分度、色彩調(diào)諧度、再現(xiàn)、深刻、照明和亮度八大標(biāo)志反應(yīng)圖像的“現(xiàn)實主義”。

此圖像是一幅“提供”類圖像，將亞運(yùn)會的理念通過會徽傳遞給觀看者。這是一幅近景圖像，觀看者可以清楚看到整幅圖像。會徽圖像以紅色為主色調(diào)，文字以黑色為主色調(diào)。在中國傳統(tǒng)色彩中，紅色表示喜慶、熱烈等情感；黑色表示莊重、肅穆等意思。使用紅和黑這兩種高情態(tài)的色彩，充分體現(xiàn)了廣州人民將以熱情的、嚴(yán)肅的、飽滿的精神狀態(tài)迎接亞運(yùn)會的到來。圖像下方的兩行文字直接告訴觀看者此會徽的用意，采用中英文的形式直接說明了亞運(yùn)會將在中國廣州舉辦，并且突出了亞運(yùn)會的國際性。舞動的廣州體現(xiàn)出亞運(yùn)會的動感。

3.2.3構(gòu)圖意義

“構(gòu)圖意義”對應(yīng)功能語法中的語篇意義，克瑞斯和賴文提出了構(gòu)圖意義中的三種資源：信息值、取景和顯著性。信息值是通過元素在構(gòu)圖中的放置實現(xiàn)的即空間位置。在克瑞斯和賴文看來，左邊的信息是已知的，右邊的是新的；上方的是“理想的”，下方的是“真實的”。中心與邊緣的差異與文化差異相關(guān)。取景指的是是否采用取景手段，用于變現(xiàn)圖像元素的有無。顯著值指元素吸引觀看者注意力的不同程度，通過被放置的前景或者后景，相對尺寸，色調(diào)值對比和鮮明度的不同來實現(xiàn)。

“理想的”是指它的信息是理想化的或概括性的實質(zhì)，它的信息是最顯著的部分；“真實的”是指更特定的信息，如細(xì)節(jié)等。在廣州亞運(yùn)會會徽中，被再現(xiàn)為火焰、跑道的五羊在圖像的上方，象征廣州人民奮發(fā)向前愿為亞運(yùn)會作出最大努力；“16th Asian Games”和“Guangzhou 2010”被放置在下方，它提供的信息細(xì)致、真實、可信。

4.結(jié)語

數(shù)字化時代下的語篇不再以語言為唯一的意義產(chǎn)生方式，各種符號資源（圖像、聲音、顏色等）都被廣泛用于語篇之中，因此，語篇呈現(xiàn)多模態(tài)化，對語篇進(jìn)行多模態(tài)話語分析顯得日益必要。本文通過利用社會符號學(xué)視角下的視覺語法理論，對第16屆廣州亞運(yùn)會會徽進(jìn)行多模態(tài)話語分析，發(fā)現(xiàn)圖像從“再現(xiàn)意義”、“互動意義”和“構(gòu)圖意義”三個方面構(gòu)建意義，意象、文字、顏色等各種符號資源共同產(chǎn)生意義，驗證了各種符號資源都是意義產(chǎn)生的源泉。

參考文獻(xiàn)：

［1］胡壯麟.社會符號學(xué)研究中的多模態(tài)化［J］.語言教學(xué)與研究，2007，（1）：1-10.

［2］李戰(zhàn)子.多模態(tài)話語的社會符號學(xué)分析［J］.外語研究，2003，（5）：1-8.

［3］Kress，G.Sociolinguistics and Social Semiotic［SA］.In Sobley，P.ed，London New York：Routledge，2001.

［4］朱永生.多模態(tài)話語分析的理論基礎(chǔ)和研究方法［J］.外語學(xué)刊，2007，（5）：82-86.

［5］Scollon，R.Levine，P.Multimadol Discourse Analysis as the Con-fluence of Discourse and Technology［SA］.In Levine，P.Scollon，R.（eds）.Discourse and Technology［C］.Washington，DC：Gergetown University Press，2004.

［6］Kress，G. Van Leeuwen，T.Reading Images.The Grammar of Visual Design［M］，London：Routledge，1996.

［7］Hodge，R.G.Kress.Social Semiotics［M］.Cambridge：Polity Press，1988.