多模態話語的社會符號學分析及意義構建

【摘 要】本文以Halliday的系統功能語言學上發展起來的視覺圖像分析語法框架為理論基礎，分析了湖南中醫藥大學新校徽的再現、互動和構成意義，從而指出其中的多種模態（如語言、圖像、色彩等）之間相互作用與意義構建，探討系統功能語言學理論分析視覺圖像的可操作性和可行性，以期提高讀者的多模態識讀能力。

【關鍵詞】社會符號學 多模態話語 意義構建 校徽 多模態識讀能力

【中圖分類號】H0-0 【文獻標識碼】A 【文章編號】1674-4810（2013）31-0003-03

一 引言

隨著多媒體和互聯網技術的飛速發展，話語不再以單模態的文本形式體現表意，更多的是以圖像、顏色、聲音和動作等多種模態出現來生成意義等。這種多模態話語使得人們之間的交際趨于多模態化和多媒體化的特點，并改變著人際交流方式和意義表達方式。而傳統的只分析語言和以語言分析為核心的單模態分析方法，因其難以全面系統地解釋意義的產生與交際，局限性日漸突顯。因此，在人類進入社會符號學多模態化的新世紀，多模態話語分析的出現，為話語分析提供了新的視角，極大地豐富了話語分析的研究手段。

近20多年來，語言學者以Halliday的系統功能語言學為基礎，把對語言社會符號性的研究重心轉移到圖像、聲音、動作等多模態的交際手段的研究。其中最具代表性的是 Kress van Leeuwen所構建的視覺圖像分析的語法框架。

多模態話語分析的意義在于它可以將語言和其他相關的意義資源整合起來，不僅可以看到語言系統在意義交換過程中所發揮的作用，而且可以看到諸如圖像、音樂、顏色等其他符號系統在這個過程中所產生的效果。本文將以視覺圖像分析語法框架為理論基礎，對2013年新啟用的湖南中醫藥大學校徽這一集圖像、文字和顏色于一體的多模態話語文本進行社會符號學分析，嘗試性地研究圖像和語言等多種符號模態的社會功能和意義，各符號模態如何共同作用構成意義的手段，從而說明多模態解讀對正確理解多模態話語含義和意義構建方面不可忽視的作用。

二 多模態話語分析的理論基礎

1.多模態話語

多模態話語是一種融合了多種交流模態（如聲音、文字、形象等）來傳遞信息的語篇。李戰子認為，多模態指的是除文本以外，還帶有圖像、圖表等的復合話語，或者說任何由一種以上的符號編碼實現意義的文本。胡壯麟指出，多模態話語就是由表達意義的兩個或兩個以上的單模態所構成的話

語。朱永生還提到了識別多模態話語的兩個標準：一是看涉及的模態種類的多少，即視、聽、嗅、觸、味“五個模態”；二是看涉及符號系統的多少。

Kressvan Leeuwen認為，語篇的多模態性是當今世界交際中使用的各種語篇的一個重要特征。在當今數字化的時代，各種交際模態在信息意義表征上日漸一致，因此，具有多技能的人應可同時進行和完成不同的交際形式，即具有良好的多模態識讀能力。

2.多模態話語分析

多模態話語分析（Multimodal Discourse Analysis）是上世紀90年代發展并活躍于西方的一種新的話語分析方式。它以系統功能語言學理論為基礎，是一種為融合多種交際模態（如聲音、文字、圖像等）的語篇組織傳遞信息，實現語篇元功能等多目的的手段和工具，其主要的分析方法是Halliday功能語言學的視覺圖像分析的語法框架，嘗試把系統功能語言學對于語言研究的方法應用到其他的一些符號資源（如面部表情、手勢、圖像、音樂等）的研究上，以克服傳統上只注重語言系統和語義結構本身及其與社會文化和心理認知之間關系的局限性。多模態話語分析為語篇分析提供了多種模式和方法，也為語篇中各種意義資源的整合和其各項社會功能的構建提供了理論基礎和實際指導意義。

3.多模態話語的社會符號學分析理論

語言是社會符號，包括語言在內的各種符號是各自獨立而又相互作用的符號資源，因此，在分析語言特征的同時，還應注重聲音、顏色、圖像和動作等視覺、聽覺和行為方面的符號模態在話語中的作用。系統功能語言學除了對各種語言語篇的分析外，還被應用到如視覺圖像、聲音、建筑設計、電子媒體和電影等語言以外的符號資源和多模態交際手段的研究。

以系統功能語法中的三大元功能——概念功能、人際功能和語篇功能為參照，把圖像也當成社會符號的前提下，Kress van Leeuwen構建了由再現、互動和構成三大意義為核心內容的視覺圖像分析的語法框架。其中再現功能對應于概念功能，包括敘事的再現和概念的再現，其中敘事的再現包括行為過程、反應過程以及言語和心理過程三類，概念的再現則相當于功能語法中所描述的關系過程和存在過程；互動功能對應于人際功能，涉及距離、接觸、視點三要素和情態，三要素能夠共同作用，創造出觀看者和再現內容之間的復雜、微妙的關系，而情態在圖像中的資源十分豐富，也是實現互動意義的重要組成部分；構成功能則對應于語篇功能，從信息值、取景和顯著性三項資源進行分析，信息值是通過元素在構圖中的放置實現的，取景指的是有無取景手段，顯著性指的是元素吸引觀看者注意力的不同程度。總之，Kressvan Leeuwen認為和語言一樣，所謂的模態（視覺的、姿態的、動作的）是在社會使用過程中形成社會資源的模態，所以符號資源都具有社會意義。

三 湖南中醫藥大學新校徽多模態話語的社會符號學分析

多模態話語分析認為所有語篇總是多模態的，因此多模態話語分析方法是一套多目的的工具，包括新的思維方式和分析方法。2013年新啟用的湖南中醫藥大學校徽集圖像、文字和顏色于一體，是一個多模態文本，可進行社會符號學分析。

1.校徽釋義

校徽外環為圓形圖案，融入全球化概念，校徽上部自左而右環繞標準中英文校名全稱，意在將中醫藥事業發展至全世界，外環上嵌入120個齒輪，既象征學校輝煌的歷史進程和傳承，也代表中國120急救電話，內環圖案以湖南中醫藥大學標志性校門為設計主體，與書籍式底托相互銜接，簡易通俗的表明教書育人的中醫行業和學校屬性，書本中間為一“中”字，由銀針和書法陰陽組成，體現中醫藥大學的專業特征和深厚的文化底蘊、學術積淀，學校名稱標準字體采用毛澤東書法，更加體現學校的湖南特色和中醫藥領域的權威。校徽整體采用標準紫檀色，既傳承中醫中藥基因，也代表中醫藥的發展、永恒，象征著湖南中醫藥大學熱情洋溢的精神和活潑盎然的生機。

2.校徽的社會符號學分析

湖南中醫藥大學校徽圖像由意象和文字組成。因此，可嘗試從Kress van Leeuwen提出的圖像再現意義、圖像互動意義和圖像構成意義三個角度對該圖像進行社會符號學的多模態話語分析，看該多模態圖像語篇中的文字、圖像以及顏色等各種符號模態如何結合并構建再現、互動和構成意義的。

第一，圖像的再現意義。圖像作為一種符號模態，能再現自身符號系統以外的實體和這些實體之間的關系，這就是Kressvan Leeuwen對應于功能語法的概念意義提出的多模態話語的再現意義。他們在解釋圖像的再現意義時把圖像區分為敘事的和概念兩大類。其中敘事的再現包括行動過程、反應過程及言語和心理過程三類，表達的是展開的動作，事件、變化的過程和瞬間的空間安排。概念的再現是圖像的類別、結構和意義，表達一種概括的、穩定的和沒有時間限制的精華，可分為分類過程、分析過程和象征過程。湖南中醫藥大學校徽實際上是一種概念圖像，下面看它是如何體現各種概念過程的。

李戰子認為，概念性圖像的再現意義的分類過程通過分類關系將參與者聯系起來，至少有一組參與者將對另一參與者扮演“從屬”的角色，其中一個關鍵的視覺特點就是從屬者之間的等同在視覺上是通過對稱的構圖實現的。在湖南中醫藥大學校徽圖像的意象中，標準中英文校名全稱左右對稱，中間校門、書本和“中”字字符兩相對等，而整個校徽是由三個外粗內細的標準圓環構成，這些參與者聯系起來共同體現了湖南中醫藥大學校徽的整體面貌。

在分析過程中參與者具有部分—整體的結構，參與者之一是承載者，即總體，參與者之二是任何數量的所擁有的特征，即部分。在圖像中，部分和整體并不總是配以同樣的凸顯度。在湖南中醫藥大學校徽中，承載者即湖南中醫藥大學，是總體，中英文校名全稱擺在凸顯位置，是觀看者關注的焦點；而參與者之二，部分，即校門建筑、書籍式底托、“中”字字符等，同時這些部分由大學中英文名稱環繞，最外圍又由三圓環包圍，這樣就突出了中醫藥大學的組成結構和整體框架，更清晰地展示了中醫藥大學的學術氛圍。

象征過程是關于參與者是什么或意味著什么。可以有兩個參與者——其中一個的意味或身份在關系中已經確認，即承載者；另一個參與者表示意義或身份，即象征性屬性。也可以只有一個參與者，即承載者。前一種叫做象征屬性，后一種叫做象征暗示。在湖南中醫藥大學校徽中，標志性校門、“中”字字符、書籍式底托以及三圓環的外觀結構都形成了一種象征：校門和書本外觀結合，隱含行動過程的動作者，象征著中醫藥大學教書育人的中醫行業和學校屬性；“中”字字符由銀針和書法陰陽組成，是一個象征過程中的承載者，象征中醫藥大學的中醫專業特征和深厚的文化底蘊、學術積淀，外環的齒輪象征著中醫藥大學輝煌的歷史進程與學術傳承。

第二，圖像的互動意義。在多模態話語中，與功能語法的人際意義相對應的是互動意義。韓禮德認為“互動意義是關于圖像的制作者、圖像所表征的事物（包括人）和圖像的觀看者之間的關系，同時提示觀看者對表征事物應持的態度。”在實現圖像互動意義時，有四個要素：接觸、社會距離、態度和情態，本文重點分析圖像的情態要素。

情態要素是互動意義的一個重要組成部分，它主要是指某種圖面表達手段（色彩、再現的細節、深度、色調等）使用的程度，指我們關注的世界所做出的陳述的真實度和可信度。圖像的情態以感官的編碼傾向為出發點，可以分為高中低三類。Kressvan Leeuwen從色彩飽和度、色彩區分度、語境化、再現、深度、照明和亮度等八個視覺標記探討了圖像中情態的現實意義量值的高低。情態中的每一個方面都可以看作是一個尺度，把這尺度和“感官編碼傾向”相互聯系，強調的是感官的愉悅（或不愉悅）。湖南中醫藥大學校徽采用標準的紫檀色，其屬于高飽和度色彩，代表著穩重、踏實、可依賴和永恒，有利于體現中醫中藥基因的傳承，也代表中醫藥發展的穩重、踏實和永恒，給觀看者一種安定、可靠的情感含義，產生對大學專業建設、教書育人、學科發展和職業前景的好感及安全感，具有高感官情態。

第三，圖像的構成意義。多模態話語的構圖意義即對應于功能語法的語篇意義。構圖意義包含信息值、取景和顯著性三種資源。信息值是通過元素在構圖中的放置實現的。任何特定的元素因其不同的位置具有不同的信息值，或“理想的”，或“真實的”。“理想的”指它是信息的理想化的或概括性的實質，因此它是信息的最顯著的部分。“真實的”指更特定的信息，如細節等，或者說更實際的信息。湖南中醫藥大學的校徽中英文名稱分別在圖像空間的上下位置，說明了中文名稱是概括性的實質，是信息的最顯著的部分，是“理想的”，而英文名稱是更特定或更實際的信息，是“真實的”，意味著在湖南中醫藥大學就讀能實現學子人生的理想，繼而實際地將中醫藥發展推向全世界，給全球人類帶來希望。然而中醫藥大學的中英文名稱相對于圖像中間的其他元素又是邊緣的，這也反映了邊緣的概括性名稱包括了中間的細節（校門、書本、“中”字字符），如此布局也體現了中醫藥大學各事物之間和諧融合的意境。顯著性指的是元素吸引觀看者注意力的不同程度，可通過被放置在前景或背景、相對尺寸、色調值的對比（或色彩）、鮮明度的不同等來實現，同時還受文化因素的影響。在中醫藥大學校徽中，“湖南中醫藥大學”七個字是采用標準字體毛澤東書法，字體是繁寫體粗體，一方面彰顯學校的湖南特色和中醫藥領域的權威，另一方面是突出體現中醫藥這一中華瑰寶的傳統性與獨到性，同時英文名字全部由大寫字母拼寫，字體采用Times粗體，代表著湖南中醫藥大學對于校名使用的規范性。粗體齒輪外環和常規細線雙圓環形成環環相扣的整體構圖，增強了校徽的層次感，蘊含著中醫特色的書本托起大學的標志性校門也表現出充分的立體感，吸引著觀看者的注意力。總而言之，校徽內聚性、外拓性、向下放射性凝聚了湖南中醫藥大學提倡的“文明、求實、繼承、創新”的校訓精神和治學理念。

四 結束語

本文以視覺圖像分析語法框架為理論依據，從社會符號學角度對湖南中醫藥大學校徽的再現、互動和構成意義進行了嘗試性的分析，進而探討了系統功能語言學理論對于分析圖像的可行性和可操作性。

參考文獻

[1]Halliday，M.A.K. Hasan，R.Language，Context and Text：Aspects of Language in Social-semiotic Perspective[M].Geelong，Victoria：Deakin University Press，1985

[2]Halliday，M.A.K.Language as Social Semiotic：A Social

Interpretation of Language and Meaning[M].London：Arnold，1978

[3]Halliday，M.A.K.An Introduction to Functional Grammar

[M].London：Arnold，l994：256

[4]Kress，G.van Leewen，T.Reading Images：The Grammar

of Visual Design[M].London：Routledge，1996：183；2006：59、117、148、149

[5]Kress，G. van Leeuwen，T.Multimodal Discourse：The Modes and Media of Contemporary Communication[M].London：Arnold，2001：2、59

[6]O’Toole，M. The Language of Displayed Art[M].London：Leicester University Press，1994

[7]Martinee，R. Cohesion in Action[J].Semiotica，1998（1/2）：161～180

[8]胡壯麟、董佳.意義的多模態構建——對一次PPT演示競賽的語篇分析[J].外語電化教學，2006（3）：3～12

[9]胡壯麟.社會符號學研究中的多模態化[J].語言教學與研究，2007（1）

[10]李戰子.多模態話語的社會符號學分析[J].外語研究，2003（5）：1～8

[11]朱永生.多模態話語分析的理論基礎與研究方法[J].外語學刊，2007（5）：82～86

〔責任編輯：肖薇〕