視覺環境下的多模態敘事語篇的元功能意義建構

摘 要：多模態語篇的圖像意義建構及多種模態在實現總體意義時是如何互動的一直是近年來多模態話語研究的熱點。本文以Clare Painter等在《解讀視覺敘事：兒童圖畫書的圖像分析》一書中提出的視覺敘事分析框架為理論框架，分析解讀研究對象繪本——以圖像、文字為組件的多模態敘事語篇中圖像概念意義、人際意義、組篇意義的建構。希望本文的分析對于解決近年來多模態語篇研究中的熱點問題有些許借鑒價值。

關鍵詞：多模態敘事語篇；視覺敘事分析框架；圖文版面布局框架；幾米繪本

1 引言

以往對于意義的研究多專注于對語言、言語這一單一符號模態或符號系統的分析。但是“意義并不是單純由語言來體現的，而是可以由語言之外的其他符號系統，或者多種符號系統共同來體現的。”（張德祿，2009）隨著對語言之外符號系統研究的深入，多模態話語分析、多模態意義建構等多模態研究方興未艾。繪本作為一種圖像、文字相結合的多模態敘事語篇，不同于海報、新聞圖片這樣單幅的多模態語篇研究對象，它是由多副圖像按一定順序共同構成的復雜的多模態敘事語篇。極具文學性和敘事性，相比立意較為明顯的單一圖像，繪本圖像的意義建構更難把握。本文以臺灣著名繪本家幾米的繪本《時光電影院》為研究對象，以Painter提出的視覺敘事的元功能分析框架為理論框架，分析繪本圖像的意義建構。希望本文的分析對于解讀幾米繪本，解決多模態語篇研究的熱點問題有些許參考價值。

2 《時光電影院》簡介

《時光電影院》出版于2012年4月，展現了臺灣著名繪本家幾米（原名廖福彬）對于生活和電影的熱愛。繪本以第一人稱“我”為視角，以電影院為支撐，講訴了一個有關親情、愛情和夢想的故事。主人公“我”是一個很小就失去了母親的小女孩。母親愛看電影，父親便常帶“我”去影院尋找母親的身影。青年，“我”在影院邂逅了初戀，他同“我”有著相同的興趣，但后來他要舉家搬遷至西班牙，分別時“我們”約定總有一天會在電影院重逢。畢業后，每當“我”在工作生活中感到疲倦迷茫，總能在影院中得到慰藉，在電影中獲得解決問題的答案，而后勇敢前行。再后來“我”在影院遇到了另一半，“我們”的戀愛婚姻像電影一般美好，只是人生聚散無常，“我們”沒能走到最后。離婚后，“我們”的孩子降臨了，童年的“我”在影院中尋找母親的影子，而她或許將在影院中尋找父親的影子?！拔摇钡娜松鷱奈措x開過電影院。

3 視覺敘事分析框架與圖像的元功能意義建構

視覺敘事分析框架受系統功能語言學影響，認為圖像同語言一樣是一種符號模態，具備與語言三種元功能相對應的概念意義、人際意義和組篇意義。本小節中筆者將介紹視覺敘事的元功能框架并基于此理論框架分析《時光電影院》繪本中具體圖像的意義建構。

3.1 圖像的概念意義

作為符號模態的圖像同文字一樣具有概念意義上的選擇潛勢，可以表征世界中的事物或事物間的關系。Painter將概念意義的表現形式歸納為三個子框架：人物表征（包括面部特征的完整表征與轉喻表征，轉喻表征指以人物圖像的某個特征代替人物整體），事件關系（包括事件展開順序和事件投射關系，展開分為先后順序展開和同時發生，投射分為真實事件投射和想象事件投射）和背景關系（指相鄰圖像之間背景不變和背景變化兩種關系，背景不變又分為視角不變的背景不變和視角改變的背景不變，背景變化分為變為其他背景和變為無背景兩種）。

關于人物表征在圖像概念意義中的體現，以圖1（1）為分析對象。首先由座椅上兩個人物完整的面部特征可知其分別表征女孩兒和男孩兒，又因兩人間距離較遠可知關系尚不親密。而樹上的兩個小人，則由翅膀、箭筒可知它們部分轉喻愛神丘比特，進而推知男、女孩兒將會發展成戀人。關于事件關系及背景關系在圖像概念意義中的體現，以（2）（3）為分析對象。這兩幅圖在繪本中左右相鄰，表征先后展開的事件關系。兩者的背景關系是變為其他背景的背景變化關系。（2）中由一排排的座椅、投影機光束和有相同表情的人得出圖像背景是電影院，（3）由飛機元素及飛機跑道元素可以得出背景是飛機場。由（2）至（3）可知兩人在飛機場道別前去了影院，盡管觀眾都在笑，兩人卻因分離之苦而默默流淚。

3.2 圖像的人際意義

圖像的人際意義包括讀者與圖像人物的及各圖像人物之間的互動關系。Painter提出三大系統來分析建構敘事圖像的人際意義：聚焦系統（包括互動和視角兩個維度，互動指圖像人物與讀者是有眼神接觸的接觸關系還是無眼神接觸的旁觀關系；視角指為讀者提供的視角是與圖像人物不同的客觀視角還是相同的主觀視角，一般主觀視角更易帶動讀者情感，引發情感共鳴）；情感系統（圖像表征的復雜抽象程度是設定讀者與圖像人物情感關系的繪圖策略，圖像越抽象線條越簡單，對讀者情感感染度越低，如“”的情感投入度就低于漫畫中的人物笑臉。情感系統包括情感介入和異化兩個維度，前者指圖像人物可吸引讀者投入情感且根據情感投入度的弱強將圖像分為鑒賞類、移情類和個體類三類，而后者指讀者無情感投入，閱讀中持客觀態度，如抽象圖表）；氛圍系統（顏色作為人際意義資源可構建情感基調，并分為未激活情感氛圍的黑白色和已激活情感氛圍的彩色，且可從色度、色調和自然度三個維度分析彩色可激活怎樣的情感氛圍）。

就聚焦系統而言，圖2（1）中讀者與圖像人物是有直接眼神接觸的接觸關系，而（2）（3）則是無直接眼神接觸的旁觀關系。此外（1）是引發主觀視角，即讀者雖然無法看到電影畫面，但卻可根據圖像人物表情、視線推斷出他們的視角。（2）（3）均是客觀視角，即讀者與圖中人物視角不同。我們可以通過對比感受到，圖（1）這樣有眼神接觸的主觀視角更易帶動讀者，引發情感共鳴。而（2）無眼神接觸的客觀視角，讓讀者有一種距離感。而這種距離感恰恰是作者想達到的效果，因（2）旨在描繪“我”獨自一人過生日的孤寂之情。關于情感系統，三幅圖均屬于移情類情感介入，即圖像人物的辨識度和情感投入度處于鑒賞類（如符號表情）與個體類（如真人照片）之間。就氛圍系統而言，（1）（2）背景色均是藍色屬冷色調，但（1）的亮度更高，給人一種興奮、活力之感。（2）的更暗，給人一種冷漠疏遠之感，表現了“我”的孤獨之情。（3）相較于（1）（2）其色彩自然度更高，色彩更豐富，更易拉近讀者與圖像人物之間的距離，給讀者一種與“我”一同向光前行之感，彌補了聚焦系統中無眼神接觸的距離感。而（2）背景是單一色彩，自然度低，給人以陌生感，近一步拉長了圖像人物與讀者間的情感距離，加深了“我”的孤獨之情。endprint

3.3 圖像的組篇意義

圖像中的各個元素同語言中的各個成分一樣，以不同的組合方式融合成為圖像意義整體。這些構圖方式就是圖像組篇意義的表現形式。Painter基于Kress提出的三個相互關聯的構圖意義的維度：信息值（即視覺語篇中，不同的圖像元素的位置給予圖像元素特殊的信息值，如攜帶重要的信息的圖像元素常位于圖像的中心位置而非邊緣位置），凸顯（借助對元素尺寸、顏色、視角的調整來達到突出某一圖像元素的表征方式）和邊框（運用各種線條、幾何圖形甚至圖像人物視線等邊框將不同圖像元素分離或整合的表征方式），將信息值維度改為版面布局關系，用于分析視覺語篇中圖像與文字間的關系。圖文版面布局簡化如下：

3.3.1 融合型

融合型版面布局指圖像與文字融為一體的圖文關系，包括擴展與投射兩種關系。擴展指圖像與文字各具意義，二者相互補充，相互增強。投射指圖像人物的話語或思維以文字形式出現在圖像中，如漫畫中的語泡。而在《時光電影院》中，圖文關系多體現為擴展性融合的形式。

融合型的示例 互補型的示例

圖4屬融合型圖文關系。其文字為“媽媽在我很小的時候就離開我了，每次我哭著要找媽媽，爸爸就會說：‘走，我們去看電影?！驗閶寢屪钕矚g看電影了，也許有一天，我們可以在電影院里遇見她?！?。文字描述了“我”對母親的思念之情和“我”想念母親時常與父親去影院的習慣。圖像中落葉元素表征著思念之情，右側手拉著手的兩人表征著密切的人物關系。文字中出現的人物稱呼表明圖像人物的父女關系，圖像中落葉元素渲染著文字中我對母親的思念之情，圖與文各有其意，相互補充、相互增強。

3.3.2 互補型

互補型指圖像與文字各占一部分空間，空間上相鄰的圖像文字之間無矢量連接。單獨的圖像意義較為模糊，而單純的文字又過于呆板無法提供想象空間，故將圖像與文字相鄰放置，使兩者互為補充，共同增強圖文內涵。

圖5屬互補型。單看文字“媽媽，你是一個勇敢追夢的人嗎？你完成夢想了嗎？”表意明確，但卻無法給讀者以足夠的想象空間。而單看圖像，我們只能了解騎馬的少女這一模糊的語義表征。但若是將圖文結合起來，不僅能達到圖文意義互補的效果，同時還能將騎馬向光前行的少女代指勇敢的追夢者這一比喻巧妙的表征出來，達到1+1>2的效果。

4 結語

本文以Clare Painter等在《解讀視覺敘事：兒童圖畫書的圖像分析》中所提出的視覺敘事的元功能框架為理論框架，分析解讀了《時光電影院》中圖像概念意義、人際意義、組篇意義的建構。筆者發現：一、繪本這樣的多模態敘事語篇不同于單一圖像，它的各個圖像之間存在事件展開順序，故在分析繪本圖像時應結合前后圖像一同分析，從而更為全面的把握繪本整體內涵；二、色彩不僅是圖像人際意義中氛圍系統的表征形式，還在組篇意義中發揮著重要作用，如繪本作者可通過色彩搭配突出圖像的主要元素淡化次要元素的凸顯度，從而將各元素組成一有機整體；三、Painter認為黑白色不能營造情感氛圍，但幾米繪本中確有圖像為了營造沉悶、壓抑的氛圍而選擇了黑白色背景，即黑白色也可營造情感氛圍?？偟膩碚f，Painter的視覺敘事分析框架雖然在分析繪本圖像時頗具解釋力，但也有不足之處。故多模態語篇分析無論是在理論框架的完善上還是實證分析的驗證上仍需進一步的深入研究。

參考文獻

[1]韋琴紅.視覺環境下的多模態化與多模態話語研究[M].科學出版社，2009：14-79.

[2]胡壯麟，朱永生，張德祿，李戰子.系統功能語言學概論[M].北京大學出版社，2008.

[3]幾米.時光電影院[M].海豚出版社，2012.

[4]馮德正.視覺語法的新發展：基于圖畫書的視覺敘事分析框架[J].外語教學，2015（5）：23-27.

[6]劉曉華.基于視覺敘事分析框架的多模態敘事語篇意義建構——以幾米繪本為例[J].湖北第二師范學院學報，2016（12）：5-10.

[7]吳安萍，鐘守滿.視覺語法與隱喻機制的多模態話語研究[J].外語與外語教學，2014（3）：23-28.

作者簡介

張婧嫻（1994-），女，漢族，山西省長治市，在讀研究生，陜西師范大學外國語學院，理論語言學。endprint