社會符號學視角下的多模態話語分析

摘 要： 隨著科技、多媒體、數字化的發展，語言不再是意義的唯一表現形式，各種符號資源也成為表意的工具。克瑞斯和賴文在韓禮德系統功能語法的基礎上提出了多模態話語分析理論，創建了以“再現意義”、“互動意義”和“構圖意義”為核心內容的視覺語法。本文利用社會符號學視角下的視覺語法理論，對第16屆廣州亞運會會徽進行了多模態話語分析，從而揭示了圖像和文字是如何表現意義的。

關鍵詞： 社會符號學 多模態話語分析 視覺語法 第16屆廣州亞運會會徽

1.引言

隨著數字化時代的到來，語篇日益凸顯多模態化，多模態話語分析成為了國內外語言學家研究的熱點之一。胡壯麟指出，在人類進入社會符號學的多模態化的新世紀，對多模態識讀能力的培養應引起重視［１］。李戰子說：“圖像時態的到來，特別是圖像在媒體，教育和兒童文學中的大量生產，使我們無法忽視多模態，也不應該認為它比單一模式的話語低下而置之不理。”［２］Kress提出，所有模態都具有表達意義的潛勢［３］。

第16屆亞洲運動會在我國廣州舉行，此屆亞運會會徽以柔美上升的線條，構成了一個造型酷似火炬的五羊外形輪廓，構圖以抽象和具象相合，在靈動中不失穩重，象征著亞運會的火炬熊熊燃燒、永不熄滅，既體現了廣州的城市象征，又表達了廣州人民的美好愿望，還表現了運動會應有的動感。

本文從多模態話語分析的角度，以第16屆廣州亞運會會徽為例，運用視覺語法的研究方法進行分析，進而解讀圖像作為一種社會符號是如何產生意義的，并且揭示圖像和文字的表意功能。

2.理論背景

2.1多模態話語的普遍性

話語的多模態并非是一個新現象，而是人們一直以來在實踐甚至理論研究中總是趨向于關注一種模式而忽略其他模式，例如，朱永生認為話語分析基本上局限在語言本身，即只注重語言系統和語義結構本身及其社會文化和心理認知之間的關系，忽視了諸如圖像、聲音、顏色、動漫等其他意義表現形式［４］。圖像建構的意義，以及只有通過兩種模式共同作用才能表達的意義就被置于邊緣地帶或者完全被忽略。實際上，各種符號模式也參與意義表達，只是它們屬于意義構建的不同層次。例如，“一圖抵千言”的俗語就側重單獨圖像意義的構建，新聞報道中文字與圖片的結合則強調文字與圖片的互補性。“語言使用，不管是口語還是書面語，總是不可避免地由多種交際模態構建”［５］，所以，“所有的文本都是多模式的”［６］。隨著社會的發展和科技的進步，特別是隨著數字、網絡和多媒體技術的廣泛使用，傳統語法認為是副語言的圖像、顏色、聲音和動作等符號在現代交流中不再處于輔助位置，而是正在和語言符號一起形成更為寬泛的符號資源共同參與構建意義。

2.2多模態話語分析的社會符號學理論基礎

首先提出“多模態話語”的是克瑞斯和賴文。理論基礎是韓禮德系統語法功能中的相關理論。韓禮德在其《功能語法介紹》一書中主張語言是社會符號系統，提出了三大元功能，即表示概念意義的概念功能，表示說話人和聽話人之間的關系和說話人對說話內容態度的人際功能，以及表示語篇構建意義的語篇功能。因此，多模態話語分析理論的社會符號學基礎即是把語言作為社會符號所具有的三大元功能延伸到除語言之外的其他符號，并把包括語言在內的各種符號看作是各自獨立而又相互作用的符號資源，在分析語言特征的同時強調圖像、顏色、聲音和動作等視覺、聽覺和行為方面的符號模態在話語中的作用。Hodge和克瑞斯歸納出用以指導闡釋多模態話語兩個理論前提，并進一步強調社會符號在社會實踐中的應用，強調符號的動態表意功能［７］。由此可見，社會符號學為理解視覺化語篇提供了一個總的描述的語法。

2.3視覺語法

克瑞斯和賴文基本接受了韓禮德的系統功能語言學觀點，并且進一步發展了自己的理論。克瑞斯和賴文指出多模態話語分析也是一個符號系統，每種模態（文字、圖像、聲音）在語篇中作為獨立的部分存在并產生意義；所有的模態系統組合，作為一個整體產生語篇意義［６］。克瑞斯和賴文在韓禮德三大元功能基礎上，主張圖像的社會符號性，認為：“正如語言的語法決定詞如何組成小句、句子和語篇，視覺語法將描寫所描繪的人物、地點和事物如何組成具有不同復雜程度的視覺‘陳述’。”［６］他們將韓禮德的語法功能延伸到圖像分析，建立了以“再現意義”、“互動意義”、“構圖意義”為中心的視覺語法理論框架，與韓禮德三大元功能一一對應。

3.1會徽的圖像解讀

第16屆亞運會會徽可以看作是一個由圖像、文字、顏色構成的多模態語篇。整個語篇由意象、文字、顏色構成，以紅色為主要基調，黃色和黑色搭配而成。意象的創作來自“五羊的傳說”，在會徽的意象中“五羊”被設計成四條跑道，又作火焰狀，意喻亞運火炬，一直延伸向天空中的太陽。圖像下方是“16th Asian Games”和“Guangzhou 2010”，中西合璧；兩行文字均采用黑色，但是“Guangzhou 2010”采用粗體漢字字體，突出我國文化底蘊的深厚。

3.2會徽的多模態話語分析

3.2.1再現意義

克瑞斯和賴文認為再現意義包括敘事和概念兩大類，其中敘事的再現包括行動過程、反應過程、言語和心理過程。概念的再現包括分類過程、分析過程和象征過程。李戰子［２］指出在圖片中，使圖中的元素形成斜線就形成矢量。矢量是敘事圖像的表示。敘事再現指圖像中參與者被連接起來后對相互做某件事。行動過程中最為突出的參與者可以通過尺寸、位置、顏色等判斷。克瑞斯和賴文認為概念再現中分類過程是將參與者分為主從的過程；分析過程是分析顯性和隱性的過程；象征過程是關于參與者是什么或者意味著什么。

會徽中的主要意象基于廣州“五羊的傳說”，五只羊演化成了燃燒的火焰，一直伸向天空的太陽，隱含著行動過程的參與者；五只羊又可以理解成四條跑道，一直延伸到世界的盡頭，寓意了亞運會的發展將永無止境；火焰、跑道的“目光”投向天空中的太陽，形成了反應過程。在整個圖像中，“五只羊”是圖像中最突出的參與者，扮演者“主角”，用紅黃這種高飽和的顏色填充，強調了五只羊的化身——廣州人民將以最熱情的態度、最友好的方式傳遞亞運社火的精神。

3.2.2互動意義

克瑞斯和賴文認為圖像中包含圖像的制作者、圖像表征的事物、圖像的觀看者之間的關系，并提示觀看者對所再現的事物應持的態度。在此過程中，有接觸、距離、視點和情態四大要素。克瑞斯和賴文將圖像的參與者直接看著觀看者的過程叫做“索取”，將圖像人物的展示叫做“提供”；距離主要包括親密、非個人、社會距離的展現；通過仰視、俯視、平視等不同視點展現權勢；情態與圖像的真實度和可信度有關，通過色彩飽和度、色彩、區分度、色彩調諧度、再現、深刻、照明和亮度八大標志反應圖像的“現實主義”。

此圖像是一幅“提供”類圖像，將亞運會的理念通過會徽傳遞給觀看者。這是一幅近景圖像，觀看者可以清楚看到整幅圖像。會徽圖像以紅色為主色調，文字以黑色為主色調。在中國傳統色彩中，紅色表示喜慶、熱烈等情感；黑色表示莊重、肅穆等意思。使用紅和黑這兩種高情態的色彩，充分體現了廣州人民將以熱情的、嚴肅的、飽滿的精神狀態迎接亞運會的到來。圖像下方的兩行文字直接告訴觀看者此會徽的用意，采用中英文的形式直接說明了亞運會將在中國廣州舉辦，并且突出了亞運會的國際性。舞動的廣州體現出亞運會的動感。

3.2.3構圖意義

“構圖意義”對應功能語法中的語篇意義，克瑞斯和賴文提出了構圖意義中的三種資源：信息值、取景和顯著性。信息值是通過元素在構圖中的放置實現的即空間位置。在克瑞斯和賴文看來，左邊的信息是已知的，右邊的是新的；上方的是“理想的”，下方的是“真實的”。中心與邊緣的差異與文化差異相關。取景指的是是否采用取景手段，用于變現圖像元素的有無。顯著值指元素吸引觀看者注意力的不同程度，通過被放置的前景或者后景，相對尺寸，色調值對比和鮮明度的不同來實現。

“理想的”是指它的信息是理想化的或概括性的實質，它的信息是最顯著的部分；“真實的”是指更特定的信息，如細節等。在廣州亞運會會徽中，被再現為火焰、跑道的五羊在圖像的上方，象征廣州人民奮發向前愿為亞運會作出最大努力；“16th Asian Games”和“Guangzhou 2010”被放置在下方，它提供的信息細致、真實、可信。

4.結語

數字化時代下的語篇不再以語言為唯一的意義產生方式，各種符號資源（圖像、聲音、顏色等）都被廣泛用于語篇之中，因此，語篇呈現多模態化，對語篇進行多模態話語分析顯得日益必要。本文通過利用社會符號學視角下的視覺語法理論，對第16屆廣州亞運會會徽進行多模態話語分析，發現圖像從“再現意義”、“互動意義”和“構圖意義”三個方面構建意義，意象、文字、顏色等各種符號資源共同產生意義，驗證了各種符號資源都是意義產生的源泉。

參考文獻：

［1］胡壯麟.社會符號學研究中的多模態化［J］.語言教學與研究，2007，（1）：1-10.

［2］李戰子.多模態話語的社會符號學分析［J］.外語研究，2003，（5）：1-8.

［3］Kress，G.Sociolinguistics and Social Semiotic［SA］.In Sobley，P.ed，London New York：Routledge，2001.

［4］朱永生.多模態話語分析的理論基礎和研究方法［J］.外語學刊，2007，（5）：82-86.

［5］Scollon，R.Levine，P.Multimadol Discourse Analysis as the Con-fluence of Discourse and Technology［SA］.In Levine，P.Scollon，R.（eds）.Discourse and Technology［C］.Washington，DC：Gergetown University Press，2004.

［6］Kress，G. Van Leeuwen，T.Reading Images.The Grammar of Visual Design［M］，London：Routledge，1996.

［7］Hodge，R.G.Kress.Social Semiotics［M］.Cambridge：Polity Press，1988.