多模態(tài)語篇的互動(dòng)意義剖析

摘 要:2009年年底的哥本哈根會(huì)議雖然沒有簽署任何有法律效力的協(xié)議，但是它對(duì)于整個(gè)世界對(duì)環(huán)保的關(guān)注有很大的提升作用。宣傳這次大會(huì)的一組多模態(tài)的海報(bào)引起了我們的關(guān)注。研究多模態(tài)語篇的互動(dòng)意義要通過接觸、社會(huì)距離、態(tài)度這三個(gè)方面進(jìn)行。通過對(duì)這三方面的分析，人們可以更深刻地體會(huì)到這則海報(bào)的互動(dòng)意義，從而實(shí)現(xiàn)最佳宣傳作用。

關(guān)鍵詞:多模態(tài)語篇 互動(dòng)意義 接觸 社會(huì)距離 態(tài)度

一、引言

哥本哈根世界氣候大會(huì)全稱《聯(lián)合國氣候變化框架公約》第15次締約方會(huì)議暨《京都議定書》第5次締約方會(huì)議，于2009年12月7～18日在丹麥?zhǔn)锥几绫竟匍_。來自192個(gè)國家的談判代表參加了峰會(huì)，商討《京都議定書》一期承諾到期后的后續(xù)方案，即2012年至2020年的全球減排協(xié)議。如果《哥本哈根議定書》不能在今年的締約方會(huì)議上達(dá)成共識(shí)并獲得通過，那么在2012年《京都議定書》第一承諾期到期之后，全球?qū)]有一個(gè)共同文件來約束溫室氣體的排放。這將導(dǎo)致人類遏制全球變暖的行動(dòng)遭到重大挫折。因?yàn)檫@個(gè)原因，本次會(huì)議被喻為“拯救人類的最后一次機(jī)會(huì)”。

我們在此并不想對(duì)哥本哈根會(huì)議的成果多加評(píng)論，但是作為一次重要的會(huì)議，它事先的宣傳是非常到位的，為了敦促各位代表在峰會(huì)上通過切實(shí)有效的協(xié)議，tcktcktck運(yùn)動(dòng)戰(zhàn)線和綠色和平組織在哥本哈根飛機(jī)場的各個(gè)角落掛滿了用電腦制作出來的到了2020年時(shí)各國首腦老邁的頭像，這些領(lǐng)導(dǎo)人表情凝重，充滿遺憾之情，向世人道歉說:“對(duì)不起。我們本來有機(jī)會(huì)阻止災(zāi)難性氣候變化的發(fā)生……可我們沒有珍惜。”

這一系列公益廣告幾乎包含了所有重要與會(huì)國家的首腦，其意圖不言而喻。但這樣簡單的設(shè)計(jì)是如何達(dá)到如此明確而深刻的效果的呢?是如何與觀者之間產(chǎn)生互動(dòng)的呢?本文將用Kress和Van Leeuwen的社會(huì)符號(hào)學(xué)的多模態(tài)分析方法來解析這一系列宣傳海報(bào)的互動(dòng)意義。

二、多模態(tài)語篇的互動(dòng)意義

美國語言學(xué)家Harris于20世紀(jì)50年代初提出話語分析(discourse analysis)這一研究方向，之后世界各地的話語分析家提出了各種各樣的理論和方法，通過大量實(shí)例分析，解剖了話語活動(dòng)內(nèi)在的規(guī)律以及話語活動(dòng)與意識(shí)形態(tài)和認(rèn)知模式之間的關(guān)系。然而，這些理論和方法，基本上都是以語言為研究對(duì)象，即只注意語言系統(tǒng)和語義結(jié)構(gòu)本身及其與社會(huì)文化和心理認(rèn)知之間的關(guān)系，忽視諸如圖像、聲音、顏色、動(dòng)漫等其他意義表現(xiàn)形式。(朱永生，2007:82)隨著電腦技術(shù)和多媒體技術(shù)的運(yùn)用、普及和發(fā)展，語篇也呈現(xiàn)出多模態(tài)化。多模態(tài)語篇(multimodal discourse)是一種融合了多種交流模態(tài)(如聲音、文字、形象等)來傳遞信息的語篇。(Kress Van Leeuwen，2001:2)而Horn(1999:15～33)對(duì)多模態(tài)的描述更加形象。他說:“文字和圖像構(gòu)成統(tǒng)一的交流單位，如果把文字從整體中抽離出來，或反過來把圖像拿出來，觀者從這個(gè)整體中所獲得的信息或意義都會(huì)受到巨大的影響”。一些多模態(tài)研究就是對(duì)某種語言學(xué)理論加以應(yīng)用和擴(kuò)展，比如系統(tǒng)功能語言學(xué);還有的學(xué)者關(guān)注語言學(xué)之外的其他領(lǐng)域，比如社會(huì)學(xué)。這些領(lǐng)域提供語言之外的意義構(gòu)建資源模式。近年來的多模態(tài)研究主要有四種視角:交互社會(huì)學(xué)的視角、認(rèn)知的視角、語體學(xué)的視角和功能符號(hào)學(xué)視角。功能符號(hào)學(xué)的視角運(yùn)用系統(tǒng)功能語言學(xué)理論，分析包括語言之內(nèi)不同模態(tài)的意義構(gòu)建模式。在多模態(tài)話語的研究上，這一視角的研究成果最多，成為多模態(tài)研究的主要力量。其代表人物包括Kress(1996)、Van Leeuwen(1996)、O’Toole(1994)、Lemke(1995)、O’Halloran(2004)、Baldry(2006)、Thibault(2006)、Martinec(1998)等。

(一)多模態(tài)話語的社會(huì)符號(hào)學(xué)分析理論

多模態(tài)語篇的社會(huì)符號(hào)學(xué)分析方法以功能語言學(xué)理論為基礎(chǔ)來研究社會(huì)符號(hào)學(xué)，將語言看成社會(huì)符號(hào)，從語言與社會(huì)文化情境的互動(dòng)關(guān)系來研究語言。Van Leeuwen和Jewitt(2001)的《視覺分析手冊》以及Kress和Van Leeuwen(1996)的《閱讀圖像》構(gòu)建了視覺語法，從而建立了圖像分析的社會(huì)學(xué)框架。

Baldry和Thibault(2006:18)提出了一系列研究多模態(tài)話語的工具和概念，主要用于研究一個(gè)有技術(shù)支撐的平面，如一個(gè)印刷頁、一個(gè)電視屏幕或一個(gè)網(wǎng)頁中一個(gè)物質(zhì)符號(hào)與其他物質(zhì)符號(hào)的結(jié)合如何在現(xiàn)代社會(huì)文化背景中形成一種符號(hào)資源，共同實(shí)現(xiàn)功能和表達(dá)意義。這些工具和概念包括元功能(metafunction)、資源群(clusters)、資源塊(phases)、等級(jí)水平(scalar levels)、話語層(discourse strata)、意義制造軌道(meaning-making trajectories)、資源整合原則(resource integration principle)等。

Halliday的系統(tǒng)功能語法是Kress和Van Leeuwen二人提出的多模態(tài)分析方法的理論基礎(chǔ)，因?yàn)橄到y(tǒng)功能語法有許多可借鑒之處:首先，系統(tǒng)功能語法把語言看作是一種依賴于語境而存在的社會(huì)符號(hào)系統(tǒng)(Halliday，1978:4)。這一看法使得系統(tǒng)功能語法可以更廣泛地應(yīng)用于不同符號(hào)的研究，也是它優(yōu)越于其他語法的優(yōu)勢所在。其次，系統(tǒng)功能語法不僅關(guān)注文字本身，也關(guān)注文字的設(shè)計(jì)、布局，從其功能的角度來闡釋語言結(jié)構(gòu)體，要想提出多模態(tài)語篇語法，必須把語言與非語言結(jié)構(gòu)有效地聯(lián)系起來。最后，Halliday認(rèn)為使用語言的過程是符號(hào)過程，即認(rèn)為語言有概念功能、人際功能、語篇功能三大功能:表征客觀世界和內(nèi)心世界的概念功能，體現(xiàn)語言使用者的交際參與和交際角色關(guān)系的人際功能，以及組織成語篇的語篇功能。(辛志英，2008:208)

(二)社會(huì)符號(hào)學(xué)的三大元功能

由于多模態(tài)話語理論提出語言之外的其他符號(hào)系統(tǒng)也是意義的源泉，也和語言符號(hào)一樣具有多功能性，所以他們把Halliday概括的語言所具有的三大元功能延伸到包括視覺符號(hào)在內(nèi)的其他符號(hào)系統(tǒng)，并把它們在包含圖像的多模態(tài)語篇中分別解釋為再現(xiàn)(representation)、互動(dòng)(interaction)和語篇(composition)三種功能(Kress van Leeuwen，1996)。圖像的概念功能體現(xiàn)了一種再現(xiàn)。Kress和van Leeuwen在解釋圖像的再現(xiàn)功能時(shí)把圖像區(qū)分為敘事性和概念性兩大類，認(rèn)為敘事圖像表達(dá)的是展開的動(dòng)作和事件、變化的過程和瞬間的空間安排，而概念圖像表示的是圖像的類別、結(jié)構(gòu)和意義，它表達(dá)一種概括的、穩(wěn)定的和沒有時(shí)間限制的精華。Kress和Van Leeuwen(1996:149)把圖像的人際功能體現(xiàn)為一種互動(dòng)，這種互動(dòng)主要表現(xiàn)在接觸、社會(huì)距離和態(tài)度三方面語篇功能在多模態(tài)語篇中主要體現(xiàn)為一種布局，這種布局指的是語篇成分的空間順序，通常是讀者一眼就能獲得的一個(gè)整體印象，通過三個(gè)同步原則實(shí)現(xiàn)，即信息價(jià)值(information value)、突出(salience)和框架(framing)。鑒于我們研究的多模態(tài)語篇對(duì)象是一則宣傳海報(bào)，所以我們對(duì)它的互動(dòng)意義更加關(guān)注。

(三)多模態(tài)語篇的互動(dòng)意義

在《閱讀圖像》一書中，Kress與Van Leeuwen(1996)提出了可以用于多模態(tài)話語分析的符號(hào)語法。在系統(tǒng)功能語言學(xué)的基礎(chǔ)上，他們提出了對(duì)圖像文進(jìn)行分析的理論框架，進(jìn)而解決對(duì)多模態(tài)文本進(jìn)行分析的難題。二人提出了圖像互動(dòng)意義分析的三個(gè)原則，即接觸、社會(huì)距離以及態(tài)度。接觸是指圖像是以何種方式對(duì)觀者發(fā)生作用(需要觀者給出回饋還是只是向觀者提供視覺信息);社會(huì)距離是指圖像與觀者之間的距離，是邀請觀者靠近圖像的表征參與者(私人交往的距離)還是想要與其保持距離(社交距離)，抑或是拒之千里之外(非交往距離)。態(tài)度又可以細(xì)分為兩種:水平層面及垂直層面。水平層面也包括是呼吁觀者的參與(通過正面的圖像)還是達(dá)到冷漠的效果(通過圖像中表征參與者的側(cè)面完成);垂直層面形成了觀者與圖像中表征參與者的權(quán)力關(guān)系:是有等級(jí)差異的還是平等的。本文試圖應(yīng)用Kress和Van Leeuwen的社會(huì)符號(hào)學(xué)的多模態(tài)分析方法來解讀這一組哥本哈根會(huì)議的海報(bào)宣傳的互動(dòng)意義。

三、社會(huì)符號(hào)學(xué)的多模態(tài)分析方法對(duì)海報(bào)中圖像與文字互動(dòng)意義的分析

這一系列的海報(bào)除了使用的人物不同，其他的設(shè)計(jì)幾乎沒有任何區(qū)別，所以本文僅以奧巴馬這一版為例進(jìn)行解讀。這一海報(bào)由文字與圖像共同構(gòu)成:奧巴馬的頭像是該海報(bào)圖像部分的主體，圖中的奧巴馬已不再英俊瀟灑，滿頭白發(fā)的總統(tǒng)面色凝重，若有所思地看著遠(yuǎn)方。總統(tǒng)的左側(cè)用色彩醒目的紅色標(biāo)出2020這一時(shí)間，提醒讀者這是10年后的奧巴馬，而其右側(cè)則有一段引用的話，這段話用一對(duì)紅色鮮明的雙引號(hào)引出，似乎告訴觀者，這是直接引用總統(tǒng)的原話。引號(hào)里最先出現(xiàn)的是大大的黑色字體的“對(duì)不起”，非常醒目，接下來總統(tǒng)解釋他抱歉的緣由——“我們本來有機(jī)會(huì)阻止這災(zāi)難性的氣候變化……可我們沒有珍惜。”海報(bào)的下端，除了海報(bào)的制作單位的名字tcktcktck運(yùn)動(dòng)戰(zhàn)線和綠色和平組織(位于海報(bào)的左下角)之外，還表明了海報(bào)的主題，在海報(bào)的右下角明顯地印有:2009哥本哈根的字樣，下面還提出了口號(hào)——馬上行動(dòng)，拯救未來。這組海報(bào)被掛在哥本哈根機(jī)場的各個(gè)角落，懸掛的位置并不高，觀者平視可見。我們將針對(duì)以上信息來分析這組多模態(tài)語篇海報(bào)的設(shè)計(jì)和效果。

Kress和Van Leeuwen對(duì)圖像互動(dòng)意義的分析遵循三個(gè)原則，即接觸、社會(huì)距離以及態(tài)度。這三方面的把握將更好地解釋多模態(tài)語篇是如何完成其與觀者的互動(dòng)以及各模態(tài)語篇之間的互動(dòng)意義是如何實(shí)現(xiàn)的。

(一)接觸

Kress和Van Leeuwen認(rèn)為，圖像在傳達(dá)意義時(shí)都有一個(gè)圖像行為(image act)，這種圖像行為是由表征參與者的凝視系統(tǒng)(system of gaze)來實(shí)現(xiàn)的(Van Leeuwen，2005:120)，它表達(dá)的要么是索求，要么是提供。在接觸分析的是圖像中的表征參與者與觀者所建立起來的一種關(guān)系，主要有兩種選擇:圖像中的表征參與者是需要觀者的關(guān)注還是只是向觀者提供信息。“索求的”圖像中，表征參與者直接盯著觀者，希望從觀者那里獲得一些回饋;而“提供的”圖像中，圖像中的表征參與者并不直視觀者，而是看向別處。這時(shí)的接觸是間接的，圖像的用意是要引發(fā)觀者的思考。

海報(bào)中老年的奧巴馬，面色凝重，并沒有直視觀者，好像更希望向觀者提供一種信息，表達(dá)他的悔意。海報(bào)似乎并不需要觀者給出任何回應(yīng)，也許因?yàn)?0年后的道歉為時(shí)已晚，海報(bào)中的奧巴馬還能期冀從觀者那里得到什么樣的回應(yīng)呢?

Kress和Van Leeuwen(1996)提出可以用話語行為及人稱來分析多模態(tài)文本的文字文本部分，我們就借用這種理論來分析奧巴馬的“道歉語”以及海報(bào)中的其他文字文本。

針對(duì)話語行為，Halliday提出了四種最基本的話語行為，即陳述、疑問、命令以及提供，其功能分別為提供信息、索取信息、索取商品或服務(wù)以及提供商品或服務(wù)。英語中，所有這些功能都是通過語氣(mood)實(shí)現(xiàn)的，如陳述語氣、命令語氣等。奧巴馬的“道歉”更多的是為了提供信息，他使用的是陳述語氣。而海報(bào)中宣傳的部分“馬上行動(dòng)，拯救未來”則是命令的語氣，其功能與用意不言而喻。

在這幅海報(bào)的語言文本中，人稱的使用也是有效傳達(dá)信息不容忽視的部分。在“道歉”中，奧巴馬用的都是第一人稱“我”和“我們”，這和圖像所提供的信息是一致的，都是提供一種致歉的信息。但是海報(bào)中宣傳的部分，沒有使用任何人稱。我們知道，英語中祈使句的真正主語就是“你”，在這里就是所有在機(jī)場經(jīng)過能夠看得到該海報(bào)的觀者。

雖然奧巴馬的圖像與話語、觀者的接觸并不具備直接性，但宣傳口號(hào)的文字卻把這種接觸變得直接、有力。這時(shí)，奧巴馬的部分，不論是言語還是圖像，更像是廣告宣傳的一種佐證，讓所有觀者有了更直觀、更深刻地認(rèn)識(shí)和體會(huì)。

(二)社會(huì)距離

社會(huì)距離即圖像中人或物所呈現(xiàn)出的與觀者之間的距離，這一距離主要靠“取景”來實(shí)現(xiàn)，包括近景、中景及遠(yuǎn)景。近景體現(xiàn)的是圖中表征參與者與觀者一種私人交往的密切關(guān)系，中景體現(xiàn)的是公共場合的社交距離，而遠(yuǎn)景則體現(xiàn)一種非人際交往的關(guān)系，這種距離意味著二者只能是陌生的關(guān)系(Kress and Van Leeuwen，1996)。

這則海報(bào)的圖像部分就是奧巴馬的頭像，這一明顯的近景設(shè)計(jì)拉近了觀者與奧巴馬的距離:10年后的奧巴馬已經(jīng)不再是遠(yuǎn)在白宮、日理萬機(jī)的總統(tǒng)。海報(bào)中的他更像是生活在我們身邊的一位老者，在向我們講述他往日的遺憾。這樣的圖像設(shè)計(jì)必將讓所有的觀者感到他道歉的誠懇，使得宣傳更具有說服力。

圖像部分呈現(xiàn)的距離如此，文字部分是否與其有異曲同工之妙呢?kress與Van Leeuwen(1996)認(rèn)為，文本風(fēng)格的正式與否能夠體現(xiàn)多模態(tài)文本的社會(huì)距離。基于Joos(1967)的研究，二人提出了三種風(fēng)格:私人交往類型、社交類型以及公開交往類型。私人交往類型使用的是親密的語言，這樣的語言風(fēng)格常是含蓄的、需要有語境支持的、有具體所指的。社交類型就好像在從事業(yè)務(wù)往來，很少使用白話、縮寫等，而更多地會(huì)使用標(biāo)準(zhǔn)的句法與詞匯。這種類型要求語言更明了，因?yàn)榻煌叩木嚯x要比前者更遠(yuǎn)一些。第三種公開交往類型適用于正式的場合，人們的話語非常標(biāo)準(zhǔn)，說話人有很強(qiáng)的自我意識(shí)、措辭嚴(yán)謹(jǐn)。這種模式下，交往者往往保持較遠(yuǎn)的距離。

在這則海報(bào)中，奧巴馬的“道歉”采用了口語化很強(qiáng)的風(fēng)格，運(yùn)用了縮寫以及省略等表達(dá)方式。雖然他也用了“災(zāi)難性的”這樣的形容詞，但是整個(gè)“道歉”的風(fēng)格突出的是動(dòng)作以及動(dòng)作的結(jié)果。社交類型和公開交往類型，會(huì)使用大量的抽象概念，強(qiáng)調(diào)的是形容詞而不是動(dòng)詞。在口號(hào)宣傳部分，很明顯“馬上行動(dòng)，拯救未來”也是關(guān)注行動(dòng)本身。所以我們可以認(rèn)定，無論從文字文本分析還是從圖像本身分析，該海報(bào)與觀者的距離是被拉近的，對(duì)觀者產(chǎn)生的影響也應(yīng)該是切實(shí)而深刻的。

(三)態(tài)度:參與與權(quán)力

Kress與Van Leeuwen(1996)提出圖像的互動(dòng)意義不僅取決于圖像與觀者的接觸是為了提供還是索取，也不單純依賴取景的大小，還取決于角度的選擇。對(duì)于圖像，有兩個(gè)層面可以考慮，一個(gè)是水平層面，一個(gè)是垂直層面。水平層面可以看圖像中的表征參與者是正面呈現(xiàn)還是側(cè)面呈現(xiàn);垂直層面則可分為從高處、水平以及低處三種角度。水平的選擇中，正面的代表著參與，而側(cè)面則代表著冷漠。垂直選擇的不同角度表現(xiàn)出觀者與圖像所展示的內(nèi)容之間不同的權(quán)力關(guān)系。高處的角度表示觀者優(yōu)于圖像中的表征參與者;水平角度體現(xiàn)的是一種平等關(guān)系;低處的設(shè)計(jì)角度表明觀者的地位劣于圖像中的表征參與者。

海報(bào)中的奧巴馬頭像正對(duì)觀者，表明了海報(bào)的目的是為了呼吁觀者的參與，水平角度的切入也體現(xiàn)了觀者與奧巴馬的平等關(guān)系。蒼老的奧巴馬已不再是昔日高高在上的總統(tǒng)，而只是生活在觀者中間一位普通的老人，這樣他的“道歉”才更顯真誠，更具說服力。另外，海報(bào)懸掛的位置對(duì)于海報(bào)的互動(dòng)意義也至關(guān)重要。在機(jī)場大廳，這一組海報(bào)被懸掛在所有觀者平視可見的位置，這一客觀位置也營造出海報(bào)應(yīng)有的互動(dòng)意義。

海報(bào)中的文字文本呈現(xiàn)出何種態(tài)度呢?我們也從兩方面考慮，即參與度的深淺以及權(quán)力差異的大小。海報(bào)中奧巴馬“道歉”的話語是以“I’m Sorry.”開始的，這種致歉必然是有聽眾的，而這里的聽眾就是海報(bào)的觀者。這樣的處理明顯體現(xiàn)了海報(bào)需要觀者的參與，否則，這樣的道歉就是沒有聽眾的、是無效的。而海報(bào)的宣傳語部分，如前所述，采用的是祈使句，更是需要觀者的參與，觀者就是被呼吁的對(duì)象。另外，從權(quán)力的層面來看，Kress和Van Leeuwen表示，判斷文字文本的權(quán)力級(jí)別，可以參考文本中評(píng)價(jià)性詞語的使用，使用的該類詞語越多，就越能體現(xiàn)出文中的表征參與者優(yōu)于觀者的權(quán)力關(guān)系。我們再來回顧這幅海報(bào)中的文字部分:奧巴馬的道歉中，只使用了一個(gè)形容詞——災(zāi)難性的，但是其用意并不是為了對(duì)其以一個(gè)權(quán)威的地位進(jìn)行評(píng)價(jià)，相反，只是為了陳述氣候變暖的嚴(yán)重程度，從而表達(dá)出海報(bào)中的奧巴馬后悔的程度。海報(bào)中的宣傳文字更是簡單明了:“馬上行動(dòng)，拯救未來!”句中沒有任何評(píng)價(jià)性詞語，雖然是祈使句，卻并未表現(xiàn)出高高在上的命令語氣，而只是要呼吁觀者參與進(jìn)來。

四、結(jié)語

這組多模態(tài)語篇構(gòu)成的海報(bào)由文字語篇和圖像語篇共同構(gòu)成。圖像和文字共同構(gòu)成的語篇不同模態(tài)的部分互為補(bǔ)充，構(gòu)成了新的語義域(semantic domain)，這一新的文本由兩種文本共同構(gòu)成，但是所呈現(xiàn)出的效果要大于二者之和。Roland Barthes(1977:41)曾經(jīng)這樣描述圖像的表現(xiàn)力:“文本和圖像互為補(bǔ)充，文字跟圖像一樣，是更一般性的結(jié)構(gòu)體的組成部分，二者共同實(shí)現(xiàn)信息的傳遞功能。”

這則海報(bào)通過兩種模態(tài)的相互補(bǔ)充，有效地實(shí)現(xiàn)了宣傳效果，“老奧巴馬”的“道歉”顯得真實(shí)誠懇、平易近人。廣告的宣傳語簡單有力，能夠?qū)崿F(xiàn)號(hào)召呼吁的作用。這樣的宣傳效果體現(xiàn)廣告設(shè)計(jì)者的良苦用心。

現(xiàn)在有無數(shù)信息都是用多模態(tài)的語篇來傳遞的，為了更好地解析這些語篇，我們應(yīng)該有一種更有效的分析手段，也就是分析多模態(tài)語篇的語法。這種多模態(tài)語篇語法需要既能對(duì)不同模態(tài)的部分進(jìn)行分析，又能詮釋各模態(tài)之間的互動(dòng)關(guān)系以及這個(gè)語篇與觀者之間的互動(dòng)關(guān)系。盡管還未找到這樣一種語法，但是我們已經(jīng)認(rèn)識(shí)到了解多模態(tài)語篇及其分析方法的重要性。希望通過本文對(duì)多模態(tài)語篇構(gòu)成的海報(bào)宣傳的分析，能夠幫助我們理解身邊越來越多的多模態(tài)語篇，以便更有效地設(shè)計(jì)多模態(tài)語篇，實(shí)現(xiàn)信息的傳遞。

參考文獻(xiàn):

[1]Baldry，A. P.J.Thibault.Multim odal Transcription and

Text Analysis[M].London:Equinox，2006.

[2]Barthes，R.Image-Music-Text[M].London:Fontana，1977.

[3]Halliday，M.A.K.Language as Social Semiotic:The Sociological

Interpretation of Language and meaning[M].London:Edward Arnold，1978.

[4]Horn，Robert，E.“Information design:Emergence of a new

profession.”[A].In Information Design，ed.R.Jacobson，Cambridge，MA:The MIT Press，1999.

[5]Joos，M.The five Clocks of Language[M].New York:Harcourt

Brace and World，1967.

[6]Kress，G. Jewitt，C.(eds.).Handbook of visual Analysis[C].

London NY:Continum，2001.

[7]Kress，G.and Van Leeuwen，T.Reading Images:The Grammar

of Visual Design[M].London:Routledge，1996.

[8]Kress，G Van Leeuwen，T.Multimodal Discourse:The Modes

and Media of Contemporary Communication[M].London:Amold，2001.

[9]Lemke，J.Intertextuality and text semantics[A].In M.Gregory

and P.Fries(eds.).Discourse in society:functional Perspectives[C].Norwood，N.J.:Ablex，1995.

[10]Martinec，R.Cohesion in Action.[J].Semiotics，1998.

[11]O’Halloran，K.L.Visual semiosis in film[A].In Kay L.O’

Halloran(ed).Multimodal Discourse Analyasis[C].2004

[12]O’Toole，M.The Language of Displayed Art[M].Leicester:

Leicester University Press，1994.

[13]Van Leeuwen，T.Introducing Social Sem iotics[M].London:

Routledge，2005.

[14]謝賢春.多模態(tài)話語分析《非誠勿擾》“和諧版”電影海報(bào)[J].

電影文學(xué)，2009，(6).

[15]辛志英.話語分析的新發(fā)展——多模態(tài)話語分析[J].社會(huì)科學(xué)

輯刊，2008，(5).

[16]朱永生.多模態(tài)話語分析的理論基礎(chǔ)與研究方法[J].外語學(xué)刊，

2007，(5).

(陳曉穎 李欣 北京林業(yè)大學(xué)外語學(xué)院 100083)