從社會(huì)符號(hào)學(xué)視角解讀圖文符號(hào)構(gòu)建意義的異同

陳永斌

(湖北科技學(xué)院 外國語學(xué)院， 湖北 咸寧 437005)

隨著社會(huì)和信息技術(shù)的發(fā)展，人們需要借助除語言符號(hào)之外的圖像、聲音、動(dòng)漫等非語言符號(hào)資源來更有效地傳遞信息和實(shí)現(xiàn)交際目的。在很多情況下，語言與其他符號(hào)資源共同參與意義的構(gòu)建(楊信彰，2009)。文字和圖像都是人們用來識(shí)解經(jīng)驗(yàn)世界的符號(hào)資源，但又存在著顯著的差異。Stockl(2004) 在Rhetoric of the Image書中指出，圖像和文字在符號(hào)的屬性、認(rèn)知取向和語義潛勢等方面存在著顯著的差異。Roland Barthes(1964)指出，圖像所表達(dá)的意義總是依賴于說明文字，圖像不能獨(dú)立的表達(dá)意義。我們認(rèn)為，圖像和文字一樣，都具有共同的語義潛勢，但是他們以各自的語法，以不同的方式來構(gòu)建意義。

一、文字和圖像符號(hào)的共性：社會(huì)屬性

索緒爾指出“符號(hào)具有社會(huì)性”，也就是說文字和圖像符號(hào)都參與社會(huì)實(shí)踐。在此基礎(chǔ)上，Halliday(1978)提出了“語言是社會(huì)符號(hào)”的理論，即語言符號(hào)只是社會(huì)符號(hào)系統(tǒng)中的一種，但在整個(gè)社會(huì)符號(hào)系統(tǒng)中居于符號(hào)主系統(tǒng)的地位。符號(hào)資源是人類在一定的社會(huì)背景和一定的歷史時(shí)期響應(yīng)特定的社會(huì)、文化或經(jīng)濟(jì)需要而創(chuàng)造的意義表達(dá)系統(tǒng)(Halliday,1978)。隨著社會(huì)的發(fā)展，單純的語言符號(hào)已經(jīng)不能滿足人們的傳遞信息和交際目的的需要，需要同時(shí)借助于圖像等非語言符號(hào)資源。文字符號(hào)和圖像符號(hào)系統(tǒng)組成相互連接的可供選擇的網(wǎng)絡(luò)，他們都具有共同的意義潛勢。在特定的社會(huì)文化領(lǐng)域，同樣的意義通?？梢杂梦淖趾蛨D像符號(hào)來表達(dá)。

二、文字和圖像符號(hào)構(gòu)建意義的差異

文字和圖像符號(hào)作為人們構(gòu)建意義的符號(hào)資源，是以各自特有的語法結(jié)構(gòu)來實(shí)現(xiàn)和表達(dá)類似的語義關(guān)系。比如：語言中的行為動(dòng)詞可以在圖像中用向量來表示，語言中的處所介詞在圖像中可以用前景和背景的對(duì)比來實(shí)現(xiàn)。但是，這并不是說語言中所有的語義關(guān)系都可以用圖像來實(shí)現(xiàn)，反之亦然。意義屬于文化，而不屬于某個(gè)特定的符號(hào)系統(tǒng)。從根本上來說，文字和圖像符號(hào)各自表達(dá)的語義關(guān)系是由特定的歷史文化時(shí)期和他們各自本身所固有的內(nèi)在意義潛質(zhì)和局限性等因素共同決定的。圖像符號(hào)的使用領(lǐng)域越來越廣，甚至在某些場所，圖像對(duì)于意義的表達(dá)具有文字無法比擬的優(yōu)越性，比如：在國際機(jī)場，一個(gè)簡單的安檢圖像符號(hào)可以替代幾種語言文字所要表達(dá)的意義。

Halliday將語言可以實(shí)現(xiàn)的意義分為概念意義、人際意義和語篇意義。其中概念意義由經(jīng)驗(yàn)意義和邏輯意義組成。經(jīng)驗(yàn)意義主要通過參與者、過程和環(huán)境成分構(gòu)成的及物性系統(tǒng)來實(shí)現(xiàn)。他將過程分為物質(zhì)過程、行為過程、心理過程、言語過程、關(guān)系過程和存在過程。Kress(2006)將圖像分為敘事圖像和概念圖像。敘事圖像用來描述和展現(xiàn)事件發(fā)生的過程，對(duì)應(yīng)于系統(tǒng)功能語法中的概念功能。敘事圖像的過程可以分為：動(dòng)作過程、反應(yīng)過程、言語過程、心理過程和循環(huán)過程。下面，我們將比照系統(tǒng)功能語法中的六大過程，來探究圖像文字符號(hào)在構(gòu)建經(jīng)驗(yàn)意義方面存在著怎樣的差異。

1.物質(zhì)過程

一般來說，敘事圖像所表達(dá)的動(dòng)作過程可以用文字符號(hào)的物質(zhì)過程來實(shí)現(xiàn)。敘事圖像的及物動(dòng)作過程可以轉(zhuǎn)化為有兩個(gè)參與者的物質(zhì)過程，如：Migrants invaded Australia.敘事圖像不及物的動(dòng)作過程指圖像中只有一個(gè)動(dòng)作者，它可以轉(zhuǎn)化為只有一個(gè)參與者的物質(zhì)過程來實(shí)現(xiàn)，例如：Many people migrated..敘事圖像和語言并不是完全一一對(duì)應(yīng)的關(guān)系，比如：Many of my relative died.其中的many of my relatives不是動(dòng)作者，這個(gè)句子只表示我的許多親戚死了這一事件，并不表示死的動(dòng)作。而敘事圖像只能表達(dá)Many of my relatives were killed.因?yàn)樵趫D像中要表達(dá)某個(gè)人死了，必須要出現(xiàn)動(dòng)作者，即某個(gè)人正在被別人殺害或者某個(gè)人正在實(shí)施導(dǎo)致自己死亡的行為。另外，在英語句子當(dāng)中可以出現(xiàn)第三個(gè)參與者，即受益者(Beneficiary)，比如：Mary gave him the book.其中him是受益者(也叫間接賓語)。而在圖像中不存在第三個(gè)參與者，受益者“him”在圖像中變成了動(dòng)作的目標(biāo)(Goal)，即圖像只能表達(dá)Mary book sends him.

2.言語過程

Halliday的言語過程包括兩個(gè)參與者，一個(gè)是言語者(Sayer)；另一個(gè)是言語的內(nèi)容(utterance)。言語者既可以是人也可以是物，比如The document said that---.言語的內(nèi)容可以由小句來充當(dāng)，并且可以采取直接引語或間接引語的形式。比如：

He said that he had no idea.(間接引語)

He said ‘I have no idea’.(直接引語)

而圖像系統(tǒng)中的言語過程無法表示間接引語，只能表達(dá)直接引語。最常見的表達(dá)方式是把一個(gè)言語泡掛在人物的嘴邊，表示人物說話的內(nèi)容，也就是說言語泡只能表達(dá)：He said ‘I have no idea’.而不能表達(dá)He said that he had no idea.

3.心理過程

心理過程分為感知過程、情感過程和認(rèn)知過程。表示感知的動(dòng)詞有：see, hear等；表示情感的動(dòng)詞有l(wèi)ike, fear等；表示認(rèn)知的動(dòng)詞有know, think等。每個(gè)過程有兩個(gè)參與者，一個(gè)是感知者，另一個(gè)是現(xiàn)象。感知者必須是人或擬人化了的參與者，現(xiàn)象可以是一個(gè)參與者或者是一個(gè)小句。請看下面的例句，其中表示心理過程的動(dòng)詞用黑體標(biāo)識(shí)。

I can feel something on my feet. (感知過程，I是感知者，feel 是感知?jiǎng)釉~，something是感知的現(xiàn)象)

I hate cockroaches more than rats.(情感過程，I是感知者，hate 是情感動(dòng)詞，cockroaches 是感知的對(duì)象)

I remember we were sitting for our analytical chemistry exam.(認(rèn)知過程，I是感知者，remember是認(rèn)知?jiǎng)釉~，we were sitting for our analytical chemistry exam是認(rèn)知的對(duì)象)

相比較語言系統(tǒng)中的心理過程而言，圖像符號(hào)只能實(shí)現(xiàn)感知過程，不能體現(xiàn)情感過程和認(rèn)知過程。Kress 將圖像中的感知過程叫作反應(yīng)過程，它可以分為及物和不及物。及物的反應(yīng)過程包括反應(yīng)者(reactor)和現(xiàn)象(phenomenon)兩個(gè)參與者。前者是指將目光直視觀看者的參與者，而后者是反應(yīng)者目光所指的對(duì)象。如果現(xiàn)象不出現(xiàn)在圖像中，這個(gè)反應(yīng)過程就是不及物的，不及物的反應(yīng)過程類似于行為過程。語言系統(tǒng)中的行為過程用于表達(dá)人的某些生理和心理行為，比如：coughing,staring等。而不及物的反應(yīng)過程只能表達(dá)“看”這一行為過程。圖像符號(hào)沒有語言系統(tǒng)中實(shí)現(xiàn)認(rèn)知過程和情感過程的方式和資源。

4.環(huán)境成分

Kress將圖像中的環(huán)境成分分為地點(diǎn)、方式和伴隨成分。這三種環(huán)境成分在英語語言中都存在，但英語中的環(huán)境成分要豐富的多，我們可以在過程和參與者的基礎(chǔ)上添加許多附加成分，包括時(shí)間(When did it happen?)、目的(what did it happen for)、原因(Why did it happen)等等。

如：In July, I travelled to Hong Kong to meet my relatives.

另外，敘事圖像的循環(huán)過程可以表示事件因子之間互為因果的循環(huán)關(guān)系，而語言中則缺乏相應(yīng)語法手段來實(shí)現(xiàn)。英語句子中的某個(gè)參與者最多只能同時(shí)充當(dāng)兩個(gè)角色，而沒有循環(huán)的關(guān)系。比如：He made them do it. 其中的them既是動(dòng)詞make的目標(biāo)，又是do的動(dòng)作的行為者。又如漢語中的兼語句，我叫他去提桶水?！八奔仁俏业馁e語，又是提桶水的動(dòng)作的發(fā)出者。

三、結(jié)束語

文字和圖像符號(hào)都屬于社會(huì)符號(hào)系統(tǒng)，都可以用來構(gòu)建意義。文字和圖像符號(hào)各自表達(dá)的語義關(guān)系是由特定的歷史文化時(shí)期、他們各自本身所固有的內(nèi)在意義潛質(zhì)和局限性等因素共同決定的。文字和圖像符號(hào)都以各自特有的語法結(jié)構(gòu)來實(shí)現(xiàn)和表達(dá)類似的經(jīng)驗(yàn)意義，弄清他們在意義構(gòu)建方面的差異有利于加深我們對(duì)語言符號(hào)主系統(tǒng)的認(rèn)識(shí)，同時(shí)也為我們今后應(yīng)該選擇何種符號(hào)更有效地傳遞我們要表達(dá)的意義提供參考。

參考文獻(xiàn)：

[1]Barthes. R. Elements of Semiology [M]. Paris：Seuil，1964.

[2] Halliday,M.A.K. Language as Social Semiotic.: The Social Interpretation of Language and Meaning[M]. London:Amold,1978.

[3]Kress,G. & Van Leeuwen, T.,Reading Images: The Grammar of Visual Design [M].London: Routledge, 2006.

[4] 楊信彰.多模態(tài)語篇分析與系統(tǒng)功能語言學(xué)[J].外語教學(xué)，2009，(4).