反觀視覺語篇分析框架探析

程錦（洛陽師范學院外國語學院，河南洛陽471022）

?

反觀視覺語篇分析框架探析

程錦
（洛陽師范學院外國語學院，河南洛陽471022）

摘要：視覺語篇分析框架是Kress和van Leeuwen于1996年提出的，雖然該框架獨特的優越性為多模態語篇分析開辟了道路，但其中仍存在兩個問題：視覺語篇中的多種元素并不是都可以置于該框架中進行多模態分析；該框架僅限于視覺模態，這就導致現代化的多模態語篇中經常伴隨出現的聽覺模態在此框架中無處安放。因此應以“依次分析，對號入座”的方式嘗試排除上述兩個問題對多模態語篇解讀的干擾。

關鍵詞：視覺語篇分析框架；多模態；語篇分析

自從話語分析（discourse analysis）被Harris在上世紀50年代提出后，該研究方向引起全世界各地研究者的極大興趣，各種各樣的分析方法和理論不斷被提出，同時話語活動、認知模式和意識形態之間的關系以及話語活動內在的規律也被大量的實例進行了較為詳盡的分析。但是我們從中不難發現一個問題，那就是他們將那些理論和方法僅僅運用于以語言為研究對象的語篇，卻忽視了以其他形式出現的表義單位。

隨著科學技術的飛速發展以及多媒體信息時代的到來，人們不再滿足使用傳統的單一模態進行表達、認知和溝通交流。符號和模態的多樣化以及交際媒體和模態的多元化使得人與人之間的日常交際日趨豐富和便利。與此同時，交際的多模態性使得語篇的構成呈現類似的性質。因此，傳統上文字在交際領域的中心地位受到了多模態話語的強烈沖擊，對話語全方位深入研究和分析的最佳方法不再是傳統的單模態方法，且該方法的單一性也使其在分析現代化多模態語篇中受到極大的限制。通過研究我們發現，語言和其他符號資源能夠共同完成構建，且不同模態和符號可以組合成一個有機整體從而為交際服務。

上世紀90年代，多模態語篇分析理論在西方語言學界逐漸興盛。R.Barthes作為在多模態話語分析領域最早研究者之一，其在1977年發表的論文《圖像的修辭》（Rhetoric of the image）中首次探討了圖像在表達意義上與語言的相互作用；O’Halloran，K.L.（2004）對多模態理論做了探析和建構，并將其應用于數學語篇分析當中；在多模態話語中，Royce，T.分析了不同符號的互補性，并且在第二語言課堂教學實踐中進行了實際應用。國外從事多模態語篇分析的學者以Kress與van Leeuwen最為突出，他們深入探討了多模態現象如何表達意義等，并提出了著名的視覺語法(the grammar of visual design)，由此將拓展了Halliday的語言元功能理論，為視覺語篇提供了分析框架。

一、多模態語篇分析的理論基礎及視覺語篇分析框架

人體有視覺、聽覺、觸覺、嗅覺和味覺五種不同的感官通道（sensory channel），由此可衍生出視覺（visual）、聽覺（auditive）、觸覺（tactile）、嗅覺（olfactory）和味覺（gustatory）模態（modality)。[1]由于人們將模態作為一種交流的媒介或途徑，所以多模態話語其實質就是結合多種模態的語篇。

語篇被Halliday定義為在情境語境中起作用的任何一個語言實例，因此語篇是能夠涉及多模態或者多符號系統的。Halliday更明確指出，語篇既可以是口頭的或者書面的，也可以是其他的表達媒介。

1.模態語篇分析的理論基礎

首先，多模態語篇分析吸收了皮爾斯的符號理論中的對象、媒介和解釋三位一體的思想；其次，從Halliday創建的系統功能語言學中吸收了許多理論構成其主要的理論基礎：（1）沿用了“語言是社會符號和意義潛勢”的觀點，同時認為不能忽略語言之外的其他符號系統或模態等意義源泉。（2）沿用了系統理論，指出語言之外的其他符號系統或模態也同樣具有系統性。（3）接受了三大純理功能，認為除了語言之外，其他符號系統和模態也分別具有人際功能、概念功能和語篇功能。（4）吸收了語域(register)理論，指出語境因素在多模態的解讀之中發揮著至關重要的作用。由此我們可以看出多模態語篇分析的理論基礎主要是Halliday的系統功能語言學，它將主要用于分析語言符號系統的系統功能理論拓展到了多模態語篇的分析之中。

2.視覺語篇分析框架

綜上所述，多模態話語分析是以Halliday系統功能語言學為基石，從而將功能語法拓展到多模態語篇中。Kress和van Leeuwen[2]依此提出大名鼎鼎的視覺語法（the grammar of visual design），該語法將Halliday的語言元功能理論擴展到了視覺模式，由此建立了再現意義（representational）、互動意義（interactive）和構圖意義（compositional）為核心內容的視覺語篇分析框架。

上述的構圖、互動和再現意義分別對應著功能語法的語篇、人際和概念功能。其中構圖意義可以體現多模態語篇的整體輪廓與布局，也就是讀者首先獲取的整體印象，包括三種資源：信息值、取景和顯著性。互動意義涉及情態、社會距離、接觸和態度四個要素，以此來表現圖像制作者、圖像表征的事物以及圖像觀看者三者之間的交際意義。再現意義可分為概念的和敘事的再現兩大類，概念的再現包含分類、分析和象征過程，相當于及物系統里的關系過程和存在過程；敘事的再現則包含行動、反應以及言語和心理三大過程。

二、反觀

自Kress和van Leeuwen于1996年提出視覺語篇分析框架以后，許多學者都將其運用于多模態語篇分析當中，其獨特的優越性為多模態語篇分析開辟了道路。但是，我們認為其中仍存在兩個問題：

a.視覺語篇中的各種元素并不是都可以置于該框架中進行多模態分析；

b.該框架僅限于視覺模態，這就導致多模態語篇中經常出現的聽覺模態在此框架中無處安放。

因此，我們認為不考慮這兩個問題的多模態語篇分析方式都是不妥的。具體說來，視覺模態中經常涉及到的符號系統有圖像、文字和顏色，而真正能用于視覺語篇分析框架的只有圖像符號系統；語言符號系統應該依據Halliday的語言元功能理論進行分析；顏色符號系統中，雖然有時根據特殊情況可以將語篇中顏色的選擇歸結于視覺語篇分析框架下的顯著度，但是也存在顏色的選擇不是為顯著度服務的情況，這時如果依然將其置于該框架下分析就不妥了。另外，若是語篇中不僅涉及視覺模態，還涉及聽覺模態，就更不能將整個語篇置于該框架下進行解讀，因為在該框架中根本找不到聽覺模態的“容身之地”。總之，應該“依次分析，對號入座”。為了清晰可見，我們將上述分析以表1顯示如下：

表1　模態與分析方法對應圖（√表示妥當；○表示不妥當）

通過表1，我們可以清晰地看到涉及不同模態或符號系統的語篇究竟用哪些理論或理論組合方式分析才是妥當的。而縱觀近年來一些學者的相關文章，我們發現其中那些不妥的處理方式也均源自這兩個問題。例如研究視覺詩的王紅陽（2007），閆丹（2009），分析漫畫的魏曉茹（2009），分析圖畫的陳美足（2009）、李美霞、宋二春（2010）；分析廣告的艾小艷、嚴霞（2009）、孔亞楠（2009），分析音樂視頻的張平麗（2009）等等。現將這些學者的相關文章以表1方式展示如下：

通過表1和表2，我們可以看到雖然艾小艷、嚴霞（2009）選用的分析方法和模態相一致，但是分析過于簡單，而且也沒有將顏色符號系統單獨列出討論；李美霞、宋二春（2010）的分析是妥當的，因為水墨畫是黑白的，不牽涉其他顏色，因此主要就是靠筆墨的深淺來說明顯著度。而其他文章均或多或少存在上述兩個問題。

本文通過回顧之前學者的相關文章，發現視覺語篇分析框架雖具有獨特的優越性，為多模態語篇分析

表2　與表1　中的對應情況

開辟了道路，但將其用分析多模態語篇時仍存在兩個問題，唯有通過“依次分析，對號入座”的方式，分別從圖像、語言、聲音和顏色四個方面對集合多種模態和符號系統的語篇進行解讀，方能繞過這兩個問題的阻礙。但是這樣的分析方法雖然可以解決問題，卻顯得有些復雜而凌亂，若能將涉及到的理論知識整合為一，則更能體現語篇整體意義的構建。當然這需要廣大學者的共同努力。多模態語篇分析是一門新興學科，同時也是跨學科的，因此我們需要不斷擴充其他領域的理論知識，這樣才能使語篇的分析更具客觀性，更有說服力。

參考文獻：

[1]朱永生.多模態話語分析的理論基礎與研究方法[J].外語學刊，2007（5）：82-86.

[2]Kress，G. & van Leeuwen，T. Reading Images: The Grammar of Visual Design [C]. London: Routledge，1996.

[3]胡壯麟.語言學教程[M].北京大學出版社，2006.

[4]胡壯麟，朱永生，張德祿，李戰子.系統功能語言學概論[M].北京大學出版社，2005.

[5]朱永生.話語分析50年回顧與展望[J].外國語，2003（03）：43-50.

編輯朱榮華

作者簡介：程錦（1986-），女，河南洛陽人，洛陽師范學院外國語學院，碩士，研究方向為英語教育、外國語言學及應用語言學。

收稿日期：2015-03-06

文章編號：2095-8528（2015）04-075-03

文獻標識碼：A

中圖分類號：H0-0