《遙遠星球的孩子》預告片的多模態協同分析

（江蘇科技大學 外國語學院 212003）

一、引言

時下人們的交際大都是圖、文、聲、動同步進行，以多種模態的形式呈現，使信息傳遞更加快捷、精確、全面，適應時代交際的需求。這種運用多種感覺（聽覺、視覺等）和符號資源（語言、圖像、聲音、動作等）進行交際的現象就是多模態話語。多模態話語分析研究語言和其他非語言的意義系統，突出圖像、音樂、顏色等其他符號系統在社會交際中的地位，能更加全面準確地解讀話語意義，探索人類如何綜合使用多種模態順利進行交際。經過二十多年的發展，多模態話語分析逐漸從靜態語篇轉向對視頻、電影等動態語篇的研究。其中，Baldry等從多模態角度分析了媒體、網頁、電影和廣告等；Bateman和Schmidt提出了系統分析電影意義構建的符號學框架；張德祿提出并運用了動態多模態話語分析理論框架來分析一則電視天氣預報中視聽等模態間協同，發現聽覺模態為主模態，其他模態對其補充或強化；管樂、張嵋琳在張德祿的理論框架下分別研究了兩場Ted演講，發現在演講視頻中，聽覺模態是主模態，其他模態與之協調配合達到具體交際目的；孟凡英從動態多模態話語形式和關系方面分析中國申辦2022年冬奧會劉延東陳述視頻，發現其中各種模態話語的形式（語言、聲覺和圖覺）相互關聯共同實現語篇的整體意義。整體來說，從多模態角度分析動態視頻中交際目的的達成，對人們社會交際產生積極指導作用，是社會發展的需求。

二、動態多模態話語分析理論框架

張德祿基于系統功能語言學提出動態多模態話語分析綜合框架，文化層、語境層、意義層、形式層及媒體層是其五大層面。針對形式層的分析，具體探討了多模態話語的形式及關系，不同模態有實現意義的不同表意形體和語法系統，如視覺模態中有圖像形體和圖像語法，前者是本身可以實現一定意義的圖像項目，后者是不同項目組合后形成的圖像結構體，可體現一定的（更復雜的）意義。且各模態間構成多種協同關系，分為互補性和非互補性兩大類?；パa性關系指一種模態不能充分或全部表達話語的意義，需要第二種模態的補充，其下細分為強化（突出、主次和擴充）和非強化（交叉、聯合和協調）；非互補關系則指第二種模態的出現對第一種模態在話語意義的表現上并沒有大的貢獻，分為內包（整體與部分、抽象與具體）、交疊（冗余、排斥、抵消）、語境交互（獨立、依賴）。

三、《遙遠星球的孩子》預告片的多模態協同分析

（一）語料和語料切分

2011年7月21日CCTV9頻道首播紀錄片《遙遠星球的孩子》的預告片，時長1分34秒。該預告片從醫學、倫理、家庭、工作、夢想等多個角度為觀眾揭開孤獨癥患者獨特的內心世界和生活，嘗試改變社會上“孤獨癥是一種神秘疾病”的刻板印象，立意深刻，引人深思。

作為典型的動態語篇，該預告片以字幕、畫面、音樂、音效等多種符號來進行意義建構，其中視聽兩種模態是否巧妙協同直接影響著預告片的交際目的是否能實現。為了便于分析，首先依據張德祿對動態語篇切分的三個標準（語篇結構、經驗意義、前景化的事物和特征）切分該視頻。在一個語篇中，每個主題下有多個階段，每個階段下又有多個次要單位，隨著語篇內容的發展，主題發生轉變，該轉折點可作為單位切分的界限，也帶來了語篇參與者和情景因素的變化，另外語篇中同主題密切相關的前景化事物和特征在語篇切分時也應考慮。再者，從語篇整體上來看，張德祿指出，每個圖像可以實現一個事件，一系列交際事件形成一個情節，幾個情節可以組成一個故事或者一個作品。由此，該預告片被切分為5個階段，9個步驟、12個情節、19個事件和19個圖像。預告片的開始與結尾分別對應階1和階5，主題發展對應階2和3，高潮部分對應階4。

（二）模態間協同關系分析

該預告片由不同的交際階段構成，各階段有各自的交際目的，從而產生不同的多模態話語交際模式，具體存在提示型、提供信息型和求取注意型三類交際模式。

第一類：提示型交際模式（階1、5）。首先，與舒緩的背景音樂幾乎同時，配音陳坤以緩慢的語調向觀眾詢問“你知道嗎？你身邊每1000個人當中，至少有6個人，他們無法溝通，無法表達，無法互動。”在此階段聽覺模態始終處于前景中，為主模態，同時事件1中灰黑色整體色調下的少年背影（視覺模態）為聽覺模態提供背景信息，起強化突出作用，事件2、3、4依次呈現從窗口遙望的少年沉浸在自己的世界里，不與他人溝通；以奇怪的手勢扭杯子的少年不知要表達什么；在公眾場合直立身子，抬起手臂，雙手合十的少年則不知道如何與他人互動，在這視覺與聽覺模態構成非強化協調關系，共同表達該階段話語的整體意義。接著，在預告片結束部分（事件19），白底色下的藍色字“系列紀錄片；遙遠星球的孩子；首播22：00”以及畫面左上角淺白色英文縮寫“CCTV9 紀錄”構成的視覺模態為主模態，提示觀眾其預告的正片的相關信息，聽覺模態體現在逐漸消去的背景音樂，與視覺模態構成強化突出關系。

第二類：提供信息型交際模式（階2、3、4）。首先，配音周迅將孤獨癥者既害怕身體接觸又怕與人交流的特點向觀眾緩緩道來（事件5、6），緊接著陳坤用數據向觀眾說明孤獨癥者的高患病率（事件7、8），同時構成聽覺模態的背景音樂，一改之前的輕柔舒緩，而是略有些低沉悲壯，引起觀眾情感波動。接著，高潮部分（階4）講述孤獨癥者家長認為孤獨癥者很天真，呼吁社會大眾接受他們（事件11和12），以及孤獨癥者自身坦然接受現狀，積極做出改變（事13、14、15、16），并積極與地球人分享他們的世界（事件17、18）。在這交際階段聽覺模態始終為主模態，推動主題的發展，控制預告片的進程；視覺模態上，事件7和8中呈現一位小男孩的面部特寫和一位在空馬路上莫名奔跑的少年的圖像，沒有傳達新的意義，但具體化已傳達給觀眾的語篇意義，與聽覺模態構成非互補內包關系，其他事件中視覺模態提供具體形象的圖像信息，與聽覺模態共同傳達語篇的整體意義，構成互補非強化協調關系，使觀眾快速準確理解該預告片傳達的交際意義。

第三類：求取注意型交際模式（事件9和10）。在事件9中，不同于之前寫實的畫面，畫風一轉為色調明亮，由顯眼簡潔的圖形（分別代表孤獨癥、大于、艾滋病加癌癥和糖尿?。┖陀⑽目s寫（AUTISM、HIV、CANCER、DIABETES）構成的動畫，一目了然，接著事件10中，代表孤獨癥的人形圖形變大，代表艾滋病、癌癥和糖尿病的圖形從橫排有序排列變為一團，在整個畫面中占比變小，十分明確生動地傳達出自閉癥人數持續增加的語篇意義。在這視覺模態為主模態，處于前景化中，聽覺模態補充和準確其表達意義，兩者結合精確表達出語篇的整體意義，構成非強化協調關系。

表1 《遙遠星球的孩子》預告片的模態協同關系

四、結語

通過以上對《遙遠星球的孩子》預告片的多模態協同分析可見，不同模態有著不同的意義潛勢，不同模態的擴展和組合引起交際語篇整體意義范圍的擴展，例如圖像能夠體現具體形象的意義、增強概念意義表達的精細度，音樂可以增加人際意義的表現范圍，其表達出的細膩情感難以用語言來描述，多種模態的組合使語篇整體意義的表達更加多維立體。此外在不同的交際階段，模態之間的關系不同。在預告片中，聲音起著表達內容、連貫敘事和吸引觀眾的重要作用，除了展示孤獨癥高患病率（事件9、10）和結尾顯示預告的正片信息時（事件19）視覺模態為主模態，其余的都是聽覺模態為主模態，處于前景中。且在整個預告片語篇中，視覺模態與聽覺模態絕大部分處于互補關系（非強化協調或強化突出）中，共同構成完整的語篇意義；在部分事件中，視覺模態與聽覺模態構成非互補內包關系，視覺上的圖像沒有提供新的信息，但使聽覺模態提供的信息更加具體形象。多種模態的配合，聚集了多種模態的表達優勢，多方位迅速地傳達意義，使預告片語篇交際更加多元和真實，引起觀眾的情感共鳴、加深觀眾的印象，從而達到吸引觀眾的目的。