多模態對外漢語課堂教學研究與案例分析

韓蓉

摘? 要：模態是人與人之間交流的渠道和媒介，人類的交際活動具有多模態性。以多模態話語分析理論為基礎，通過對中國文化課中各種模態的研究，探討對外漢語課堂教學中加深外國學生對漢語與中國文化的認知理解及融入中國文化語境的多模態教學方式。

關鍵詞：模態;多模態話語分析;對外漢語教學

人們在使用語言的同時，還會伴隨許多非語言的交際。在交際過程中，交際雙方將視覺、聽覺、觸覺、嗅覺和味覺等各種感官調動起來，以實現成功交際。對外漢語教學是對外國學生進行的以漢語作為第二語言或者外語的教學，其中也包括中國文化的教學。其根本目標是培養外國學生的漢語交際能力。一般在課堂教學過程中，漢語教師多采用漢語作為媒介語，其優勢是為外國學生創造了目的語交際環境，但不足是在認知方面，學生用非母語去學習復雜抽象的漢語與中國文化知識，難度較大。那么，漢語教師如何幫助留學生認知漢語與中國文化，增強他們對中國文化語境的融入感？用什么樣的方式講好中國故事？本文以多模態話語分析理論為視角，通過對中國文化課中各種模態的研究，為上述問題提供一個新的解決途徑。

一、多模態話語理論

（一）理論概述

多模態話語分析理論興起于20世紀90年代，該理論從系統功能語言學理論那里借鑒了元功能理論，認為圖像、聲音、動畫、顏色等非語言符號同語言一樣都能夠體現一定的意義，實現三種元功能，即概念功能、人際功能和語篇功能，主要分析交際符號的不同模態、各種模態之間的相互關系、它們所體現的整體意義及其特征和功能。李戰子（2003）最先將多模態理論引入中國，之后許多學者對多模態話語分析理論進行了深入研究。胡壯麟、董佳（2006）通過對一次競賽中PPT演示的語篇分析，探討了PPT在圖像、音響等模態中如何參與主題意義的表達。顧曰國（2007）界定了“單模態話語”“雙模態話語”或“多模態話語”。朱永生（2007）認為，模態主要包括語言、圖像、音樂和技術等多種符號系統。張德祿（2009）指出，多模態話語是運用視覺、聽覺、觸覺等多種感覺，借助語言、聲音、圖像、動作等多種手段、符號、資源等進行交際的現象。

（二）模態的分類

關于模態的分類，新倫敦小組（1996）將模態資源分為語言、視覺、聽覺、身勢和空間模態。Forceville（2009）將模態與人類的五種感官系統聯系起來，分為五種模態：聽覺模態、視覺模態、觸覺模態、嗅覺模態和味覺模態。張德祿（2009）將模態分為語言和非語言兩種。語言包括伴語言和純語言，伴語言主要包括音響、音調、字體和布局，而純語言又分為聲音和文字。能夠表達意義的非語言模態主要包括人們的身體動作和使用的工具、環境等其他非語言手段。

Thibault將模態分為“靜態模態”和“動態模態”，前者主要包括文字、圖片、表格、繪畫等，后者主要包括面對面的互動、動畫、電影、使用錄像機等。胡永近（2018）將模態系統分為兩個層次或三個層次的符號系統。如交通信號系統是由意義和圖符兩個層次組成的符號系統;而語言屬于三個層次的符號系統，分別為音系層、詞匯語法層和意義層。胡永近又按維度將模態分為四種：口語和書面語等線性的是一維的，平面圖畫是二維的，立體圖形和實物三維的，四維的則是動態的，例如電影、動畫等。上述研究者從不同角度對模態進行分類，有助于人們了解模態的各種特性。

二、外語課堂教學中的多模態研究

（一）外語課堂教學模態分析

近年來，多模態話語分析理論被廣泛應用于各種研究，多模態外語教學就是其中之一。郭萬群（2013）將英語課堂教學模態分為八類，分別是聽覺、視覺、觸覺、嗅覺、味覺、附感覺、潛感覺、視聽雙模。其中前面三大類又分為若干小類，并認為不同的課堂教學主模態與輔模態是不同的。

在英語課堂教學模態中，聽覺模態中的語音是學生聽課及互動中接受信息的主要模態。副語言指交流過程中用來協助語言傳遞信息、表達情感、表明態度的非言語行為，主要包括語調、口音、語氣、音色、音質、音強、語速、停頓、節奏、填充音、聲響等。副語言有利于師生互動和學習情感遷移，強化教與學的效果。觸覺模態中的計算機模擬，是指通過觸摸計算機輸入設備這種感知方式來進行自主學習，人機互動也是重要的學習模式，它有助于學生自主學習、展示學生學習成果。味覺與觸覺模態很少出現在課堂教學中，但會輔助教學，主要出現在附感覺與潛感覺中。附感覺是指信息接受者在感受與媒介直接相關的話語模式的基礎上，通過其他感官呈現的模態形式，如聽老師講解“北京烤鴨皮脆肉嫩”時，學生運用聽覺模態的同時，會產生對烤鴨的味覺，即附感覺。潛感覺是指潛意識地感受到并未呈現出來的另一種模態。如學生在聽老師講“北京烤鴨”時，頭腦中也會出現烤鴨的形象。視聽雙模，指課堂話語中“邊聽邊看”的視覺、聽覺雙模態并用。

王祖嫘（2016）將美國中文沉浸式課堂的話語模態分為四大類：視覺、聽覺、觸覺和空間。其中視覺模態又分為文字、體態語、圖像、視頻、表意符號;聽覺模態分為有聲語言、音樂、其他音效、節奏韻律;觸覺模態分為肢體感應、人人接觸、人物接觸、環境接觸;空間模態分為靜態與動態。這些模態的運用主要是針對兒童的漢語教學，具體、形象、感性的視覺模態更有助于兒童的認知與理解。其中視覺模態中的表意符號是指非圖片或圖畫的由教師在課堂使用中賦予新意義的符號，比如用幾何形狀的教具代表蘋果、蝴蝶等。聽覺模態中的節奏韻律是根據兒童機械性記憶較強這一特點，表現為與語言內容結合在一起的兒歌、詩朗誦等形式。觸覺模態中的肢體反應是根據兒童模仿能力強這一特點，體現在學習過程中，兒童經常模仿教師或視頻錄像中的肢體動作;通過感知和協調自己的肢體，幫助學生理解意義。人人接觸是指師生之間或生生之間通過悄悄話、拍手游戲、角色表演等實現的;人物接觸是指讓學生接觸教具類的實物、卡片等;環境接觸是使學生與課堂環境中的張貼畫、海報等接觸。

由此可見，無論是英語還是漢語的第二語言教學，課堂教學都以聽覺、視覺、觸覺作為共同的模態，其中聽覺、視覺是最為主要的模態，這在心理學的研究中也可以得到證實。項國雄（1997）指出，各器官所獲得的信息比例是不同的，其中通過視覺可獲取83%，聽覺可獲取11%，觸覺只能獲取1.5%，嗅覺可獲取3.5%，味覺只能獲取1%。研究數據顯示，視覺與聽覺可獲取高達94%的信息，這也說明獲取知識主要依靠聽覺和視覺模態。

（二）多模態的組合原則

多模態組合不是模態越多越好，而應該考慮經濟原則。因此，多模態組合的選擇要達到最優化原則和經濟原則之間的平衡。張德祿（2010）在研究多模態外語課堂教學設計中，提出最佳效果原則，包括有效原則、適配原則、經濟原則。多模態組合選擇的最終目標是發揮多模態組合優勢，促進外語教學質量的提高。一般來說，教師選擇某種模態會基于以下三點的考慮：第一，是否意義上能夠補缺;第二，是否能起到強化的作用;第三，是否能引起學生的關注。這樣多模態組合才能發揮更大的教學效果。

三、中國文化課“京劇中的道具”多模態教學分析

（一）課程概述

本課程是面向中級漢語水平的留學生開設的專業選修課。通過學習，在認知方面，使學生能夠了解京劇中交通工具的功能和特點，并能運用句型“用……表示……”進行表達;在技能方面，提高學生運用漢語進行歸納總結與概括抽象的能力;在情感方面，增強學生對中華文化學習的興趣與熱情，以及對中國文化情境的融入感。教學以教師有聲語言為主模態，并使用PPT多媒體輔助教學，呈現文字、圖像、視頻、符號等視覺模態與音樂等聽覺模態，并配以馬鞭等實物道具，實現人物接觸的觸覺模態。通過對“京劇中的道具”多模態教學情境的展示，使學生掌握中國戲劇區別于西方戲劇的一大特征，即京劇藝術是通過高度抽象的方式來營造各種意境的。

（二）教學過程中的多模態運用

1.導入環節

教師通過語言導入京劇《打龍袍》車旗的視頻。通過圖像提問、對比的方式，引導學生掌握“用車旗表示車”的表現方式。導入環節運用的模態有：

（1）聽覺模態，主要以教師的有聲語言為主，這是學生聽課的主要模態，如教師的導入語：“京劇有上百年的歷史，是中國三大戲劇之一，接下來讓我們看一段視頻，欣賞一下京劇。”;提問語：“這幾個人在干什么？”“看一下中間這個東西，大家覺得它像什么？”“大家再仔細看一下‘圓中間有什么？這一條一條像什么？”;講解語：“看一下右邊的馬車，是‘車輪，這個道具在京劇里就表示‘車。這個道具就是‘車旗，表示車的旗子。京劇里用車旗表示車，在前邊的這個人是坐在車里，后邊的人是駕車的人，也就是現在開車的司機。這個車旗上只畫了車輪，沒有其他的部分，這就是京劇道具的一個特點。”

（2）視覺模態，這一模態中的圖像具有具體形象的提示作用，使從未接觸過京劇文化的外國學生能在頭腦中形成對京劇的初步認知。此外，教師在凸顯“車旗”時使用了“○”這個符號，紅色“○”可引起學生對重點部分的關注。

（3）視聽雙模，邊聽邊看、視聽雙模態并用，可促進學生學習中國傳統文化的積極性。

2.講解環節

教師先播放《打漁殺家》使用船槳的視頻，并對視頻內容進行提問，引導出“用船槳表示船”的方式，并在PPT中呈現出文字。在車和船的基礎上，引導學生歸納總結“京劇里的交通道具的特點”，即“用物體的一部分表示物體”。這一環節中運用的模態有：

（1）視聽雙模，能夠引起學生對“船槳”的關注。

（2）聽覺模態，教師的語言引導、講解有助于學生對視頻的進一步理解。如提問語：“這兩個人在干什么呢？”“他們手里拿的是什么？”“剛才我們看了京劇里的車和船，車旗用兩個輪子表示車，船槳表示船，大家覺得京劇里的交通道具有什么特點呢？”;講解語：“這個叫‘船槳，京劇里用船槳表示船。他們只有‘漿，沒有船的其他部分?！薄熬﹦〗煌ǖ谰叩奶攸c是：用物體的一部分表示物體。”

（3）視覺模態，通過圖片的對比，有助于學生理解京劇中“用船槳表示船”這一特征。PPT中文字的呈現使學生對漢字產生視覺感知，有利于對漢字字形的記憶，文字也是學生接受知識信息的主要模態。

3.運用環節

教師通過提問，引起學生對“馬”這一古代最為重要的交通工具在京劇舞臺上呈現方式的思考，這是對“用物體的一部分表示物體”的逆向思維的引導與培養，即“馬是用馬的一部分呈現出來的”。通過圖像、肢體動作啟發學生發現正確答案。雖然學生回答有誤，但教師仍給予鼓勵。并讓學生使用“馬鞭”道具進行表演。通過觀看《追韓信》的視頻，加深對“用馬鞭表示馬”的認知與理解。在這個過程中運用的模態有：

（1）聽覺模態，有聲語言是課堂互動中接受信息的主要模態。如提問語：“在古代，馬也是非常重要的交通工具，京劇里用什么表示馬呢？”“會不會讓演員騎著馬上舞臺？”“剛才講了京劇是用物體的一部分表示整個物體，那么是用馬的哪部分表示馬呢？”“看這三個圖，是用哪部分表示馬呢？為什么是馬頭呢？”;講解語：“這就是京劇里的馬，這叫馬鞭。京劇里就用馬鞭表示馬?！薄皼]錯，都有毛。但是你們發現了嗎？馬鞭上的毛多。其實馬鞭就是馬脖子上的毛，用來表示一整匹馬?！薄澳昙o大的人騎馬比較慢，比較穩，這出京劇叫《追韓信》?！?/p>

（2）視覺模態，圖像的視覺感知可以幫助學生理解重點、難點內容?！榜R鞭對應馬的哪一部分”是教學中的難點。教師通過三張馬背鬃毛的圖像來展示出由遠及近、由模糊到清晰的視覺效果，使原本靜態的圖像產生了動態的效果。教師通過肢體動作向學生展示了馬鞭使用的視覺效果。

（3）觸覺模態，是通過人物接觸實現的，即讓學生手持馬鞭道具，這樣的接觸能夠激發學生的興趣，并產生相應的認知或心理效應。

（4）視聽雙模，作為認知負荷理論的重要假設和研究成果，這是積極學習的重要體現。通過觀看視頻，讓學生觀察不同角色——“年輕人”與“老年人”使用馬鞭時的不同動作。

4.結課環節

主要采用聽覺模態中的有聲語言模態，對教學內容進行總結，并布置觀看視頻的作業。如結課語言：“如果大家感興趣，課后可以上網看一下：是誰在追韓信？他為什么追韓信？看看里面是如何騎馬的。好，今天的課就上到這里。”

上述分析表明，聽覺模態中的有聲語言仍是對外漢語課堂教學的主要模態，聽覺模態中的副語言體現在對外漢語教師的發音夸張、語速較慢、停頓較多且時間較長等方面。由于教學對象是外國學生，為了讓學生更好地理解說明性的語言，在進行有聲語言表達的同時，教師會附帶大量的手勢、動作和表情等肢體語言，這些屬于視覺模態。文字、符號、圖片、圖像、視頻等視覺模態，以及人物接觸的觸覺模態等多模態的運用都應參與到課堂教學主題意義的表達中來。這些多模態組合的設計遵循了有效原則、適配原則與經濟原則，在意義上能夠互相補缺，并在教學中起到強化的作用，能引起學生的關注，幫助學生理解中國文化的內涵。

由此可見，多模態對外漢語課堂教學設計可以促進外國學生對漢語與中國文化的認知理解，提高他們的學習興趣，增加學生對中國文化語境的融入感。這種多模態的課堂教學設計不僅能使外國學生“讀懂”中國文化，對于我國青少年了解中國傳統文化也是具有實踐意義的。多模態話語分析理論從語言學及語言教學的角度，為如何在漢語課堂上講好中國故事、傳播中國文化提供了一個新的研究視角。而根據教學對象的年齡、國別等特征，把中國文化教學的具體內容與多模態教學模式相結合，探討不同模態組合的最佳效果，將是我們今后的研究方向。

參考文獻：

[1]Forceville，C.Non-verbal and Multimodal Metaphor in a Cognitivist Framework：Agendas for research[A].in C.Forceville & E.Urios-Aparisi （Eds.） ，Multimodal Metaphor[C].Berlin： Mouton de Gruyter，2009.

[2]New London Group.A Pedagogy of Multiliteracies： Designing Social Futures[J].Harvard Educational Review，1996，（1）.

[3]顧曰國.多媒體、多模態學習剖析[J].外語電化教學， 2007，（2）.

[4]郭萬群.大學英語多模態課堂教學研究[M].上海：上海交通大學出版社，2015.

[5]胡永近.多模態話語分析理論及其在外語教學中的應用[M].合肥：安徽大學出版社，2018.

[6]胡壯麟，董佳.意義的多模態構建——對一次PPT演示競賽的語篇分析[J].外語電化教學，2006，（3）.

[7]李戰子.多模式話語的社會符號學分析[J].外語研究， 2003，（5）.

[8]王祖嫘.論美國中文沉浸式教學的多模態話語[J].民族教育研究，2016，（4）.

[9]項國雄.計算機輔助教學原理與課件設計[M].成都：電子科技大學出版社，1997.

[10]張德祿.多模態話語理論與媒體技術在外語教學中的應用[J].外語教學，2009，（4）.

[11]張德祿.多模態外語教學的設計與模態調用初探[J].中國外語，2010，（3）.

[12]朱永生.多模態話語分析的理論基礎與研究方法[J].外語學刊，2007，（5）.