多模態互動的大學英語視聽說教學

韓穎

(廣州醫科大學 外語教研室，廣東 廣州 510182)

多模態互動的大學英語視聽說教學

韓穎

(廣州醫科大學 外語教研室，廣東 廣州 510182)

鑒于聽說能力培養在大學英語中的重要地位和信息化社會對人才培養的新要求，以多模態教學理論和建構主義學習理論為基礎建立多模態互動的大學英語視聽說教學模式。該教學模式較傳統的英語視聽說教學模式有突出的優勢，具體的教學設計必須以教學模態的關系和教學模態選擇的原則為依據進行，以達到模態協同提高聽說能力的目的。

多模態；大學英語；視聽說教學；模態配合；教學設計

一、前言

2007年教育部高教司頒布的《大學英語課程教學要求》對大學英語的教學目標作了如下規定：“培養學生英語綜合應用能力，特別是聽說能力，使他們在今后工作和社會交往中能用英語有效地進行口頭和書面的信息交流?！盵1]可見，聽說能力是我國大學生英語綜合應用能力培養工作的重中之重。目前，我國各地高等院校普遍開設了英語視聽說課程，但由于教學理念落后和設備陳舊、授課班級規模大、教材編寫以應試為主等因素的影響，英語視聽說課程的教學效果往往不盡人意。比如說，某些高校開設的英語視聽說課程實際只是英語聽力課，教師在課堂上采用 “聽錄音材料——講解練習答案——再聽錄音材料”的單一教學模式，學生在整個教學過程中處于被動和服從的地位，根本無法發揮主觀能動性。教學的過程往往是機械的語言輸入和輸出，過程枯燥乏味，以至于學生缺乏興趣和主動參與的熱情。這種不利于學生英語聽說能力發展的教學模式顯然不再適應時代發展的新要求，亟待改革和創新。

鑒于目前大學英語視聽說教學存在的教學內容單一、教學形式固定、教學方式多為單模態以及學生學習自主性受到限制等問題，本文以多模態話語分析和多模態教學的相關理論為基礎，探討大學英語視聽說課堂的多模態化教學模式，從而提高大學英語視聽說教學的效果,以達到當代數字化信息社會對大學生英語綜合運用能力培養的實際要求。

二、多模態教學的理論基礎

1.多模態話語分析

隨著現代多媒體技術的飛速發展，人類交際活動中的多模態(multimodality)現象越來越普遍，影視、廣告、圖片、音樂等充斥著人們的生活，改變著人們的交流方式和意義表達方式。在當今信息化社會，人與人之間信息傳遞的模式不再局限于以語言文字為主的單模態形式，而是逐漸發展成為以文字、圖像、畫面、聲音、色彩等共同傳遞信息的多模態模式。這樣的背景下產生的多模態話語分析研究興起于20世紀90年代，一批學者以Halliday[2][3]的系統功能語言學為基礎，將語言作為社會符號的研究延伸到語言以外的其他符號系統，并將各種語言和非語言符號看作是各自獨立而又相互作用的意義表達資源，強調在話語分析中重視語言特征的同時關注圖像、聲音和動作等視覺、聽覺和行為符號模態在話語中的作用。該研究領域由O’Tool[4]和Kress & Leeuwen[5]開創，前者嘗試將系統功能語法運用到視覺藝術的分析，后者系統解釋了視覺語法，建立起視覺交流的多模態分析基礎。

我國的多模態話語分析研究始于李戰子[6]撰文介紹視覺語法，之后胡壯麟[7]、朱永生[8]、張德祿[9]等學者紛紛從社會符號學、多模態話語分析的理論基礎與方法以及多模態話語分析綜合研究框架等方面對多模態話語分析理論進行了探討。除了理論研究，學者們還將多模態話語分析的基本理論與英語教學和英語教材編寫結合進行研究。

2.多模態教學理論

信息和網絡技術的發展不僅使公共交流領域的多模態應用日漸增多，也對大學生讀寫能力的培養提出了更高的要求。正如胡壯麟[10]所言，“在人類進入社會符號學的多模態化的新世紀，對多模態讀寫能力的培養應引起重視”。在這種情況下，多模態教學作為一種新的教學理念逐漸發展起來。

這里所說的模態(modal)就是人類通過感觀(如視覺、聽覺等)與外部環境(如人、機器、對象、動物)之間的互動方式[11]。單模態(mono-modal)學習是指學習者僅使用某一感官與外部環境互動；雙模態(di-modal)學習是學習者使用兩種感官與外部互動；多模態(multimodal)學習就是學習者使用三個或以上的感官與外界互動。根據顧曰國建構的多模態學習行為模型，多模態學習分為三個過程：(1)學習者與外部環境互動以獲取信息。學習者獲取信息的途徑為視覺、聽覺、觸覺、嗅覺、味覺、空感和身體仿效等。(2)學習者對獲取的信息進行處理和建構意義。建構意義時，學習者的大腦通過視、聽、觸、嗅和味五組感官處理與外部互動的信息。(3)學習效果通過外部行為表現，學習者獲取實踐能力。這里的實踐能力不僅包括傳統的聽、說、讀、寫、譯等技能，還包括正面交流互動時的體態語。[12]

多模態教學強調培養學習者的多元讀寫能力，主張利用網絡、圖片、角色扮演等多種管道和教學手段來調動學習者的各種感官，使之協同運作參與語言學習。在教學過程中，教師作為組織者通過優化和整合各種多媒體技術條件對學習者的各種感官進行刺激，促使學生對輸入信息進行感知、理解、編碼和儲存。在這個過程中，學習者通過各種途徑獲取和積累的大量接受性知識能為之后有意識和自動化的產出活動奠定基礎。在產出時，教師通過設計各種有利于模態轉換的活動促使學生積極參與意義建構，從而提高學習者對所學內容的內化程度和記憶的持久性，強化學習的效果和提高學習的效率。

3.建構主義學習理論

建構主義學習理論(constructivism)認為學習者所獲得的知識并非教師傳授而得，而是在一定的情境下，通過人際間的協作活動和必要的學習數據而實現的意義建構的過程。學習環境中的四大要素為“情境”“協作”“會話”和“意義建構”。 情境是指學習環境中的情境必須有利于學習者對所學內容的意義建構，教學設計應該以創設有利于學生建構意義的情境作為主要的內容，并應將情境的創設與教學目標相結合。協作發生在學習過程的始終，既包括學習者與自己的協商，也包括學習小組內的協商以及學習者與教師的商榷、討論和辯論。會話是協作過程的必要環節，學習小組的成員必須通過會話商討如何完成規定的學習任務。會話也是達到意義建構的重要手段之一，通過協作過程中的會話，學習者的思維成果能在學習小組內共享。意義建構是整個學習過程的最終目標。學習者獲得知識的多少取決于根據自身經驗建構有關知識的意義的能力，而不是取決于學習者記憶和背誦教師講授內容的能力。因此，在學習過程中幫助學生建構意義就是要幫助學生對當前學習內容所反映的事物的性質、規律以及該事物與其他事物之間的內在聯系達到較深刻的理解。

在建構主義學習理論指導下教學模式是以學習者為中心的，學習者在這個過程中并不是簡單被動地接受外部的刺激和輸入，而是作為意義的主動建構者參與學習。教師在整個教學過程承擔著組織者、指導者、幫助者和促進者的角色，利用情境、協作、會話等學習環境要素充分發揮學生的主動性、積極性和首創精神，最終達到使學生有效地實現對所學知識的意義建構的。而教學過程中使用的媒體也不再是幫助教師傳授知識的手段、方法，而是用來創設情境、促進協作學習和會話交流的手段，也是學習者主動學習和探索的認知工具。

可以說，多媒體和網絡技術的發展為基于建構主義學習理論的教學模式提供了更理想的認知工具，因而將構建主義學習理論作為多模態教學模式的理論基礎之一，體現了教育技術和認知理論的優化結合。

三、多模態互動的大學英語視聽說教學的優勢

現代數字化社會的迅速發展對大學英語教學和大學生英語交際能力的培養提出了前所未有的新要求，大學英語視聽說教學模式的改革因而是勢在必行的。與傳統的英語視聽說教學模式相比，多模態互動的英語視聽說教學模式在教學理念、教學手段和方法以及教學效果方面都具有優勢。具體來說，多模態互動的視聽說教學模式能從以下幾方面促進大學英語教學：

1.有利于提高英語語言習得的效率

與傳統的英語視聽說教學模式相比，教師在多模態英語視聽說課堂中能利用圖像、畫面、聲音、視頻等多媒體材料以多模態的方式刺激學生的各種感官，使學生與外部環境形成互動，促進信息的輸入和加工。通過設計口語或書面形式的活動教師促使學生將輸入的信息用外部行為表現出來，實現聽覺和視覺模態輸入向口語、書寫等模態輸出的轉換。這種模態間的轉換以及信息輸入和輸出處理的循環過程有助于語言知識的習得和記憶水平的提高。

2.有助于學生英語綜合應用能力的發展

在多模態英語視聽說課堂中，教師通過將與教學主題相關的聽力材料、視頻材料、口語材料和閱讀材料進行有機整合，從而幫助學生在聽、說、讀的過程中儲備了豐富的寫作素材，以聽促說、以聽促讀、以聽讀促寫，使教學達到了輸入和輸出一體化和系統化。而且，圍繞同一主題的循環反復輸入與輸出練習，能增加學生對語言形式的敏感度，也能有效解決學生英語口語表達和寫作內容貧乏的問題。這種教學模式不僅促進了學生控制和內化語言知識的過程，而且切實提高了學生的英語綜合應用能力。

3.有利于交際情境的創設和學習積極性的提高

在多模態的英語視聽說課堂上，教師通過將大量豐富的語言信息通過各種媒體以形象生動的方式呈現給學生，為學生的英語學習創造出真實或接近真實的交際情境，使學生身臨其境進行互動、協作和會話，從而有效地完成英語語言知識以及聽力和口語技能的意義建構。并且，這種教學模式降低了學生在英語學習中產生的焦慮情緒，激發了他們的學習興趣，使其享受學習的過程，從而提高學習的效率。而模態間轉換的各種活動，如短劇表演、情景對話、主題辯論、小組討論等不僅為學生的英語口語表達提供了鍛煉的機會，也培養了他們的合作意識。同時，豐富的網絡多媒體平臺還能促使課內教學和課外自主學習的有機結合，提高他們的自主學習能力。

4.有助于學生文化意識的培養

不同文化的內涵不僅體現在語言文字里還體現在各種非語言的符號中。然而傳統的視聽說教學無法體現如動作、表情、身體接觸、空間、色彩等非語言信號所傳達的文化背景知識，但多模態視聽說課堂里的各種可視材料卻能真實、生動和形象地向學生展示說英語國家的人們在日常生活中進行語言和非語言交際的實際情況。這種文化的直觀體驗不但能提高學生英語聽力理解能力和非語言交際能力，而且還能激發他們對相關文化背景知識了解的興趣。

5.有助于學生良好的多模態交際能力的提高

隨著多種模態在交際過程中的普遍應用，僅關注語言知識的英語視聽說教學已經不能滿足時代發展的需要。英語視聽說教學也應該以培養學生的多元讀寫能力為目標，通過多模態化的教學方式幫助學生識別、理解和運用各種模態和交流方式，從而提升其多模態交際的能力, 使其適應現代數字化社會的要求。

四、多模態互動的大學英語視聽說教學設計

教學設計是指教師依據教育教學原理、教學藝術原理，為了達到教學目標，根據學生認知結構，對教學過程、教學內容、教學組織形式、教學方法和需要使用的教學手段進行的策略。從多模態教學的角度說,設計就是所有模態和模態組合的運用，是在某個交際語境中實現話語的手段[13]。因此，在多模態互動的大學英語視聽說教學涉及的關鍵問題就是如何選擇不同的模態相互配合以獲得最佳的教學效果。下面我們從教學模態間關系、教學模態的選擇和配合以及大學英語視聽說多模態教學設計三方面說明如何開展多模態互動的大學英語視聽說教學。

1.教學模態間關系

張德祿[14]將教學模態間的關系總結為互相強化、互相協調、前景背景、整體部分 (抽象具體)等關系。強化關系是指參與交際的第二種或多種模態能讓第一種模態表達的信息更加突出，例如通過多種模態同時刺激聽話者的感官，可以提高交際的有效性。協調關系反映了社會交際的多模態特點，當一種模態不能獨自完成交際任務時可以由其他模態來補充。前背景關系是指每一個交際事件都有處于前景的模態和背景位置的模態，例如在視聽說教學中，聽覺模態際處于前景，背景是由其他模態提供的。整體部分 (抽象具體 )關系是指語言模態在交際時未必能把所有的意義都表達出來，假如選擇適合的模態提供具體的信息將有助于學生更清楚理解教學內容。

從教學模態配合的角度講，如果不同教學模態存在相互矛盾、相互抵消、相互無關和互不銜接的情況，就會產生降低教學效果的可能。正如顧曰國[15]所說，多媒體、多模態教學像是一把“雙刃劍”，處理好可以把學習者的注意力真正集中在知識點上，達到強化記憶力的作用，從而提高學習效果；處理不好反而會分散學習者的注意力，造成對知識點記憶的干擾，導致瞬間“熱鬧”而事后“空空”之感。因此，在多模態視聽說教學設計中如何恰當地處理好模態之間的協同關系，使之更好地服務于聽說能力的提高是至關重要的。

2.教學模態的選擇和配合

根據系統功能語言學的語境理論，情景語境有三個變數：話語范圍(field)、話語基調(tenor)和話語方式(mode)，分別表示交際的題材和內容，交際者之間的關系(地位、態度、情感等)和交際的管道。在英語教學中，這三個變量會體現為教學內容、師生特點和教學條件。具體來說，教學內容涉及課程的知識領域以及要培養的基本技能和素質，是制約模態選擇和教學方法的主要因素。師生特點既包括教師的教學經歷、教學理念、基本能力、知識掌握的情況甚至個人愛好興趣，也包括學生的基本層次、基本特點和學習興趣。教學條件包括空間條件、設備和用具、教學環境以及傳播管道等眾多因素。以上三個變量中，教學內容是制約模態選擇和教學方法的主要因素，教學條件對教學的交際方式也有直接的影響作用。

英語視聽說教學過程中的模態選擇也應該遵循三個原則[16]：(1)為教學提供教學情境和便利條件，提高教學效率。教師應利用現代多媒體技術，將真實的語言學習材料以圖片、錄像、聲音等形式呈現給學習者，為學習者的語言學習建構真實的語境。并且教學內容的輸入應采用多模態的方式，充分調動學習者的多種感觀以促進語言習得。(2)為教學提供輔助條件，提高教學效率。多模態的協同除了可從外部作為教師教學的工具，還能從內部為學習者提供學習的動力，吸引學習者的注意力和提高他們學習的興趣。(3)為多模態話語交際提供多通道話語意義的表達方式。多媒體同時參與一個交際情景，不僅提高了學習者的學習積極性，而且促進了信息的吸收和不斷強化。根據教學模態之間的關系，課堂教學中的模態的選擇應以增加正效應為原則，選擇的目標應為補缺、強化和吸引注意力。

應注意，這里所說的教學模態的配合是包括以下方面的廣義的模態配合：多模態教學內容本身的模態配合，如視頻材料本身就會有包括口語、聲音、肢體語言等的各種模態；輸入模態間的配合，比如由PPT 為載體的模態組合(圖像、文字、錄像和聲音等); 輸入模態和輸出模態之間的配合，如視頻模態輸入和口頭表達模態輸出之間的協同；教師和學生的面部表情和肢體語言；甚至是教學物理條件，如教室的空間布局和教學設備等因素的配合。

3.多模態互動的大學英語視聽說教學設計

在進行多模態教學設計的時候，我們可以遵循以下步驟：首先確定教學目標和內容，其次確定設計的依據(制約設計的基本理念)，再次為教學過程設計適合的階段并根據每階段的目標細化為具體的教學程序和步驟，最后為每個教學過程選擇適合的教學方法并以此為依據選擇適合的教學模態。

大學英語視聽說課程的教學目標是培養學生英語綜合應用能力，特別是加強聽說能力，提高學生的文化素養和跨文化交際能力，從而適應我國社會發展和國際交流的需要，其主要的教學內容是英語語言知識與應用技能、學習策略和跨文化交際。因此，在大學英語視聽教學過程中，聽覺模態應該作為教學的主模態，視覺模態和口語模態為輔助模態，并且以上模態與書面語、圖像、色彩、面部表情、手勢、姿勢和空間等模態形成補充和協同的關系。具體的模態配合應根據不同階段的教學任務和教學方法做出相應的調整，以達到模態協同促進教學效果的目的。下面分階段說明如何進行教學設計。

視聽說準備或引入階段的主要任務是根據教學內容讓學生熟悉相關的背景知識，激發學生對視聽說任務的興趣，啟動學生大腦中的相關圖式。教師可運用ppt將相關話題的文字、圖片和聲音材料組合，對背景知識進行口頭介紹。為了增加學生的參與程度，教師也可以預先布置學生準備相關主題的材料，并在介紹階段讓學生以小組的形式或者報告的形式進行展示。教師也可以讓學生先觀看或聽學習內容的開頭或結尾部分，然后以小組為單位對主體內容進行猜測討論。在該階段，應注意模態配合要以加強正效應和吸引注意力為原則，否則不但不能充分調動學生的感官和激發其學習的積極性，反而容易轉移學生的注意力。

視聽階段的主要任務是幫助學生獲得可理解的語言輸入。在視聽輸入時，聽覺模態是主模態，但視頻、圖片、面部表情、肢體語言、空間布景等模態能給學生提供理解所需的社會和文化背景信息，補充對話人物關系、人物的心情、對話發生場所和天氣環境等各種細節。因此，各種模態的合理配合不僅強化了基本模態——聽覺模態表達的信息，也更直觀和完整地傳達了視聽材料的內容，使學生能更有效地理解輸入的信息。為了促進學生對視聽信息的理解還可以讓學生對視聽的內容中的重點信息進行記錄，將視聽模態轉變為書面語模態，從而加深記憶和提高輸入信息的內化和理解的效果。

視聽后階段的主要任務是鞏固和強化視聽階段所內化的信息并進行意義建構。在該階段教師可以結合學生的記錄進行難點講解，回答問題、內容復述、情景對話、對白模仿、主題辯論和短劇表演等口語活動，幫助學生對在視聽部分儲存在短時記憶中的信息進行重組、編碼后儲存到長時記憶，并通過一定的形式讓學生將所獲得的語言和非語言信息運用在實際交際中，以實現視聽輸入模態到口語輸出模態的轉換。通過這些模態轉換活動，學生能在接近真實的交際情境中進行協作和會話，不僅能更有效地完成英語語言和文化知識的意義建構，也能提升他們的語言綜合應用能力。 此時，課堂活動的主要模態為口語模態，教師和學生的語調、音量、身勢、手勢、表情、動作等模態為輔助模態。作為課后的作業，教師可布置學生進行摘要寫作、事件評論、延伸閱讀和相關視頻和音頻的自主學習等任務，進一步提高學生的視聽能力。

五、結論

針對目前大學英語視聽說教學在教學理念、教學模式、教學內容和教學手段等方面存在的問題，本文從當代數字化信息社會對大學生英語綜合應用能力培養的實際要求出發，以國內外多模態話語研究和多模態教學的相關研究成果為基礎，對大學英語視聽說課程的教學模式進行了改革性探討?，F代多媒體技術輔助下的多模態互動英語視聽說教學模式突破了傳統英語視聽說教學模式的諸多局限，符合了新時期大學生英語綜合應用能力培養的要求，對改變大學英語視聽說教學費時低效的現狀有著積極的促進作用，值得重視和推廣。

[1]教育部高等教育司.大學英語課程教學要求[M]．上海：上海外語教育出版社，2007．

[2]Halliday, M.A.K.Language as Social Semiotic: The Social Interpretation of Language and Meaning [M].London: Arnold, 1978.

[3]Halliday, M.A.K.An introduction to Functional Grammar.London; Baltimore, Md[M].US:Edward Arnold, 1985.

[4]O’ Toole, M.The Language of Displayed Art [M].London: Leicester University Press, 1994.

[5]Kress, G.& Van Leeuwen, T．Reading Images：The Grammar of Visual Design [M].London： Routledge, 1996.

[6]李戰子．多模式話語的社會符號學分析[J]．外語研究，2003(5)：1-8．

[7][10]胡壯麟．社會符號學研究中的多模態化[J]．語言教學與研究，2007(1)：1-9．

[8]朱永生．多模態話語分析的理論基礎與研究方法[J]．外語學刊，2007(5)：82-86．

[9]張德祿．多模態話語分析綜合理論框架探索[J]．中國外語，2009(1)：24-30．

[11][12][15]顧曰國．多模態、多媒體學習剖析[J]．外語電化教學，2007(2)：3-12．

[13]Kress, G.& Van Leeuwen, T.Multimodal Discourse: The Modes and Media of Contemporary Communication[M].London: Arnold, 2001.

[14][16]張德祿．多模態話語理論與媒體技術在外語教學中的應用[J]．外語教學，2009(4):15-20．

InteractiveMultimodalofCollegeEnglishVisual-audio-lingualTeaching

HAN Ying

(Department of Foreign Languages Teaching and Research, Guangzhou Medical University, Guangzhou, Guangdong 510182, China)

In view of the significance of the cultivation of listening and speaking abilities in college English as well as the new challenges faced by undergraduates in the information age, an interactive multimodal college English visual-audio-lingual teaching model is constructed based on theories of multimodal teaching and constructivism. This model has distinct advantages compared to the traditional approach, and the specific teaching design should be based on relations among different modes and the principles of choice of modes so as to achieve the goal of improving listening and speaking abilities through synergy of modes.

multimodality; college English; visual-audio-lingual teaching; synergy of modes; instructional design

2014-07-28

廣州醫科大學科研青年基金項目《大學英語視聽說多模態互動教學模式的研究及實踐》(2012B19)

韓穎(1979-)，女，廣東廣州人，英語語言文學碩士，講師，主要從事系統功能語篇分析和英語教學研究。

H319.3

A

1008-469X(2014)05-0085-05