大學(xué)英語(yǔ)聽力多模態(tài)課件設(shè)計(jì)研究

楊華

（青島工學(xué)院，山東 青島 266300）

大學(xué)英語(yǔ)聽力多模態(tài)課件設(shè)計(jì)研究

楊華

（青島工學(xué)院，山東 青島 266300）

近年來，多模態(tài)分析已經(jīng)進(jìn)入外語(yǔ)教學(xué)領(lǐng)域。衡量教學(xué)課件的理論依據(jù)來源于教學(xué)法、學(xué)習(xí)理論、多模態(tài)等多方面。本文主要從多模態(tài)角度對(duì)大學(xué)英語(yǔ)聽力課件進(jìn)行分析研究，探討多模態(tài)課件存在的一些問題，旨在提供一種衡量大學(xué)英語(yǔ)聽力課件的多模態(tài)可用性的方法，并提出相應(yīng)的多模態(tài)聽力課件的設(shè)計(jì)原則。

多模態(tài)；課件；設(shè)計(jì)原則

一、引言

多模態(tài)話語(yǔ)（Multimodal Discourse）是從20世紀(jì)90年代得到語(yǔ)言學(xué)家的不斷關(guān)注，指的是運(yùn)用聽覺、視覺、觸覺等多種感覺，通過語(yǔ)言、圖像、聲音、動(dòng)作等多種手段和符號(hào)資源進(jìn)行交際的現(xiàn)象（張德祿，2009）。多模態(tài)分析已經(jīng)進(jìn)入外語(yǔ)教學(xué)領(lǐng)域。任何資料的評(píng)定都需要考慮圖片等相關(guān)信息，多模態(tài)課件資料的評(píng)估更需要考慮音頻、視頻、動(dòng)漫等信息。鑒于多模態(tài)課件的內(nèi)容材料與普通印刷學(xué)習(xí)資料的不同，分析過程中考慮到的因素也迥異于教材分析。本文將研究多模態(tài)課件對(duì)信息輸入的影響，提出多模態(tài)課件設(shè)計(jì)的基本原則，并以最佳的方式將各種模態(tài)整合利用。筆者選取調(diào)查對(duì)象為青島工學(xué)院英語(yǔ)專業(yè)的學(xué)生，具有一定代表性，希望此次研究對(duì)英語(yǔ)聽力教學(xué)有所幫助。

二、多模態(tài)課件設(shè)計(jì)的相關(guān)理論框架

眾所周知，教學(xué)中的文本、圖片或動(dòng)畫背景等信息有助于學(xué)習(xí)者建立語(yǔ)境。毋庸置疑，這對(duì)學(xué)習(xí)者在某種程度上說是有益的，但過多的使用多模態(tài)信息可能會(huì)影響學(xué)習(xí)者對(duì)信息的內(nèi)化。根據(jù)Mayer（2005）多模態(tài)輸入理論和Kress（1996）的多渠道交流理論，信息的文本和圖片的相關(guān)程度會(huì)影響學(xué)習(xí)者對(duì)信息的理解。如果文本與圖片是相關(guān)且互相支撐的或者兩者形成鮮明對(duì)比，學(xué)習(xí)者會(huì)更好的理解文本的意義。他們還認(rèn)為，任何與文本無(wú)關(guān)的信息都應(yīng)該刪除，建議避免不相關(guān)的圖像信息，因?yàn)檫@些信息會(huì)分散學(xué)習(xí)者的注意力。學(xué)者提出的另一個(gè)問題是模態(tài)的冗余。他們指出，圖像盡管能夠吸引注意力，激發(fā)學(xué)習(xí)者的學(xué)習(xí)動(dòng)力，但文本和圖像表達(dá)的信息完全一致的話，圖像就會(huì)變得多余。特定媒體對(duì)特定任務(wù)的適用性。就某些任務(wù)來說，一些媒體比另一些更適合。舉例來說，在詞匯任務(wù)方面圖片信息比視頻更有效，因?yàn)榻庾x圖片信息需要付出更多努力。視頻信息則更適合對(duì)文化問題的理解；動(dòng)畫適用于展示做事情的過程；舉例則可以突出文本的某種特質(zhì)。多模態(tài)理論不僅關(guān)注各種媒體的使用，也注重媒體之間的空間、時(shí)間距離。Mayer認(rèn)為圖片應(yīng)該靠近書寫的文本；圖片與聲音相結(jié)合的地方應(yīng)立刻播放音效。

正如學(xué)者們對(duì)多模態(tài)信息的展示的利弊各抒己見，利用多模態(tài)實(shí)現(xiàn)材料的互動(dòng)同樣極為復(fù)雜。Mayer認(rèn)為，互動(dòng)材料應(yīng)引導(dǎo)學(xué)習(xí)者，因?yàn)閷W(xué)習(xí)者積極迅速參與到任務(wù)中來會(huì)表現(xiàn)更好。對(duì)于互動(dòng)任務(wù)的結(jié)果，Mayer主張結(jié)果不應(yīng)只是糾正回饋，應(yīng)該給予相應(yīng)的解釋說明。

三、多模態(tài)聽力課件的可用性設(shè)定及測(cè)驗(yàn)

以上是衡量各種模態(tài)的理論框架，目的是為多模態(tài)課件提供設(shè)計(jì)原則。需驗(yàn)證的第一個(gè)多模態(tài)條件就是材料中的文本與圖片信息的關(guān)聯(lián)程度。課件中的大量資料對(duì)學(xué)習(xí)者來說是一個(gè)挑戰(zhàn)，因?yàn)閷W(xué)習(xí)者需在有限的時(shí)間內(nèi)對(duì)所有內(nèi)容進(jìn)行全部瀏覽，跟上教師的授課進(jìn)度。課件設(shè)計(jì)過程中應(yīng)進(jìn)行客觀考慮，一個(gè)對(duì)所有學(xué)習(xí)者來說很熟悉的圖片可能引發(fā)不同的思維和記憶。

多模態(tài)設(shè)計(jì)框架的第二個(gè)條件是適合任務(wù)與學(xué)習(xí)者的圖片、視頻與音頻文本的結(jié)合。圖片信息的目的是使學(xué)習(xí)任務(wù)的內(nèi)容或語(yǔ)境與口頭文本很好的結(jié)合。雖然有理論指出，文本、圖片和音頻信息的結(jié)合會(huì)分散學(xué)習(xí)者的注意力，降低學(xué)習(xí)者的效率，但實(shí)際操作過程中這些模態(tài)仍被廣泛運(yùn)用。多模態(tài)課件的互動(dòng)性也是設(shè)計(jì)的原則之一，因?yàn)橐呀?jīng)有學(xué)者指出互動(dòng)材料應(yīng)該提供引導(dǎo)或提示，使學(xué)習(xí)者能夠控制學(xué)習(xí)材料，應(yīng)提供解釋性的而不是糾正性反饋，也應(yīng)該使學(xué)習(xí)者完成既定任務(wù)后對(duì)結(jié)果進(jìn)行反思。

為更好地滿足學(xué)生的課堂需求，筆者對(duì)青島工學(xué)院2012級(jí)英語(yǔ)專業(yè)的160人就多模態(tài)課堂設(shè)計(jì)進(jìn)行了調(diào)查，問卷及結(jié)果如下：

從調(diào)查結(jié)果來看，學(xué)生注重課件中文本與圖片信息的互相支撐，但支持避免分散注意力的不相關(guān)圖片。學(xué)生同時(shí)認(rèn)為應(yīng)該突出最適合教學(xué)任務(wù)的模態(tài)，但對(duì)各種模態(tài)的同時(shí)出現(xiàn)態(tài)度不一。對(duì)互動(dòng)材料的要求基本一致，希望教師提供引導(dǎo)，自己控制任務(wù)節(jié)奏并對(duì)任務(wù)結(jié)果進(jìn)行反思。

四、多模態(tài)聽力課件設(shè)計(jì)原則

聽力課前的活動(dòng)不僅僅是為了吸引學(xué)生的注意力，也有助于學(xué)生對(duì)聽力內(nèi)容作出預(yù)測(cè)，因此有必要按照多模態(tài)的方式對(duì)課件進(jìn)行仔細(xì)設(shè)計(jì)。課件設(shè)計(jì)的原則來源與Kress和Van Leeuwen’s（1996）對(duì)閱讀形象的研究，他們認(rèn)為模態(tài)的形式可以引導(dǎo)或誤導(dǎo)學(xué)生的聽力理解，主要突出以下三方面：信息價(jià)值（information value）、突出顯示（salience）、框架設(shè)計(jì)（framing）。

圖1:信息構(gòu)成（Kress&Van Leeuwen,2006:210）

如上圖所示，信息價(jià)值主要在兩方面起作用：從左到右，從上到下。從左到右即水平軸上的信息指的是語(yǔ)言的概念；相對(duì)于邊緣的信息，居中的信息更容易吸引學(xué)生的注意力。突出顯示和框架是密切相關(guān)的，指的是對(duì)信息各要素的不同角度的理解。換言之，一些信息的要素因?yàn)轭伾?、字?hào)或框架的呈現(xiàn)，更容易被覺察到。因此，在課件的設(shè)計(jì)過程中要整體上將重點(diǎn)居中，用不同的顏色、字號(hào)和框架聚焦學(xué)生的注意力。除此之外，筆者認(rèn)為多模態(tài)聽力課件應(yīng)遵循以下原則：

（一）信息化原則

隨著科技的高度發(fā)展，信息網(wǎng)絡(luò)的迅速延伸，多模態(tài)聽力課件所包含的教學(xué)內(nèi)容應(yīng)該與網(wǎng)絡(luò)上的各種信息資源盡享互相補(bǔ)充，傳輸，實(shí)現(xiàn)資源共享。多媒體課件可以進(jìn)行自主鏈接，使得知識(shí)的傳播與傳授不受時(shí)間、地點(diǎn)、空間的限制，教室、單位、家庭、社會(huì)都可以成為學(xué)習(xí)的地點(diǎn)。學(xué)習(xí)時(shí)間可以根據(jù)個(gè)人的情況來定。網(wǎng)絡(luò)技術(shù)的發(fā)展使得書本知識(shí)與課外信息知識(shí)相互交融。多模態(tài)課件設(shè)計(jì)過程中應(yīng)充分考慮這些因素，使其內(nèi)容更加豐富、詳實(shí)、靈活。

（二）開放性原則

多模態(tài)課件的開放性是指課件的教授內(nèi)容不局限于教材上的內(nèi)容，而應(yīng)該對(duì)教材進(jìn)行選擇性的安排、敞開式學(xué)習(xí)。通常情況下，根據(jù)教學(xué)大綱設(shè)計(jì)的課件在單位課時(shí)內(nèi)的教學(xué)內(nèi)容是有限的，而這些內(nèi)容對(duì)學(xué)習(xí)者來說顯然是遠(yuǎn)遠(yuǎn)不夠的。得益于現(xiàn)代信息技術(shù)手段的多媒體、多模態(tài)課件可以適當(dāng)增加課外輔助內(nèi)容，特別是提供更多自主性學(xué)習(xí)方面的內(nèi)容。教師和學(xué)生可以選擇性地使用教材，多模態(tài)的課件兼容并蓄，因而也應(yīng)該是開放性的課件。

（三）多樣性原則

課件內(nèi)容的表現(xiàn)形式也應(yīng)做到多樣化、生動(dòng)化，課件設(shè)計(jì)時(shí)應(yīng)考慮不同形式的練習(xí)。比如使用不同口音來源的語(yǔ)料，讓學(xué)生體驗(yàn)世界各地不同地區(qū)的英語(yǔ)發(fā)音，比較學(xué)習(xí)，融會(huì)貫通。多模態(tài)課件使得傳統(tǒng)教學(xué)話語(yǔ)中抽象的內(nèi)容變得清晰，形成集圖片、視頻、音頻、圖像、文字為一體的教學(xué)環(huán)境。課堂的學(xué)習(xí)氛圍因而變得生動(dòng)有趣，極大調(diào)動(dòng)學(xué)生的注意力和積極性。

（四）互動(dòng)性原則

多模態(tài)課件的互動(dòng)性是指課件的內(nèi)容與學(xué)習(xí)者之間進(jìn)行信息操控、傳播、分享、討論的過程。科技的進(jìn)步，人工智能的進(jìn)步及多模態(tài)信息技術(shù)的發(fā)展，使得聽力課堂訓(xùn)練的互動(dòng)性大大增強(qiáng)，可以實(shí)現(xiàn)教師和學(xué)生之間，學(xué)生與學(xué)生之間、教師與課件之間、學(xué)生與課件之間的互動(dòng)，從而充分實(shí)現(xiàn)多模態(tài)課件的互動(dòng)性。

（五）生態(tài)化原則

近年來，大學(xué)外語(yǔ)教學(xué)的生態(tài)化越來越引起學(xué)者的關(guān)注。很多學(xué)者認(rèn)為應(yīng)該把計(jì)算機(jī)看作是外語(yǔ)教學(xué)過程中必不可少的有機(jī)構(gòu)成部分，而不僅僅是輔助工具，計(jì)算機(jī)網(wǎng)絡(luò)與外語(yǔ)課程進(jìn)行全面有機(jī)的結(jié)合，才能達(dá)到教學(xué)改革的終極目標(biāo)，這是對(duì)教學(xué)模式的生態(tài)研究。從生態(tài)學(xué)的角度看聽力教學(xué)，視聽是學(xué)習(xí)的起點(diǎn)，理解和記憶是認(rèn)知的過程，輸出是目的和結(jié)果，而且這一過程是不斷循環(huán)的。在聽力過程中，學(xué)習(xí)者的口、耳、腦、心等多種感官協(xié)調(diào)一致，相互促進(jìn)，方能完成既定學(xué)習(xí)任務(wù)。筆者認(rèn)為，英語(yǔ)專業(yè)的多模態(tài)課件設(shè)計(jì)也應(yīng)充分體現(xiàn)教育生態(tài)學(xué)原則，揭示教學(xué)規(guī)律。

（六）立體化原則

研究表明，學(xué)習(xí)者同時(shí)受到聽覺和視覺的雙重刺激之后能顯著地提高對(duì)目標(biāo)語(yǔ)的理解（Bahova，1994）。多模態(tài)化的課件可以全方位呈現(xiàn)事物的時(shí)間順序、運(yùn)動(dòng)特征、空間結(jié)構(gòu)，使用各種模態(tài)設(shè)計(jì)出教學(xué)內(nèi)容、教學(xué)目的和要求。因此，多模態(tài)的課件除了通過文字，還可以通過圖像、聲音、表格、圖形、符號(hào)等形式輔助呈現(xiàn)，使得課件內(nèi)容更充實(shí)、更豐富，有利于吸引學(xué)生的注意力，提高學(xué)生的上課積極性和參與度。教學(xué)目標(biāo)可以通過電子、網(wǎng)絡(luò)、遠(yuǎn)程、便攜式終端等媒介和設(shè)備，以手寫、觸摸、朗讀、吟唱、跟讀、表演等多模態(tài)的方式來實(shí)現(xiàn)，從而避免了傳統(tǒng)教學(xué)課件的平面化、單一性等缺點(diǎn)，使課件真正走向全方位和立體化。

五、結(jié)語(yǔ)

本文旨在運(yùn)用多模態(tài)教學(xué)理論及相關(guān)認(rèn)知理論，討論英語(yǔ)專業(yè)聽力課件多模態(tài)可行性研究。通過對(duì)學(xué)生進(jìn)行問卷調(diào)查，分析相關(guān)數(shù)據(jù)，提出設(shè)計(jì)英語(yǔ)專業(yè)聽力的多模態(tài)課件的原則。內(nèi)容生動(dòng)，信息多樣化，生態(tài)、立體、開放式的多模態(tài)聽力課件是我們?cè)O(shè)計(jì)的目標(biāo)，也是提高聽力課堂效率的可靠保證。

（注：本文系2013年青島工學(xué)院董事長(zhǎng)基金項(xiàng)目，項(xiàng)目編號(hào)：2013JY009）

[1]張德祿．多模態(tài)話語(yǔ)分析綜合理論框架探索[J]．中國(guó)外語(yǔ)，2009，（1）：24－30．

[2]Baltova,I.The Impact of Video on the Comprehension Skills of Core French Students[J].Canadian Modern Language review, 1994，50（3）：507-531.

[3]Mayer,Rechard E.When Static Media Promote Active Learning: Animated Illustrations Versus Narrated Animations in Multimedia Instruction [J]．Journal of Experimental Psychology Applied，2005，11（4）：256-265.

[4]Elena Dominguez Romero and Carmen Maiz Arevalo.Multimodality and Listening Comprehension:Testing and Implementing Classroom Material[A].Language，2010，（2）：100-139.

[5]Kress,G and Van Leeuwen,T.Reading Images：The Grammar of Visual Design.London:Routledge，1996.