基于自建多模態語料庫輔助大學英語教學的多維探索

胡翩翩

【摘要】多模態語料庫以語境模型為驅動的包含語言、聲音、圖像、動作等的多媒體語料庫，它對實現大學英語教學的多樣性和生動性，給學生創造多元的英語課堂和貼近現實的第二語言學習環境。本文從多模態語料庫的概念和理論基礎出發，繼而闡述了多模態語料庫的建立和針對大學英語的應用，旨在推進“以學生為中心”的大學英語教學改革。

【關鍵詞】多模態語料庫;Elan;大學英語教學

一、引言

隨著現代信息技術的不斷更新，互聯網與各個領域的結合日益緊密，這也就意味著除了課堂，學生獲取各類學習資源的途徑也越來越多樣，自主學習的實現也將越來越容易。

在此背景下，在語言教學中使用多模態教學模式已經逐漸成為一種趨勢。“多模態手段能夠節省人力物力，能夠提高教學效果，在很多方面優于傳統教學手段”。同時，為進一步提高教師的教學效率與學生學習的方向性，自建多模態語料庫將成為大學英語教學的一個行之有效的輔助，不僅能推進聽說讀寫各種課堂活動的展開，更能進行課后的實時評價與反饋，對學生英語應用能力的提高大有裨益。

二、多模態語料庫的概念及理論基礎

1.多模態語料庫的概念。語言是包含聲音、文字、圖像、符號等多種模態的。語料庫是將大量語言類資源通過科學化處理進行有序存放的電子文本庫，語料庫的三個特點包括：首先，語料庫中存放的是在實際運用過程中出現的語言材料;其次，語料庫是語言知識的載體，不是其等價物;最后，語料庫中包含的有效語料是在原始語料經過加工處理后形成的。

多模態語料庫是建立在言語理論基礎之上，以言語活動為研究對象，以從原始數據中抽取信息和知識為手段，以語境模型為驅動的囊括整個言語活動的語言、聲音、圖像和動作的多媒體語料庫。與傳統語料庫相比，多模態語料庫的語料來源不局限于文本類材料或聽說訓練的原文，而是形式多樣的多媒體資料，如音頻或視頻等。新型多模態語料庫能為大學英語教學，特別是視聽說教學提供豐富的語言資料并還原大量真實的語言場景，從而最大程度地激發學生的學習動機，讓學生可以隨時隨地進行自主學習不受時間和場地的限制，對他們自主學習能力的培養十分有利;在其輔助下，學生能總結出相應的語言規律，成為學習的“主人”。

2.多模態語料庫的理論基礎。

（1）建構主義學習理論。建構主義學習理論認為學生不是信息的被動接受者，而是主動的知識建構者，教師也相應地從教學的中心轉變為學習的指導者和學習環境的創設者。傳統英語教學中，由于受時間和空間的限制，教師總是苦于如何在教室里真實還原第二語言的語境。沒有原汁原味的語境，教學的重點往往集中于語言點的教學，學生語言應用能力的培養效果會因此大打折扣。

多模態語料庫的建立能為教師提供了大量高質量的地道語料，并可將其用于教學供學生學習，不管是課堂教學還是課后自主學習，教師和學生都變得有理可依，有據可循。這種模式與克拉申的“語言輸入”理論不謀而合，學生可根據自身英語水平檢索有效語料，所謂有效語料即對學習者而言在其學習水平之上適中難度的語言資料。

（2）情境認知理論。情境認知理論是在行為主義“刺激 - 反應”學習理論與認知心理學的“信息加工”學習理論后發展起來的一個理論派別。該理論認為語言的學習必須是在一定情境內完成的，所有的教學設計都應圍繞學生展開，使學生在真實的場景中學會并應用知識，大量的真實語境能極大地提高學生的自主學習意識及語言應用能力。多模態語料庫的資源大多來源于現實生活，學生在碰到類似場景時則會更深層次的理解并且更自如的運用所學語言知識。因此，情境認知理論對多模態語料庫驅動的語言學習極具指導意義。

（3）多元識讀教學理念。20世紀90年代，以一批語言學家為代表的新倫敦小組提出了“多元識讀”的概念，以重新認識當今教學的使命以及識讀教學的未來。他們認為在社會文化相互滲透、科學技術變化迅速的今天， 這個概念的提出有兩個重要的理由： 一個是通訊渠道和多媒體的多重性， 二是文化和語言的多樣化日益突出。多元識讀理念提倡利用網絡、圖片、角色扮演等多種渠道和多種教學手段來調動學習者的各種感官，使之協同運作參與語言學習，即多模態教學。多模態語料庫驅動的語言學習作為多元識讀教學的一種形式，讓學生能夠根據學習任務和自身興趣搜素多模態語料資源，引導學生自發地總結語言特征。這種學習模式突破了傳統被動接受的學習方式，有利于培養學生的思辨思維和自主學習能力;同時，多模態語料庫驅動式的語言學習能利用多模態語言資源充分調動學生的各個感官進行主動學習。這種學習方式改變了“單純依賴詞語表達意思”的誤區，促進學生進行多模態語言輸出，讓學生接觸到真實的語境，體驗文化差異。

三、大學英語多模態語料庫的建立

1.語料篩選標準。根據大學英語教育的要求和學生的學習興趣，在對語料庫數據進行選擇時需遵循以下四個原則：（1）真實性：優先考慮現代英語的使用和真實語言情境的再現;（2）準確性：語料庫數據的內容需健康積極并符合大學生英語學習的難度;（3）綜合性：從詞匯、句法、語義、語用等方面選取不同題材的多媒體資源以反映語言學習的整體景象;（4）實用性：語料庫數據的主題應具有實踐性，使學生有機會將所學用于實踐，感知東西文化差異。

依照以上原則，大學英語視聽說多模態語料庫適宜選擇英語電影和電視劇作為音視頻材料，如《老友記》、《阿甘正傳》、《神探夏洛克》等，此類資源能真實地反映現實世界，并提供有吸引力的圖片來調動學生的學習熱情。學生在學習過程中能模仿母語學習者的發音，讓其更重視語言的實際應用，同時也讓他們有機會直接感受西方價值觀及文化習俗。

2.語料處理工具。目前常用的多模態語料庫標注與檢索軟件主要包括 ANVIL、Elan、MacVisSTA、DRS、Exmeralda、MCA 等，其中 Elan （ EUDICO Linguistic Annotator） 的功能最為強大，其主要功能包括：（1）顯示語音或視頻信號，并附有注釋;（2）為媒體流等增加時間標注;（3）根據使用者的不同需要進行多層標注;（4）不同種類的文字設定;（5）以不同形式進行輸入或輸出以供進一步的分析標注。若將Elan用于教學，其標注功能和對音視頻的控制功能則能完美體現。首先，它可以對音、視頻文件進行多層標注，在自建語料庫時需提前設置好不同層面的標注信息，并根據每層的“語言學類型”以界定其層級屬性，Elan主要包含五種語言學類型，即：None（獨立層）、Time subdivision、Symbolic subdivision、Included in 以及Symbolic association.教師可根據需要選擇不同的標記及檢索方式。其次，教師可對不同的語料進行自定義標注，特別是一些具個人特色的特殊文字和符號，這不僅方便后期檢索，更能大大降低標注的錯誤率。再次，Elan能對視頻片段的播放速度進行控制，被標注文件可呈現多重顯示方式并且可以任意的重播。這給教學帶來了極大的便利性。

3.語料處理過程。對多模態的語料處理主要分成以下五步。第一步，應下載最新版的Elan軟件并根據電腦的操作系統選擇不同的安裝版本。第二步，雙擊進入Elan并通過點擊其頁面的“文件”后進入下拉菜單中的“新建”選定要處理的語料文件，如TED的演講等，然后雙擊“確定”對該多模態語料進行導入。第三步，完成導入后應立即保存文件，并將系統設置的語料層名“Default”進行修改，如：英文字幕等;隨后選擇“選項”菜單中的“分割模式”將語料根據時間點進行分割并標記出來，如《神探夏洛克》中不同角色的對白;最后選擇“選項”菜單中的“轉寫模式”對劇中的字幕進行改寫。第四步，選擇“選項”菜單中的“標注模式”對語料進行標注，如字幕、詞匯、音標、主題等。第五步，完成標注后，點擊“搜索”便可檢索單個或多個語料文件，其后綴名為“.eaf”，使用者可以對語料進行不同層名的分析比對并可對其播放速度和模式進行隨意控制。

四、多模態語料庫針對大學英語教學的應用

大學英語是高等學校非英語專業的學生所必修的公共基礎課，該課程的主要教學目標是循序漸進地培養學生英語綜合應用能力，特別是聽說能力，使他們在今后工作和社會交往中能用英語有效地進行口頭和書面的信息交流，同時增強其自主學習能力、提高綜合文化素養，以適應我國經濟發展和國際交流的需要。授課過程中，以多媒體教學設備為載體，通過音、視頻資源的播放使學生融入到第二語言的教學環境中，從而提高教學效率并增強學生的跨文化交際意識與能力。本文將以大學英語視聽說教程為例探討多模態語料庫在教學上的應用。該教程以聽說能力培養為導向，在聽說訓練中強化學生對詞匯以及句法的掌握，以高頻輸入的方式帶動輸出，使學生的詞匯量提升，口語交際能力增強，繼而提高英語綜合運用能力。

大學英語視聽說教程每一單元分為兩部分：listening and speaking 和video course. 每個部分的練習前都有詞匯作為鋪墊，進而讓學生根據音頻或視頻完成相應的口語或書面練習。以“Fashion”這個單元為例，在listening的這個部分，首先給出了fashion、makeup、hiphop等詞的雙語釋義。在教學時，教師可以嘗試把如“makeup”這樣容易激發起學生興趣的詞作為檢索關鍵詞，在語料庫里通過多層標注匹配相關的關聯詞、圖片甚至視頻，讓單詞生動起來，從而加深學生對該詞的理解;對于“fashion”這樣的多義詞，教師可在語料庫里開啟多窗口播放功能，讓學生自行對比在不同情況下該詞的使用情況，增強學生的詞匯運用能力。在課后的自主學習任務布置方面，教師還可布置學生運用多模態語料庫對詞匯進行歸納總結，包括詞匯的不同發音、固定搭配、詞性變化等，讓學生自主學習能力得到充分鍛煉。Listening這個部分的聽力練習是以音頻為主，每個單元一般有三個音頻，難度逐級上升且沒有字幕。針對這個部分的特點，教師在制作語料庫時，可以用時間軸劃分音頻的播放速度，對于比較難的片段，對關鍵詞進行檢索和定位，便可自動放慢速度進行精聽練習，這對糾正學生的語音語調及聽力水平都十分有用。另外，教師還可運用多模態語料庫主題檢索功能，對相關主題的地道表達方式進行對比，引導學生找到并歸納語言使用邏輯。Video course部分有兩個視頻供學生觀看并完成相應練習。有些視頻的內容過于陳舊且費解，很多學生在觀看一會就會放棄，或者看完不知所云。多模態語料庫中的豐富的語料可以作為該部分的有力補充，如熱門電影電視劇、演講、新聞等，在這其中教師不僅可以對語言信息進行標注，還可對非語言信息進行定位，如表情，動作等，這些多模態信息能加深學生對中西文化的比較和理解，對提高學生的跨文化交際能力有非凡的意義。

五、結語

在大學英語教學中，多模態語料庫能夠利用技術手段為學生提供原汁原味且方便好用的二語習得資料，更有助于培養學生的自主學習能力，這對當前大學英語改革的目標高度吻合，能真正實現讓學生成為學習的主人，對推進我國大學英語教學改革具有重大意義。

參考文獻：

[1]張德祿，丁肇芬.外語教學多模態選擇框架探索[J].Foreign Language World，2013（3）：39-56.

[2]張霄軍.多模態語料庫：搶救瀕危語言的有效途徑.民族語言文字信息技術研究——第十一屆全國民族語言文字信息學術研討會論文集[C].北京：中國中文信息學會，2007：35-41.

[3]溫彭年，賈國英.建構主義理論與教學改革——建構主義學習理論綜述教育理論與實踐，2002（22）：17-22.

[4]馬龍云.基于情境認知學習理論的英語實踐教學改革探索[J].教育探索，2012（8）：45-46.

[5]韋琴紅.多模態化與大學生多元識讀能力研究[J].外語電化教學， 2009（3）：28-32

[6]張振虹，何美，韓智.大學公共英語多模態語料庫的構建與應用[J].山東外語教學，2014（3）：50-55.

[7]何美.大學英語多模態語料庫建設與應用[M].天津大學，2014.