基于多模態輸入的英語語用功能研究

鄭紅艷，張英利，程麗娟

（河北工程大學 文法學院，河北 邯鄲 056038）

基于多模態輸入的英語語用功能研究

鄭紅艷，張英利，程麗娟

（河北工程大學 文法學院，河北 邯鄲 056038）

文章依據語用學、語言輸入假說和母語學習規律，主要探討多模態輸入法對于語言學習者在語言習得方面的作用；結合課堂實踐，探索適應碎片化為特色的時代的有效的英語語言學習之路。

一、理論回顧

英語語用能力指根據社交語言規則和具體交際情境的要求，語言運用的得體性和理解表達話語的能力（陳新仁2014）。因此，英語語用能力包含兩方面的能力：一、語言語用能力，即有足夠的語料庫來表達和理解；二、社交語用能力，即根據語境、身份、地位、社交規則等非語言因素運用得體語言的能力（Thomas,1983）。前者是語言的施為用意能力，后者是偏重社交規則的理解運用能力何自然（2004）。對于中國的語言學習者來說，學習英語不像學習漢語，因為英語區別于漢語這種圖像符號的語言系統，屬于聲音符號的語言系統，兩種語言的學習機制是有所區別的，因此依賴于多寫多練的漢語學習方式，并不適用于英語語言的習得規律。

Dale(1969: 108)曾經說過：人一般能記住“10%讀到的，20%聽到的，30%看到的，50%看到和聽到的，70%說的，90%說和做的”（張德祿2013），盡管這種說法非科學的統計，但是卻反映出二語習得過程中單獨依靠某一種單一模態，例如讀、寫或者聽是不夠的，理想的學習過程必須穿插加入多種模態的輸入，多模態并舉、相互補充、相輔相成。模態是用某種媒體表達信息的特殊方式（胡壯麟2007），是物質媒體經過社會長時間塑造而形成的意義潛勢 是用于表征和交流意義的社會文化資源(K&V2001);，主要分為五種：視覺模態、觸覺模態、嗅覺模態、聽覺模態和味覺模態，模態通過某種媒介表達具體的社會符號，而社會符號系統除了語言文字之外,還有音響、音調、字體、布局等伴語言符號,也包括眼神、表情、動作等身體語言符號及由PPT、音響、網絡等現代科技所構成的技術符號( 張德祿2009:24)。 特定的某一種模態具有其特殊的功能，對模態輸出對象產生不同的意義潛勢，在具體語境中形成相應的社會符號意義，從而實現特定的交際目的。諸多學者都對多模態的語用功能做出了很多研究，Royce (2002,2007)研究了不同符號在多模態話語中的互補性以及在第二語言課堂教學中多模態的協同性，徐昊晟教授的模因論的語際語用的課堂教學實踐（徐昊晟2015），張德祿先生也對多模態英語教學課堂框架結構進行試驗和探索，楊仙菊的人種志方法語用教學研究也把多模態表現形式作為研究內容，從而提升學習者語用能力交際能力（楊仙菊2015），還有胡壯麟教授的關于社會符號學的多模態化研究，都為多模態輸入的語用功能研究奠定了基礎。

二、多模態資源

多模態資源包括多種方式。首先，模態需要借用媒介完成意義的傳遞和表達：文本、演說、動作表達意義所包含的紙張文字、聲音語調、動作手勢等社會符號需要借用投影儀、音響、電腦燈媒介傳達出來；媒介是表達信息的物理工具胡壯麟（2011），是實現多模態輸入輸出的必要工具。那么在英語作為二語習得目標的前提下，高校英語教學的有效多模態資源主要包括哪些方面呢？以新標準大學英語教材為例，完整的多模態教材分為下面幾類。

(一）紙質教材

配套教材，以新標準大學英語為例，本套教材包含四本基本書：新標準大學英語綜合教程，新標準大學英語是聽說教程，國際交流視聽說教程，文化閱讀教程，從各個層面對主題內容陳述、補充和強化。

（二）演示課件

相關課件，外研社高等教育網站準備了兩套課件，分別從背景知識、積極詞匯、句式特定、篇章結構、寫作特點、中英對照等方面對課文做了全面且充分的闡釋和補充，適合集體授課時演示給學生觀摩學習。

（三）網絡平臺

網絡平臺，外研社為這套教材研發了專業的網絡平臺，更是從多點多面給予教材輔助、支撐、拓展，為學習者準備了充足的語料輸入。而且針對單元主題設計了大量的練習可以選擇，形式多樣，包括人機互動、語音輸入、廣播播放、電影片段、小組討論、單元測試等等，為不同層次、具有不同學習習慣的個體提供了選擇的余地，

（四）其他素材

隨著電子技術和信息技術日新月異的進步和變革，網絡成為大眾獲取知識和了解信息的重要途徑。同時，手機應用，即手機APP可以說是二十一世紀最具有革命性的變革之一，涵蓋生活、工作、學習、休閑、情感、技能、娛樂等等廣泛內容。有關英語的應用軟件也是層出不窮，只要是你需要的，都可以下載安裝應用。

三、多模態輸入的語用功能研究

(一）多元智能發展學說角度下的多模態輸入語用功能研究

語用能力提高的過程是語言智能的發展過程。美國心理學教授加德納推翻了傳統的智商判定方法，他認為人類的智能大體包含九個方面：語言智能、數學邏輯智能、空間智能、身體運動智能、音樂智能、人際智能、自我認知智能、自然認知智能加德納。每個人在這八個方面的智能發展都是不均衡的，而這些智能的發展是相互促進的，也就是說學習過程的多模態化能夠讓人類多元智能活躍起來，達到事半功倍的效果。信息社會的碎片化導致的結果之一即是注意力的碎片化，因而學習方式的單一必然會導致學生注意廣度減弱，會出現走神、白日夢等現象，因而通過多模態手段能夠激活各個方面的智能元素，達到很好的效果。具體說來，即通過多模態的語料輸入與輸出，刺激各個器官功能的活力因子，推動語言智能的發展，反過來，語言智能屬于多元智能中的一項，又能促進其他智能的成長。

（二）克拉申語言學習假說視角下的多模態輸入語用功能

美國南加州大學教授斯蒂芬?克拉申所提出的語言輸入假說論是迄今為止最有影響力語言學理論，輸入的可理解性是整個假說的靈魂，輸入的可理解性具體包含下面三個方面：第一，輸入的語料是語言學習過程的基本內容，這種輸入必須是可理解的，第二，輸入的語料內容必須有趣并且相互關聯，輸入的語言材料越有趣、越關聯，學習者學習效果越佳。第三，輸入的語料必須是是足量的。傳統的英語教學專注于語法結構會造成學習障礙，單純的句式練習，生拉硬套的死背規則起不到良好的效果。

輸入語料形式上越多樣化、內容上越有趣味性，那就越容易理解。在視覺、聽覺、行動的多方刺激下的輸入是優越于單純的語篇語法輸入的，換言之，多模態的語料輸入形式上更具趣味性、內容上更易于理解，數量上更充足，因而滿足克拉申語言輸入假說的條件。下面選取新標準大學英語第一冊第六單元為例來闡釋多模態輸入法與克拉申輸入假說之間的關系。

學習內容：購物英語；

語料輸入形式，一、圖片觀摩和討論：六副圖片，分別展示購物場所、付款方式、貨品分類、店鋪品牌等等，圖片生動形象、活潑風趣；二、標注文字朗讀及解析：對應圖片內容的單詞，詞組和句式；三、語篇朗讀、討論與分析，掌握具體的購物實例；學習步驟：第一步、分組討論，強化購物禮儀、購物詞匯；第二步、模擬視頻，選取電影中的購物視頻片段，通過觀察、模仿、演練，再現視頻內容；第三步、情景對話，設置相應的語言場景，反復演練購物體驗；第四步、通過朗讀、討論、釋疑、復述學習文本。整個學習過程有視覺符號（圖片、文本、視頻、表情），聲音符號（朗讀、討論、模仿），這些東西貼近生活，易于理解，而且形式多樣，滿足克拉申語言學習假說的所有條件，因而學習者對語言的理解和應用能力能夠短時間內取得良好的效果。

（三）從母語學習角度看待多模態輸入的語用功能

嬰幼兒學習語言的成效是人類自身發展的一項奇跡，行為主義者理論歸功于嬰幼兒的模仿能力，通過物理刺激、反應、習慣和強化的方式習得語言，強調了外部環境也就是語言輸入的作用，認知主義理論雖然強調人的大腦中先天存在的語言學習機制的作用，但是也并不否認語言輸入的作用。兩種理論的主要區別在于對于語言學習的內因（學習者）和外因（輸入)的認知的重要性有所區別，但都承認兩者的共同作用促成了語言的習得。具體來看，嬰幼兒的學習過程首先是知識庫的建立，通過消化日常生活中的各種多模態輸入，聲音、動作、表情等輸入逐步積累的一個過程；學習者的知識庫影響他的語言學習體驗，如果學習者對所學語言內容不熟悉，那么這樣的輸入基本上會被當做無效輸入而被忽略。而且母語學習過程中，嬰兒的學習過程中的輸入通常是簡單的，形象的，具有耐心的可理解的多模態輸入，教授者會發出簡單，清脆，甚至夸張的聲音，伴隨微笑、生動的表情、動作模仿、和在方便的時刻實物展示。

很顯然，嬰兒學習語言的方式：利用圖片、視頻、音頻等媒介，并借助表情、語音語調、動作的輔助，是多模態輸入的典型應用。學習者利用多模態的輸入掌握足夠的語料是能夠準確理解和靈活運用這一語言的前提，因而運用大量的多模態資源，創造類似母語學習過程的真實語境，實現學習過程的多模態化能夠幫助學習者達到事半功倍的效果，身臨其境的理解具體的語境，掌握具體的交流原則，運用適當的語言策略，選擇得體的語言，圓滿完成交際任務。

四、結論

在社會的發展日趨迅猛的當代，掌握一門外語是至關重要的，多模態輸入能夠克服目前學習過程中注意力跨度短、缺乏趣味性等困難，是對克拉申語言輸入假說論的具體實踐，也符合當代社會多元智能協同發展的理論，更是母語學習方式的模仿和應用，能夠有效提高學習者的語用能力，是值得推廣和普及的。

[1]陳新仁.基于社會構建論的語用能力觀[J].外語研究，2014(6):1-5.

[2]Thomas.J,Cross-cultural Pragmatic Failure [J]. Applied Linguistics, 1983,4(2):91-112.

[3]何自然，陳新仁.當代語用學[M].外語教學與研究，2004.

[4]張德祿.外語教學多模態選擇框架探索[J].外語界，2013(3):39-46.

[5]胡壯麟.社會符號學研究中的多模態化[J].語言教學與研究，2007(1):1-9.

[6]Kress,Van Leeuwen,Reading Images；The Grammar of Visual Design[M].London:Routledge,1996.

[7]張德祿.多模態話語分析綜合理論框架探索[J].中國外語，2009(1):24-30.

[8]Royce,T.,Intersemiotic Complimentarity:A Framework for multimodal discourse Analysis [C].2007.

[責任編輯 王云江]

A study on the pragmatic function of multi-modality input in ESL acquisition

ZHAGN Hong-yan, ZHAGN Ying-li, CHEGN Li-juan

(Department of Arts and Law, Hebei University of Engineering, Handan 056038, China)

With the rapid development of globalization in information age, China is playing a more and more important role in international affairs, therefore, it is inevitable requirement and trend for intellectuals to have better English pragmatic competence so as to spread Chinese culture. This paper,based on the connotation and era characteristics and characteristics of present generation, following the principles of pragmatics, Language input hypothesis and acquisition of mother tongue, studies and illustrates the linguistic application of multi-modaility input. It applies the theory to classroom practice and explores the effective and efficient approach to language acquisition which concludes that the multi-modality input is a good language learning strategy to understand, organize and use language so as to communicate with foreigners.

multi-modality; pragmatics;language input

10.3969/j.issn.1673-9477.2017.02.026

H319

A

1673-9477(2017)02-083-03

[投稿日期]2017-04-18

河北省社會科學基金（編號：HB15YY056）；河北省社會科學基金（編號：HB15WX031）

鄭紅艷（1977-），女，河北故城人，副教授，碩士，研究方向：英語語言文學。