多模態輸入對二語寫作中內容創造的影響探討

陳睿殷 閆秀娟 馬英超

摘 要：多模態輸入方式能有效將寫作教學從語言應用層面，提升到創造能力引導開發層面，從本質上提高學生二語寫作的思維活躍性。文章通過定性、定量研究分析輸入模態對大學生二語寫作內容創造的影響。研究在使用測量指標的情況下，對比分析“文本+視頻”、視頻、文本等三類輸入模態下大學生寫作內容中的創造力，發現多模態輸入下的作文內容創造力在流利性、新穎性、靈活性及豐富性等方面均優于單模態輸入下的作文內容創造力。

關鍵詞：多模態;輸入模態;二語產出;協同效應;英語教學

中圖分類號：G642 文獻標志碼：A文章編號：1008-3561（2022）01-0114-03

近年來，多模態輸入模式在二語習得領域引起廣泛關注，一些研究圍繞多模態輸入對二語寫作的影響展開。本研究旨在調查輸入模式對大學生的二語寫作創造力的影響，順應了這種趨勢。讀后續寫是一種新興的寫作練習模式，其操作方法是將一篇短文的結尾抹去，讓學生閱讀截留部分，并要求學生在理解截留部分的基礎上續寫，以補全內容，使短文完整。筆者將多模態輸入方式與讀后續寫有機結合，通過不同輸入模態（單模態輸入、多模態話語輸入）來對比輸入模態對二語寫作中內容創造的影響，以期找到最有利于學習者的多模態輸入方法，從而為大學英語教學提供有參考價值的調研信息。

一、關于多模態輸入和讀后續寫的研究概述

1.多模態輸入

對于“多模態”一詞的定義，顧曰國教授認為，模態即人類通過感官（如視覺、聽覺等）跟外部環境（如人、機器、物件、動物等）之間的互動方式。用單個感官進行互動的叫單模態，用兩個感官進行互動的叫雙模態，用三個或三個以上感官進行互動的叫多模態。人類利用三個或三個以上的感官與外部環境互動就稱作多模態互動方式，而多模態互動教學法則由多模態互動方式衍生而來。王炤教授提到，多模態的概念產生于現代信息技術高度發達的背景下，指的是在教學過程中，通過教學主體與客體、客體與客體之間的相互作用來實現教學參與對象之間的多向互動，如師生互動、生生互動等。吳玲娟老師在文獻中提到，模態是以媒介為物質基礎的，多模態教學模式必須與多媒體學習相結合才能實現效益最大化。在多模態互動教學中，教師需通過多媒體設備，綜合利用語言文字、圖像、聲音、動畫、色彩、表情及其他符號資源，來激發學生的視、聽、觸覺多種感官協同運作，能更有效地提高學生的閱讀、聽力和口語等語言水平。戴勁教授在其研究中提到，聽力和閱讀是兩種最主要的語言輸入模式，也是接受性語言技能最基本的教學和訓練形式。就話語理解而言，聽覺提示固然很重要，但聽者同時還需要借助一些非語言性提示，因為語言信息與非語言信息通常是相輔相成的。視聽教學法的特點是在提供聽覺語言輸入的同時，還為學習者提供視覺輸入，這便是其優勢。綜上所述，在視覺輸入、聽覺輸入等多種信息源的協同刺激下，外語學習者的學習積極性會有所提升。本文主要探討多模態輸入方式對激發學生在二語寫作創造力方面的作用。

2.讀后續寫

20世紀90年代末，外語界首次提出外語寫長法（王初明2000）。隨著“學伴用隨”原則（王初明2015）提出后，讀后續寫的理論意義逐漸被外語學者及教師所認識，其應用價值被重新挖掘。讀后續寫被視為促學外語最有效的方法之一，因為讀后續寫使得學習者必須與閱讀材料及其作者互動，從而向本族語者學習并在本族語境中學習地道表達（王初明 2012）。但讀后續寫同時也具有不足之處，這是因為閱讀材料是靜態的，動態特征不如雙向互動的對話明顯，不能有效地向學習者提供即時反饋，所以這對學習者的學習自主性要求較高（王初明，2012）。以往有關讀后續寫的實證研究大都停留在單模態輸入及雙模態話語輸入，鮮有多模態輸入。本次研究的創新之處在于通過不同輸入模態（單模態輸入、多模態話語輸入）來對比輸入模態對二語寫作中內容創造的影響。

二、多模態輸入對二語寫作中內容創造影響的實驗設計

1.測試的對象

本次研究的被試（測試的對象）是廣州某高校商務英語專業三年級的5名學生。他們都通過了大學英語六級考試，且成績都在500分以上。這5名學生通過不同模態輸入，先后經歷了兩次英語讀后續寫，即多模態輸入讀后續寫和單模態輸入讀后續寫。

2.實驗過程

本次實驗采用線上寫作與線下采訪相結合的方式。線上寫作任務在批改網完成，這5名被試先后完成2次續寫任務。其中，故事一是一篇魔法小說的節選，被試在看完文本后再看一個小視頻（與故事一內容完全一致）;故事二則是世界名著《金銀島》的節選片段，被試在看完文本后直接寫作。這兩篇故事難易適中，故事情節引人入勝，生詞較少，適合被試當前英語水平。這兩篇英語故事篇幅為370詞～ 385詞，被試續寫詞數要求不少于220詞，不限時間完成。

3.作文內容創造力測量

由于外語界對于創造力的定義說法不一，經研究人員討論，本次實驗將分別從以下四個測量指標統一對被試作文內容進行創造力評判。

（1）流利性：過程視角的寫作流利性主要理解為產出語句的輕松自如程度，作文內容的流利性將通過每篇作文中包含的情節個數來評判。

（2）新穎性：寫作新穎性是指內容創造的“前所未有性”。在本次評判中，內容創造的新穎性將側重每篇作文中包含的新的人物和場景個數。

（3）靈活性：寫作靈活性是指安排寫作內容的方式、方法及藝術性，具體測量指標將通過每篇作文中包含的新的人物關系及不同視角的數量來評判。

（4）豐富性：詞匯豐富性對二語學習者寫作評分具有顯著影響。本次評判將從每篇作文所包含的形容詞與副詞的數量來測量內容創造的豐富性。

三、多模態輸入對二語寫作中內容創造影響的數據分析

對于流利性、新穎性、靈活性三個方面的創造力指標，本次評判采用兩位統計員分別人工點數的方式統計，最終個數取兩位統計員點數數值的平均值。而對于豐富性這一指標，研究小組借助工具Tree Tagger與AntConc3.4.4.0進行詞性統計。最后，統計員再應用描述統計和定性分析相結合的方法對大學生不同輸入模態下對英語續寫任務的看法進行評判。

四、多模態輸入對二語寫作中內容創造影響的實驗結果

1.實驗工具

本次研究先使用工具Tree Tagger（詞性標注、詞型還原的工具）對被試作文進行詞性編碼，再使用AntConc3.4.4.0（語料庫檢索軟件）處理被試作文文本。

2.結果分析

（1）兩組作文的流利性對比分析。多模態組所包含的情節個數平均值為3，而單模態組所包含的情節個數的平均值為2.6。由此可見，在多模態輸入的影響下，被試能夠想象出更多的故事情節，使得其所完成的作文內容相對豐富。相比之下，單模態輸入影響下被試所輸出的內容情節較為單一。這說明多模態輸入有利于作文內容、故事情節的創造。另外，多模態組中有80%的學生采用對話形式作為續寫的開頭，這一點延續了視頻中人物的對話，而單模態組學生的作文開頭則各式各樣。由此可見，多模態輸入為二語寫作的內容創造提供了良好的情境背景，有利于學生較為輕松地完成寫作任務。

（2）兩組作文的新穎性對比分析。多模態組中有2名學生引入了新的場景，1名學生引入了新的人物;而單模態組中只有2名學生引入了新的場景。由此可見，兩組新穎性都有所欠缺，但是相比較而言，多模態組略勝于單模態組。

（3）兩組作文的靈活性對比分析。多模態組包含的新的人物關系數量為8個，全部采用第三人稱視角續寫，這與故事一的敘事視角相吻合。單模態組包含的新的人物關系數量為4個，其中有80%的學生延續了故事二的第一人稱視角，只有1名學生采用了第三人稱視角。實驗數據表明，多模態組在作文內容創造的靈活性方面明顯高于單模態組。多模態輸入通過把故事人物角色的動作、語言和神情形象化、可視化地表現出來，為被試提供了更多寫作內容的細節，幫助他們較快建立角色關系，從而幫助被試更加清晰地了解文章的主要內容。

（4）兩組作文的豐富性對比分析。多模態組所包含的細節個數平均數為41.4個，而單模態組所包含的細節個數平均數為38.2個，多模態組略高于單模態組。因樣本數量較少，該項仍需日后深入研究。

（5）兩組作文整體對比分析。總的來說，多模態輸入下的作文內容創造力在流利性、新穎性、變通性及豐富性等各方面均優于單模態輸入下的作文內容創造力。

五、多模態輸入對二語寫作中內容創造影響的討論內容及結論分析

主觀上的“創造”和客觀模型所規定的“創造”不具有同一含義，人的標準、心智的標準，和機械的標準、羅格斯式的標準有非常大的差異。受試者在采訪中表達出強烈的創造欲望，對于文章續寫有著獨特的視角。特別是他們提到，視頻有助于學習者從文章中學習到新的詞匯含義，理解人物形象，提供新的解讀視角，發揮想象力寫作，這些想法與實驗理念是一致的。這說明多模態輸入對于激發學生的創造性有所裨益。另外，實驗中對結論產生負面影響的與靈活性和豐富性有關的人稱視角和情節處理不一定適用于創造性續寫。

根據討論內容，本篇依次得出以下分析結論。1）在教學中仍然要以人文的標準為主，盡量從人的角度看待創造性語域和創造力范疇。2）多模態輸入對發散性寫作的影響應試行更積極的標準，打開寫作教學中關于“創造”的視野。3）在實際教學的早期階段，仍有必要把學生詞匯的充分使用和場景的豐富化作為學生創造力發展的標準。這一點可以通過詞匯問卷、閱讀問卷等方式在教學中實現量化可控的研究。4）在教學中要體現實驗理念的多模態輸入對學生寫作創造力激發的四個標準，還需要更多樣的訓練方法和更開放的寫作手段。5）在實際教學中，創新教學依然要和傳統教學一樣有必要的獎懲機制，比如要求寫作和平時成績掛鉤，以課堂限時的方式完成，隨機抽取人員上臺介紹自己的寫作想法等，以此提高學生學習的積極性和主觀能動性，減少學生的抵觸心理。這種做法應該能為后續的研究帶來更理想的結果。

綜上所述，多模態輸入對于激發學生的寫作創造力有積極的影響，教師在實際教學中應繼續采取多模態輸入的寫作教學方法，來提高學生二語寫作中的內容創造力。

參考文獻：

[1]蘇冬涼.多模態視角下高校英美文學課翻轉課堂教學模式構建[J].黑河學院學報，2021（01）.

[2]申旭娜.感知學習風格與任務模態配置對漢語學習成績的影響[D].北京外國語大學，2020.

[3]吳靜靜.基于ELAN的多模態話語分析——以第九屆“外教社杯”全國高校外語教學大賽獲獎視頻為例[J].湖北文理學院學報，2020（12）.

[4]蔣新莉，吳紅云.二語寫作元認知體驗研究述評[J].西安外國語大學學報，2017（04）.

[5]裘瑩瑩，馬廣惠.二語寫作中同伴反饋研究述評[J].西南交通大學學報：社會科學版，2017（04）.

[6]李紹鵬，楊連瑞.二語習得“以寫促學”的理據及其路徑[J].北京第二外國語學院學報，2019（03）.

[7]孫厭舒，王俊菊.二語寫作體裁教學研究的回顧與反思[J].解放軍外國語學院學報，2015（01）.

[8]張福慧，夏文靜.二語寫作思辨能力教學策略[J].東北師大學報：哲學社會科學版，2012（05）.

Exploration of the Influence of Multimodal Input on Content Creation in Second Language Writing

Chen Ruiyin， Yan Xiujuan， Ma Yingchao

（School of Foreign Languages， South China University of Technology， 510000， China）

Abstract： Multimodal input can effectively promote writing teaching from the level of language application to the level of creative ability guidance and development， and essentially improve students' thinking activity in second language writing. This paper analyzes the influence of input mode on college students' second language writing content creation through qualitative and quantitative research. Using the measurement indicators， this study compares and analyzes the creativity of college students' writing content under the three input modes of "text + video"， video and text， it is found that the creativity of composition content under multimodal input is better than that under single-mode input in terms of fluency， novelty， flexibility and richness.

Key words： multimodal; input mode; second language output; synergy; English teaching