寫作智能評閱系統在大學英語寫作教學中的應用研究述評

摘 要：本文對2010年至今國內寫作智能評閱系統在大學英語寫作教學中的應用研究進行了分析，相關研究涉及系統信度、反饋語及反饋效果、新型大學英語寫作教學模式構建等方面。文章對相關研究從研究方法、研究對象和推廣性等方面加以概述，指出現有研究的問題所在和此領域未來研究方向。

關鍵詞：智能評閱；大學英語；寫作教學；

作者簡介：管姍姍，碩士，南京曉莊學院外國語學院講師，研究方向為英語語言學及應用語言學。（江蘇 南京 210036）

基金項目：本文系江蘇高校哲學社會科學研究項目“基于PBL的ESP教學行動研究”（編號：2016SJA740013）階段性研究成果。

中圖分類號：G642.0 文獻標識碼：A 文章編號：1671-0568（2018）29-0102-04

寫作技能是英語學習四大基本技能之一，是英語教學重點之一。然而，面對大學英語課堂大班教學、教師評閱量大難以及時反饋、學生學習動力不足的現實，英語寫作一直以來存在費時低效的教學困擾。隨著計算機技術和語料庫語言學的發展，智能評閱系統進入寫作教學領域。相比人工評分，自動寫作評價在終結性寫作考試中可節約大量人力、物力和財力。國外寫作智能評閱系統從20世紀60年代起步，國內起步較晚但近年來發展迅猛。國內寫作智能評閱系統在英語寫作的形成性評估和提高學生自主學習能力方面起到了相當重要的作用。研究寫作智能評閱系統在大學英語寫作課堂的應用有利于構建機器評閱和人工評閱相結合的寫作教學模式，有利于探索高效率新型大學英語寫作課堂。通覽相關文獻，對國內外寫作智能評閱系統的綜述性評述以梁茂成、文秋芳[1]和唐錦蘭、吳一安[2]為代表，此后此類研究尤其對國內寫作智能評閱系統的綜述性評述直缺乏。信息技術日新月異，21世紀初的研究已不能代表當前發展。國內寫作智能評閱系統近年來發展迅速，其在大學英語寫作教學中的應用呈現廣泛而深入的趨勢。

一、寫作智能評閱系統的發展歷程

寫作智能評閱系統的發展經歷了單一分數評定、合作分數評定和人機交互評改三個階段[3]。單一分數評定階段以1966年杜克大學教授Page等人推出的人類歷史上第一個作文自動評分系統PEG為代表和開端，在作文自動評分史上有著里程碑的意義。這一階段的評分系統旨在嘗試解決大規模寫作考試自動評分問題，快速獲得終結性分數。然而，由于當時計算機和語言學發展的局限性，PEG的評價體系只重視語言形式而忽視內容，忽視了作文主題、組織和體裁等語義層面，其評價的是寫作的間接因素。因此，該系統1968年即宣告擱置，進入了長達20年的休眠期。此階段另一代表性系統為IEA[4]，此系統注重作文內容的評定，以范文為訓練集，比較作文和范文的相似性，在一定程度上解決了作文內容評定問題。合作分數評價階段出現在20世紀90年代后，代表系統IntelliMetric，E-rater，BETSY等，尤以E-rater在TOEFL等大型考試中的應用而聞名。此階段系統評分從形式和內容兩方面對作文進行評價，注重評分過程中的質量控制，將機器評分和人工評分結合起來，機器注重語言特征，人工更注重高層次的寫作技巧，在評分信度上較之第一階段有了大幅度提升。第三階段人際交互評改是近十多年才出現的寫作智能評閱系統，以注重評分轉向注重學習者自主學習和錯誤診斷反饋，更好地實現“促學評價”，并最終達到“評估即為學”。國內以“句酷批改網”和“iwrite”為代表，學生提交作文可立即獲得評分和錯誤反饋，學生可多次修改并重新獲得評分。

縱觀2010年以后的國內相關文獻，有關寫作智能評閱系統的研究大致可分為三大類：一是對相關系統評分信度的研究，研究系統評分結果與人工評分的一致性；二是研究國內寫作智能評閱系統對大學生寫作水平的影響，研究寫作智能評閱系統對大學生寫作詞匯、語法、句法等方面能力的影響；三是基于國內寫作智能評閱系統對大學英語寫作課堂的作用，研究構建寫作智能評閱系統與大學英語寫作課堂教學相混合的新型教學模式。

二、寫作智能評閱系統信度研究

國內有關寫作智能評閱系統的信度研究文獻為數不多，現有相關文獻表明，國內寫作智能評閱系統的評分信度較高。在“批改網”評分信度研究方面，何旭良[5]對30篇作文進行人機評分對比研究后認為，“句酷批改網”與人工評分一致性高，但評分顯著偏高。張荔等[6]對兩套CET作文評分標準樣卷共10篇作文進行人機評閱，二者結果呈現很高的相關性。有國內研究者[7]對“句酷網”和“冰果”這兩個平臺的評分效度差異進行了實證研究。對大學非英語專業3種題型作文文本的分析結果表明：“句酷網”和“冰果”的自動評定成績和人工評定成績之間存在顯著的正相關關系，相關程度存在差異，兩個平臺對不同類型作文的評定成績效度之間也有差異。對“iwrite”系統評分信度研究方面，李艷玲、田夏春[8]通過對645篇同題作文人工評分和“iwrite”系統評分對比，認為“iwrite”系統評分信度高，達到可推廣水平。

以上研究在一定范圍內對相關系統進行了信度分析，但樣本量不夠大，作文題型不夠豐富，實驗結果的普遍性受到影響。大數據下國內寫作智能評閱系統的信度分析將是未來研究的重點之一。

三、寫作智能評閱系統反饋語及反饋效果研究

在“句酷批改網”評閱反饋語方面國內研究較為豐富，研究方法上多采用量化或者質性的調查方法。石曉玲[9]通過對大一共161人的問卷和訪談，對“句酷批改網”的評閱反饋語和評分進行了實證研究，認為其在詞匯、語法方面的反饋較多，而在思想內容、邏輯性和連貫性以及篇章結構上的反饋較少。有將近一半（48%）的學生對“句酷批改網”持歡迎態度，認為其具有批改和反饋及時的優勢，對語法和詞匯方面的提高幫助最大。該研究問卷調查和訪談設計全面合理，研究結果有一定說服力。但介于信息技術的快速更新，該研究時效性稍欠缺，必然與當前不斷更新的相關系統研究之間有一定差距。蔣艷，馬武林[10]指出句酷批改網作為智能導師系統所面臨的挑戰。如：只能從語言上判斷水平，不能從語義上判斷內容，無法對作文內容錯誤進行識別、部分語言錯誤無法識別。該研究泛泛而談，介紹全面但缺乏較科學的研究方法，因此是研究結果的可信度不高。

何旭良[11]以篇章個案分析的形式研究發現，“句酷批改網”的智能反饋主要集中于詞匯和語法層面，在內容、篇章結構、修辭、內容邏輯性和連貫性方面反饋不夠。此論文僅選取一篇作文分析，研究結果參考價值不高。侯芬[12]以3個英語班級共105名學生為受試對象，將“批改網”融入大學英語寫作教學，進行了為期14周的教學實驗，用問卷調查和個案研究的方法探討了“句酷批改網”對提高大學生英語寫作能力的有效性。結果表明，大多數學生對批改網的使用持肯定態度。與過去的相關研究結果類似，批改網系統更多關注語法、拼寫、句型、搭配等方面的反饋，在篇章結構、邏輯性和連貫性方面反饋不夠。該研究采用實證研究方法，使用了問卷調查和分析作文樣本，研究結果有參考價值。胡學文[13]以45名大學非英語專業二年級學生為研究對象，考察了“句酷批改網”在線反饋對大學生英語寫作結果的影響。該研究的基本數據來自于“句酷批改網”保存的各種記錄，研究者使用SPSS7.0軟件對相關數據進行處理。研究結果表明，“句酷批改網”上學生對作文的多次自我修改能顯著提高作文質量，但修改的次數與作文成績的提高不存在相關關系，修改質量更具意義。該研究旨在考察大學生寫作自我修改對作文質量的影響，研究問題清晰有意義，但兩周的實驗時間對于研究修改次數與寫作水平提高之間的關系沒有意義。

周麗[14]從英語寫作應用研究角度出發，通過對某南方理工科高校的對照班和實驗班的實證研究，通過句法能力的分析來探討“批改網”對大學生英語寫作能力的影響。通過一學年的實驗發現，在線寫作平臺在時間與空間上為學生提供了較之傳統寫作更多的便利，但在提升學生的并列復句、狀語、表語、同位語從句、形容詞、名詞短語等寫作能力方面需要與傳統課堂教學相結合。該研究在細化“批改網”對寫作能力提高方面的影響有創新意義。李霞、鐘蘭鳳[15]采用了定量和定性研究相結合的研究方法對“句酷批改網”對大學英語寫作教學的有效性進行了實證研究。實驗對象為118名大學生，分實驗組和對照組，在長達兩學期的寫作課批改中中，分別給予在線反饋和人工反饋。實驗結果表明，實驗組的寫作成績顯著高于對照組。此外，教師觀察和問卷調查表明，多數學生對“句酷批改網”持歡迎態度，認為對寫作水平的提高很有幫助，能提高寫作興趣和自主寫作意識。

綜上研究，國內寫作智能評閱系統在詞匯、語法方面的反饋較多、修改建議較具體，但其在內容和連貫性方面反饋不足。多數學生對寫作智能評閱系統持接受態度，認為對寫作水平提高有幫助。

四、寫作智能評閱系統在新型大學英語寫作教學模式構建中的應用研究

國內寫作智能評閱系統基于上述相關研究，目前國內寫作智能評價系統的評分信度較高，但評閱反饋較多集中在詞匯和語法層面，在內容、篇章結構、修辭以及篇章的銜接和連貫方面反饋不夠。因此，大學英語自主寫作教學模式應該強調寫作智能評閱系統與教師反饋、同伴互評相結合。研究主要集中于“句酷批改網”。張文霞、黃靜[16]認為，信息技術應該和英語教學高度融合，采取自動譏評、助教評議、教師總評、同學互評、反思自評相結合的方式。楊曉瓊、戴運財[17]以135名學生為實驗對象，采用問卷調查、訪談和實驗法，對基于批改網的大學英語自主寫作教學模式進行了實踐研究。研究結果表明，“句酷批改網”在提高學生寫作興趣和能力方面有積極意義，有助于培養學生自主學習能力；同時，批改網在內容、篇章結構和邏輯等方面的反饋不足要求教師充分利用點評功能對學生作文進行及時點評。批改網在線及時反饋、同伴反饋和教師反饋在大學英語寫作教學中應充分結合，學生的自主寫作能力及寫作教學質量才會得以切實提高。

黃紅兵[18]以“句酷批改網”為在線作文自動評分工具，結合計算機輔助大學英語教學原理和形成性評價理論，在相關文獻梳理與分析基礎上提出在線大學英語寫作形成性評價“三階模型”。即作文經過“初稿、修訂稿、定稿”三個階段，在初稿和修改稿階段，教師在自動作文評分反饋和同學評價基礎上，有針對性地做出綜合評價，學生以即時評價和同學評價為參考、以教師評價為準繩修改作文。實驗證明該模型可為大學生在線英語寫作提供有效的反饋、減輕教師作文批閱負擔，也能有效促進大學生英語寫作水平提升。甘容輝、何彩順[19]在梳理學習分析的概念、要素和模型、主要分析工具和方法的基礎上，闡述了學習分析技術于外語教學中的應用，即“句酷批改網”運用學習分析促進個性化教學的案例分析，提出了學習分析在外語教學中的建模構想，展望了學習分析在外語教學應用中的可行性。唐錦蘭[20]為期一學年的教學實驗以及調查問卷和訪談數據表明，實驗教學有助于學生寫作能力的發展和自主學習能力的提高； 寫作教學重點從關注語言錯誤到關注內容的挖掘和表達，從關注結果到關注寫作教學過程和寫作教法；在此過程中，師生的角色發生變化。本文在此項研究基礎上建構了將自動評價系統融入寫作課程的教學模型。

五、問題和展望

首先，目前對寫作智能評閱系統在大學英語寫作教學中的應用研究主要集中在對“句酷批改網”的研究上，對目前國內應用逐漸廣泛，技術不斷在開發中的“iwrite”系統的研究寥寥無幾。作為該系統的主要開發人梁茂成，十多年來一直致力于此系統的開發和運用，從最初對中國學生英語作文自動評分模型的構建[21]到該系統用于近幾年的“外研社杯”全國大學英語寫作競賽等大規模作文評閱和在部分高校的推廣使用，“iwrite”系統的使用前景廣闊、對“iwrite”系統的研究可能會成為今后幾年的研究熱點。

其次，目前相關研究主要集中于寫作智能評閱系統反饋語的總體效果研究，對涉及其具體對大學生寫作某方面能力的影響研究很有限，只有周麗[22]研究了英語在線寫作平臺對大學生寫作句法能力的影響和Zhihong Lu&Zhenxiao Li[23]研究了“句酷批改網”對學習者詞匯運用能力的影響等。

最后，目前相關研究只提出構建基于寫作智能評閱系統的大學英語自主寫作教學模式，是一種粗線條的展望和推測，并沒有提出如何將寫作智能評閱系統和教師點評、同伴互評結合起來，哪種結合方式才是適合中國大學生寫作學習的具體模式。

參考文獻：

[1] 梁茂成，文秋芳.國外作文自動評分系統評述及啟示[J].外語電化教學，2007，（5）：18-24.

[2] 唐錦蘭，吳一安.在線英語寫作自動評價系統應用研究述評[J].外語教學與研究，2011，43（2）：273-282.

[3] 王勃然，金檀，趙雯.自動寫作評價研究與實踐五十年——從單一、合作到交互[J].外語研究，2015，（5）：50-56.

[4] 梁茂成，文秋芳.國外作文自動評分系統評述及啟示[J].外語電化教學，2007，（5）：18-24.

[5] 何旭良.句酷批改網英語作文評分的信度和效度研究[J].現代教育技術，2013，23（5）：64-67.

[6] 張荔，盛越.自動作文評閱系統反饋效果個案研究[J].外語電化教學，2015，（3）：38-44.

[7] 楊曉瓊，戴運財.基于批改網的大學英語自主寫作教學模式實踐研究[J].外語電化教學，2015，（2）：17-23.

[8] 李艷玲，田夏春.iWrite 2.0在線英語作文評分信度研究[J].現代教育技術，2018，（2）：75-80.

[9] 石曉玲.在線寫作自動評改系統在大學英語寫作教學中的應用研究——以句酷批改網為例[J].現代教育技術，2012，（10）：67-71.

[10] 蔣艷，馬武林.中國英語寫作教學智能導師系統：成就與挑戰——以句酷批改網為例[J].電化教育研究，2013，（7）：76-81.

[11] 何旭良.句酷批改網英語作文評分的信度和效度研究[J].現代教育技術，2013，23（5）：64-67.

[12] 侯芬.在線寫作自動評估系統在大學英語寫作教學中的應用——以句酷批改網為例[J].中國教育信息化，2015，（16）：24-27.

[13] 胡學文.在線作文自我修改對大學生英語寫作結果的影響[J].外語電化教學，2015，（3）：45-49.

[14] 周麗.英語在線寫作平臺對大學生寫作句法能力的影響[J].外語電化教學，2015，（5）：26-29.

[15] 李霞，鐘蘭.作文自動評價系統在大學英語寫作教學中的實證研究——以句酷批改網為例[J].教學研究，2017，（1）：57-61.

[16] 張文霞，黃靜.構建信息技術在大學英語課程中的運用框架[J].現代教育技術，2014，（1）：75-83.

[17] 楊曉瓊，戴運財.基于批改網的大學英語自主寫作教學模式實踐研究[J].外語電化教學，2015，（2）：17-23.

[18] 黃紅兵.在線大學英語寫作形成性評價模型構建研究[J].現代教育技術，2015，（1）：79-86.

[19] 甘容輝，何高大.大數據時代學習分析與外語教學研究展望[J].外語電化教學，2016，（3）：40-45.

[20] 唐錦蘭.探究寫作自動評價系統在英語教學中的應用模式[J].外語教學理論與實踐，2014，（1）：49-57.

[21] 梁茂成.中國學生英語作文自動評分模型的構建[J].北京：外語教學與研究出版社，2010，20–41.

[22] 周麗.英語在線寫作平臺對大學生寫作句法能力的影響[J]外語電化教學，2015，（5）：26-29.

[23] Lu，Z.&Li，Z.Exploring EFL Learners Lexical Application in AWE-based Writing[J].CALL Communities and Culture，2016.

責任編輯 秦俊嫄