CET寫作評分員對評分結果影響因素研究

鹿軍紅

(西安理工大學 陜西 西安 710043)

英語寫作是學生的重要能力之一，是各類英語考試的重要組成部分。目前，在全國各類英語考試中，英語作文的評閱通常采用在線評分的方式。考生作文被掃描，圖像傳輸到各改卷點的服務器，由評分員在屏幕上對作文進行打分。由于評分員寬松與嚴厲程度不同，對評分標準把握不同，導致評分結果產生差異。另外，欣賞習慣、語言能力以及心態情緒等主觀因素也會影響閱卷員對分數的評定。一些評分員評卷經驗不足，一些評分員主觀隨意性過大或者評卷態度不認真，都會造成準確性不高，評卷質量差。所有這些因素都會影響寫作考試的成績，從而降低語言測試的信度和效度。

本文通過對大學英語四、六級考試(CET)評分的研究，找出影響評分員改卷判斷的潛在因素，從而提高閱卷員英語作文評卷質量，這對于保證考試的公正性和準確性，提高考試的信度至關重要。另外，老師也可將考試評卷情況反饋給學生，用以指導學生寫作，從而提高學生的寫作能力。

1．評分標準

閱卷點在正式改卷前先對閱卷員進行為期半天的培訓，幫助的評分員了解評分標準以縮小與標準及樣卷間的差距。評分量表分別為1-3、4-6、7-9、10-12、13-15分，共五檔。評分員通過將學生作文與樣卷的比對來評定考生的考試成績。評分員評定作文的關鍵是要將作文進行分檔，要對評分樣卷(Range-finders)認真學習領會，了解掌握每個檔次作文的基本特征。

在培訓的過程中，通常會發現，對同一篇作文不同的老師給出了不同的分數，有時分數相差很大，專家分為9分的作文，有的老師給了12分而有的老師只打了7分，為什么出現如此大的差異？

看到一篇作文，我們通常會從這樣幾個方面進行考量：(1)詞匯短語；(2)句子結構；(3)流暢程度；(4)語法正確；(5)思想內容。評分員采用整體式評分法(Global Scoring)對英語作文進行評閱，分數的高低源于他們的“整體印象”或“第一印象”。評卷員應該從這些方面進行綜合判斷，給出一個總體印象分。一些評分員對一些低級語言錯誤十分敏感，一見到嚴重的錯誤就給了低分，因為“這么簡單的問題都搞錯了”。評分員對語法和詞匯方面也進行不同的處理，有些采用“錯誤扣分”的方法；另一些則“為好詞匯加分”。總的來說，評分員采用了不同的方法評分。一些人相信他們的整體印象，有些人喜歡分析的方式，有些人嚴格遵守規定的評分標準，有些人則形成了自己的尺度和判斷標準。經驗豐富的評分員往往使用一項以上的標準作為打分依據，而新評分員往往對其中某一項給予突出的重視，對作文的水平做出片面的判斷，出現打分的偏差。以上因素就是出現同一作文不同分數的原因。

2.評分判斷的依據

有些閱卷員更多地關注負面證據而不是正面證據。這些評分員對語言錯誤非常敏感，尤其是當一些低級語言錯誤頻繁出現時，也許這些錯誤非常突出，引起了他們的注意。這些評分員對語言表達非常挑剔，對錯誤的容忍度不高，傾向于在語言上嚴格要求，對于學生在語法、詞匯和表達等方面十分看重。他們對學生往往持消極的看法，看到任何的錯誤偏離標準，就相應地降低學生的分數。他們在思維中對作文多采用減分計分法。

正面證據驅動的評分員多注意作文中的優點。他們注意尋找一些“值得獎勵”的東西，比如在詞匯方面，考生作文中偶爾出現一些令人印象深刻的單詞，這“瞬間照亮了我的眼睛”，“不尋常”或“印象深刻”。此類評分者多使用相加計分法，更多地關注作文中積極的一面。

優秀評分員在評估作文時往往同時考慮優點和缺點，結合正面和負面證據進行打分。他們對詞匯，語法，內容相關性和連貫性進行綜合的評價，也同時考慮內容的充分性、新穎性和生動性。

3．相關系數(R)

相關系數R這里是指客觀分與主觀作文分之間相關性。由于客觀成績已經在改作文之前由機器改出，一般而言，學生的客觀成績高，作文得分也應與之相應，兩者呈相關關系。由于考生的各種語言能力間存在一定的相關性,因此作文分數與客觀題得分間的相關系數R可作為評閱信度的一個重要參考指標，相關系數高的閱卷員評卷的準確性就高。R值是衡量評卷質量的首要指標，因此評分員在批改作文時要盡可能提高自己的相關系數。

4.套用

有些學生死記一些句子或范文進行套用，這類考卷最容易讓閱卷員誤打高分。識別這類考卷的方法是看看是否與主題相關，是否是生搬硬套。學生套寫作文的現象非常普遍，閱卷員要敏銳地識別此類作文。批改這類作文的要點是：特別注意學生臨場所寫的句子，這些話往往反映出學生的真實水平。

5.書寫

見到書寫工整的作文很容易讓閱卷員誤給高分。有些作文書寫得工工整整，實際錯誤較多，水平并不高，閱卷員很容易被書寫所迷惑。

相反，一些學生書寫太過潦草，難以識別，閱卷老師遇到這種試卷，往往失去耐心，打出低分。遇到此類試卷，不要太隨意，要有耐心去認真辨識，看出其真實水平，說不定還是一份好卷。

6.評卷速度(Speed)

一般閱卷點對閱卷老師有時間上的要求，如每份試卷的閱卷時間平均不得低于60秒。有的老師評卷速度過慢，給分猶豫不決，搖擺不定，要知道評得慢不一定評得準，掌握每個檔次作文的基本特征才能改得既快又準。當然一掃而過的不負責任的過快閱卷，也是不可取的。

目前,對于閱卷速度的研究不多,Charney(1984)指出了一系列與評分進程有關的因素。

她認為監控與較快的評閱速度有助于提升評閱信度,整體評閱法(holistic scoring)應當快速,對文本的深入思考會降低評閱信度。

7.其他因素

評分者的身體狀況和情緒狀態也會對評卷的可靠性產生影響。評分工作的強度使評分員身體疲勞，大多數評分員找到了“減輕疲勞”的不同方法設法解決這個問題，例如午飯后偶爾站起來活動身體或爬在桌上小睡。評分員有時也會不可避免地情緒化，樓道里的腳步聲或窗外的噪音可能使他們坐立不安。另外評分員自身的英語水平、對評分工作態度等因素也會影響評分質量。

8.小結

本文分析了評分員對英語作文評分結果的影響因素，其中一些因素是非系統的和不可控的，如評分者的情緒狀態和身體狀況。一些因素的是可控的，比如評分標準和評分者培訓。這些可控因素被識別出來后，我們就可以采取措施解決相應問題，如修改和制定更詳細的評分標準，以縮小理解上的不一致。本研究也可以指導評分員的選拔，通過對評分員的培訓，淘汰不合格的評分員。

詞匯、語法、內容的連貫性和準確性被認為是寫作的主要組成部分，不同的評分員對其重要性進行了不同程度的排序。他們對好作文的概念存在差異，強調寫作能力的不同成分可能導致形成不同的評判標準，并由此導致相同的作文不同的分數的現象。因此，閱卷員應本著為每位考生負責的態度認真評閱好每篇作文，提高閱卷的準確性，努力做到客觀公正。閱卷機構也應對閱卷員進行監督指導，及時糾正閱卷中的偏差，以充分保證評卷質量，提高考試的公正性和準確性。