論大學英語四級考試作文閱卷評分的高信度

摘要： 本文分析了大學英語四級考試的作文部分評分的信度，對認識全國重大的考試評分必須保持高評分信度有一定的意義。

關鍵詞： 大學英語四級考試 作文閱卷評分 高信度

一、引言

信度，即可靠性，衡量測試的準確性和穩定性。每一項測試的結果都應該盡可能保持高信度。大學英語四級考試中安排短文寫作這一部分，主要目的是考核學生用英語進行書面表達的能力，也就是說主要是考核語言運用能力。

作文是主觀題。所謂主觀題是指在閱卷過程中評分要依靠閱卷員的主觀判斷的題目。至于命題和答題，當然是主觀的。這些因素最終都會影響到對作文閱卷的判分。要使作文卷的分數能正確地反映考生的真實能力，如果不考慮考生本身這一因素，則影響最大的主要是命題和閱卷兩個因素。

二、大學英語四級考試的作文部分評分方法

大學英語四級考試的作文部分對考生寫什么內容有比較明確的要求，用各種明確的方式如提綱、圖表、關鍵詞等加以規定。采用有控制的作文也有利于提高評分的一致性。對作文評分影響最大的是評分過程。同一篇作文，不同的閱卷員可能給出不同的分數。提高作文閱卷的信度就是要保證評分的一致性，包括閱卷員本人的一致性、閱卷員之間的一致性和閱卷點之間的一致性，要采取一定的質量控制措施盡量減少和濾除閱卷員評分的主觀性對分數客觀性的影響。作文題的評分通常有兩種方法：一種是綜合法，一種是分析法。綜合法是憑閱卷員通讀一遍的總體印象打分。綜合法的優點是能從總體上把握通篇印象，評卷速度比較快。考慮到大學英語四級考試規模太大，因此，決定采用綜合法。分數要經過加權處理、等值處理、正態化轉換等一系列轉換過程。［１］

三、如何保證大學英語四級考試作文閱卷評分的高信度

大學英語四級考試的作文閱卷如何保證高信度呢？以下略加論述。

第一，參加大學英語四級考試的作文閱卷者都要接受嚴格的培訓。為了保證閱卷員的閱卷信度（包括閱卷員本人的評分一致性、閱卷員之間的評分一致性、閱卷點之間的評分一致性），大學英語四級考試采取了一系列措施，包括制定明確的評分標準、確定評分參照卷（range-finders）、嚴格的閱前培訓、閱卷過程隨機抽查等。在采取以上這些有效措施后依然存在的誤差可以稱為系統誤差，大學英語四級考試開發了一套軟件系統，根據考生在主、客觀題上得分的相關性進行調整，以濾除系統誤差。事實上，四級考試每次都要在全國范圍內動員1500—2000名教師閱卷，閱卷工作是一種辛苦的付出，閱卷過程有嚴格的質量控制措施，并且用計算機濾除閱卷員的主觀因素，使閱卷信度達到0.87，這在國內各種大規模考試中是很不容易做到的。［２］

第二，閱卷者首先要熟練掌握四級考試的作文評分標準。大學英語四級考試的作文評分標準如下：

1.本題滿分為15分。

2.閱卷標準共分五等：2分、5分、8分、11分及14分。各有標準樣卷一至二份。

3.閱卷人員根據閱卷標準，對照樣卷評分，若認為與某一分數（如8分）相似，即定為該分數（即8分）；若認為稍優或稍劣于該分數，即可加一分（即9分）或減一分（即7分），但不得加或減半分。

4.評分標準：2分：條理不清，思路紊亂，語言支離破碎或在部分句子均有錯誤，且多數為嚴重錯誤。5分：基本切題。表達思想不清楚，連貫性差，有較多的嚴重語言錯誤。8分：基本切題。有些地方表達思想不夠清楚，文字勉強連貫；語言錯誤相當多，其中有一些是嚴重錯誤。11分：切題。表達思想清楚，文字連貫，但有少量語言錯誤。14分：切題。表達思想清楚，文字通順，連貫性好。基本上無語言錯誤，僅有個別小錯誤。［注：白卷，作文與題目毫不相關，或只有幾個孤立的詞而無法表達思想，則給0分。］

然后，根據評分標準，閱卷者被要求在規定的時間內評閱20至30篇考生的四級作文，那些作文都已經由評卷專家集體討論給出了分數。如果閱卷者給出的分數與專家給出的分數基本一致，培訓就可以結束。如果某些閱卷者給出的分數與專家給出的分數相差比較大，那么，他們將被要求繼續學習評分標準，再在規定的時間內評閱20至30篇與開始類似的四級作文，直到他們給出的分數與專家給出的分數基本一致，才可以通過培訓。

第三，CET作文網上聯機閱卷具有四大顯著特點：1.隨機分發試卷；2.實時監控閱卷員；3.控制閱卷質量；4.高效記錄分數和數據。這些特點相應構成了CET作文網上聯機閱卷相對于傳統會議式閱卷所具有的四大優勢。CET作文網上聯機閱卷得到了參與閱卷教師的肯定。每10至12位閱卷人被分為一個小組，統一由該組組長指導監督。閱卷者可以看一看本組電腦上的本組閱卷者所給的分數平均值圖表，以判斷自己所評的分數是否信度比較高。如果某一位閱卷者在某一段時間內給出的分數與本組其他閱卷人給出的分數的平均值相差太遠，組長就會提醒閱卷者注意，甚至被要求重閱。

第四，閱卷者給出的作文分數要與該考生的總分和其他各項成績（比如：閱讀、聽力和翻譯等）的相關系數基本一致。相關系數法是另一種測量題目區分度的方法。它的基本原理是：如果某個題目有比較高的區分度，那么，該題目的得分和總分一定有比較高的相關系數。我們想了解一個變量是怎樣和別的變量聯系的，這在統計學中叫做回歸。兩個變量的回歸并非那么絕對，有程度之別，這就是它們之間的相關系數。［３］相關系數高，信度也高。反之亦然。如果閱卷者給出的作文分數與該考生的總分的相關系數太低，組長就會提醒閱卷者注意，甚至被要求重閱。

四、結語

綜上所述，全國大學英語四級考試委員會和全國大學英語四級考試的作文閱卷點的管理部門用科學的方法來保證四級考試的作文閱卷有高信度。因此，大學英語四級考試的作文閱卷的信度是很高的。

參考文獻：

［1］［2］楊惠中.金艷大學英語四、六級考試分數解釋［J］.外語界，2001.（1）.

［3］桂詩春，寧春巖.語言學方法論［M］.外語教學與研究出版社，2002.