淺析網(wǎng)絡(luò)閱卷中閱卷員對評分信度的影響

白玉潔+高淑玲

摘要：基于近年來網(wǎng)絡(luò)評卷的興起，本文以六級英語翻譯真題網(wǎng)評工作為例，以評分信度為主，分析影響閱卷評分信度的主要人為因素，并從中分析其利弊，尋求解決方案，以期能夠提升閱卷評分信度，降低人為因素造成的誤差。

關(guān)鍵詞：網(wǎng)絡(luò)閱卷 閱卷員 評分信度

信息時(shí)代網(wǎng)上閱卷系統(tǒng)已成為現(xiàn)階段主要閱卷方式。因?yàn)樗坏梢詫?shí)現(xiàn)傳統(tǒng)閱卷方式下的所有功能，而且還可方便進(jìn)行包括各科考試知識點(diǎn)數(shù)據(jù)的全面分析。信度是檢驗(yàn)語言測試質(zhì)量的最重要因素之一。包括試題信度，考試實(shí)施信度，評分信度，其中隨著考試特別是閱卷方式的改變，網(wǎng)絡(luò)閱卷中的閱卷評分信度日益引起學(xué)界關(guān)注。本文主要探討大學(xué)英語六級網(wǎng)上閱卷過程中閱卷員的信度。

一、網(wǎng)絡(luò)閱卷優(yōu)勢

網(wǎng)上閱卷具有嚴(yán)格的操作程序。首先要把掃描采集的主觀題部分按題切割，通過專用網(wǎng)絡(luò)將數(shù)據(jù)傳送到閱卷點(diǎn)。考生的答題圖像會(huì)出現(xiàn)在閱卷員的電腦屏幕上，除此之外看不到與此無關(guān)的任何信息，管理工作相對規(guī)范。每位考生的答卷至少要由兩位老師在不同的電腦屏幕上各自獨(dú)立評閱一次。評分出現(xiàn)誤差時(shí)會(huì)進(jìn)入三評甚至四評，或是由評卷系統(tǒng)自動(dòng)“告知”評卷小組負(fù)責(zé)人，由其裁定。

可以說，與傳統(tǒng)閱卷方式相比，網(wǎng)上閱卷具有以下優(yōu)點(diǎn)：

1.可將評分誤差降低到最小程度；

2.取消了試卷流通的人工管理，計(jì)算機(jī)自動(dòng)分發(fā)試卷，避免出現(xiàn)漏評現(xiàn)象；

3.大學(xué)英語六級網(wǎng)上閱卷采用深圳海云天科技公司的軟件，精準(zhǔn)度高，科學(xué)性強(qiáng)，多年來在各類大型考試中備受歡迎。

總之，實(shí)行計(jì)算機(jī)網(wǎng)上評卷，從客觀角度以及數(shù)據(jù)分析來看，這一方式可以盡可能地保證考卷評分的公平公正和分?jǐn)?shù)的精確。

二、影響評分信度的人為因素

在考試仍然是選拔人才重要手段的今天，對考試結(jié)果的評判是否客觀、公正將影響到人才選拔的質(zhì)量。評卷公正性事關(guān)各類考試的有效性。網(wǎng)上閱卷自動(dòng)屏蔽考生信息，確保閱卷過程客觀公正的功能就可完全滿足這一需要。但其中不乏人為因素的影響。包括評卷教師個(gè)人的水平、狀態(tài)、情緒和評卷結(jié)果數(shù)據(jù)處理的手段等。本文主要以分析人為因素為主。

（一）專業(yè)文化背景影響評分信度

在本次英語六級翻譯閱卷工作中發(fā)現(xiàn)：翻譯專業(yè)學(xué)生對于試卷評閱工作理解程度較弱，分析其原因：一方面是可能是由于自身專業(yè)水平不到位；另一方面也有可能是具有專業(yè)水平，但對于試卷評閱工作中的分值把握或是定檔能力欠缺，從而導(dǎo)致綜合系數(shù)和各項(xiàng)指標(biāo)距離大盤指數(shù)尚有差距，評卷曲線也會(huì)出現(xiàn)較大偏離，造成誤差。相比之下，學(xué)術(shù)型碩士雖沒有進(jìn)行專業(yè)的翻譯實(shí)踐活動(dòng)，對于分值的把握上卻要為準(zhǔn)確。當(dāng)然，這一情況主要為研究個(gè)例，并不能代表全部數(shù)據(jù)。但從中我們可以看出由于受到專業(yè)文化背景的限制，而導(dǎo)致閱卷過程中不利因素的出現(xiàn)，從而降低評分信度。

（二）個(gè)人自身?xiàng)l件影響評分信度

網(wǎng)上閱卷很大程度上減輕個(gè)人教師傳統(tǒng)閱卷工作的負(fù)擔(dān)，但這類工作仍然需要人為參與，并且占據(jù)一定時(shí)間，所以對于閱卷人員無論是身體還是心理素質(zhì)都有必然的要求。同時(shí)，個(gè)人的性格特點(diǎn)和評分傾向?qū)τ陂喚砉ぷ饕矔?huì)造成一定影響。

三、從大學(xué)英語六級翻譯試題網(wǎng)絡(luò)評閱中看閱卷員因素對評分信度的影響

（一）2016年6月翻譯測試試題分析

2016年6月英語六級考試中翻譯題試題主要涉及“創(chuàng)新”這一話題。針對這一題目，在本次閱卷過程中學(xué)生們常見錯(cuò)誤有詞匯誤拼，詞語、語法誤用等問題。

（二）閱卷結(jié)果分析

閱卷采用總體評分法，閱卷員首先依據(jù)學(xué)生的譯文進(jìn)行整體檔次評定，然后對考生翻譯中的語法語用錯(cuò)誤進(jìn)行量化，最終得出考生分?jǐn)?shù)。根據(jù)閱卷數(shù)據(jù)統(tǒng)計(jì)報(bào)告可以得出如下結(jié)論：

第一：閱卷參與對象不同，結(jié)果不同。

在本次閱卷過程中，主要參與閱卷的人員可分為三類：英語專業(yè)背景下的專業(yè)碩士（以英語筆譯方向?yàn)橹鳎瑢W(xué)術(shù)碩士（以翻譯測試方向?yàn)橹鳎约霸诿绹x書的中國學(xué)生。鑒于專業(yè)背景不同，導(dǎo)致對閱卷工作的理解方式也大相徑庭，從而造成同一份試題，評分結(jié)果不同，最終影響評分信度。

第二：閱卷過程中常見問題。

1.專業(yè)碩士較之學(xué)術(shù)碩士評卷指數(shù)較低。總體而言對于閱卷標(biāo)準(zhǔn)把握不足，總體系數(shù)及各項(xiàng)指標(biāo)偏低，往往出現(xiàn)脫檔現(xiàn)象，相較之學(xué)術(shù)型碩士表現(xiàn)尚佳。

2.在美國讀書的中國學(xué)生思維方式與理解能力有所偏差。對于中國所提倡的正確使用語法規(guī)范沒有很好的理解。

3.個(gè)人身體素質(zhì)較弱者無法長時(shí)間進(jìn)行試卷評閱，導(dǎo)致前后出現(xiàn)誤差。心理素質(zhì)不強(qiáng)者一經(jīng)組長提醒偶爾會(huì)出現(xiàn)平均分過高或過低的情況，脫檔現(xiàn)象嚴(yán)重，離散指數(shù)較差。

第三：問題解析。

就整體情況而言，在閱卷過程中出現(xiàn)的最多問題即反映在評分曲線偏離標(biāo)準(zhǔn)較多，脫檔現(xiàn)象普遍，無法準(zhǔn)確定位分值等，這些問題除了必要的人為因素以外，本身軟件設(shè)計(jì)上尚存有一定缺陷，對于評分無規(guī)律者無法分析數(shù)據(jù)，則會(huì)出現(xiàn)誤評現(xiàn)象。

綜合上述：人為因素對于閱卷結(jié)果會(huì)產(chǎn)生重要影響，尤其會(huì)影響到評分信度，最終涉及到閱卷質(zhì)量問題。

四、結(jié)語

在社會(huì)快速發(fā)展、科技日新月異的信息化時(shí)代，網(wǎng)上閱卷可以作為廣大教師閱卷工作的最佳助力，把教師從繁重的考試閱卷與統(tǒng)計(jì)分析工作中解脫出來，并有效確保閱卷質(zhì)量。因此，作為閱卷員本身，必須要確保評卷結(jié)果準(zhǔn)確，盡可能避免不利于評卷質(zhì)量因素產(chǎn)生的機(jī)制。

參考文獻(xiàn)：

[1]趙海燕，芮楠.雙評作文題網(wǎng)上閱卷評卷教師[J].中國考試，2009，（02）.

[2]朱燕，古珍.口語測試中考官評分傾向性研究[J].教育探討，2015.

（作者簡介：[1]白玉潔，西北大學(xué)外語學(xué)院碩士生，從事英語筆譯研究；[2]高淑玲，博士，西北大學(xué)外國語學(xué)院教授，主要從事英語語言學(xué)，語言哲學(xué)，測試學(xué)研究。）