陳莉燕 王軍
【摘要】英語考試種類繁多,有國家四六級,AB級,還有面向社會的PETS考試出國人員的GRE\TOFEL等。本文從各種英語考試命題的角度出發,分析一份試卷的效度、信度和真實性,對一線的教學工作者而言知道如何確定試卷的質量,在以后的教學中會有很重要的應用價值。
【關鍵詞】英語測試 效度 信度 真實性
【中圖分類號】G718.5 【文獻標識碼】A 【文章編號】2095-3089(2014)01-0096-01
如何評判一份試卷的質量?如何測試各種語言技能和如何設計各種測試題目?我們知道一套試卷最終設計好了之后,我們更應該知道它的質量如何?也就是它是否符合語言測試的要求?所以,需要對試卷質量進行評估,評估的主要標準是什么?一般就是它的效度、信度和真實性。下面分別討論之。
1.效度
效度,又稱有效性。它是指一套測試卷所考的是否就是設計人所要考的內容,或者說,在多大程度上考了想要考的。所以,效度的高低是衡量一套語言測試卷最重要的指標,它是語言測試的出發點,是基點,因為一項效度很低的語言測試是沒有實際意義的。例如,測試聽力的考試中出現了寫作,這種測試效度是很低的。例如,Is photography an art or science?這種題目效度很低,因它似乎是對有攝影知識的學生才起作用,對攝影一無所知的學生而言根本測不出他們的寫作能力。所以,這個題目對后者而言效度很低,因為我們要測的是他們的寫作能力而不是攝影知識能力。需要指出的是,語言測試的效度是一個相對概念。例如,把劍橋商務英語證書考試來測試非英語專業的學生英語水平效度就很低。
2.信度
信度是指考試結果的可靠性和穩定性,它通常以兩次考試結果相關系數來表示,系數越高,信度也就越高。影響信度的因素很多,主要有外部環境和個人因素,同時試卷的量是否足夠大,區分度是否高,難易度是否適中,評分是否客觀等因素也影響著信度。
3.信度和效度的關系
信度和效度是衡量測試質量最重要的兩個指標,他們之間是相互依從,相互排斥的關系。從方向而言它們是單方向的,即信度差則效度必然差,但效度差信度未必差[1]。現實常常是兩者妥協的結果。例如,我們用一個已經證明具有很高信度的聽力測試卷去檢驗學生的閱讀能力,在這種情況下,考試的結果即使具有很高的穩定性(信度高)也沒有用,因為試卷的誤用無法使我們測量到所期望的能力。但一個考試具有效度的話,它首先是有信度的基礎上。因為,其一是如果考試結果本身不可靠的話,我們怎么能說該考試就測試出了出題人所期望測定的學生的語言能力呢?其二是我們的效度確定需要以考試結果作為基本數據,不可靠的數據無法用來確定考試的效度[2]。所以,信度是保證效度的必備條件之一,只談信度而忽視效度是沒有實際意義的。
4.真實性是考試的另一重要評價指標
什么是英語測試的真實性?測試界對此有很多看法。Bacherman認為,真實性是指某一語言測試任務與實際語言運用任務在特征方面的對應程度 [3]。它們之間的關系可以用下圖表示:
這里的 “任務特征對應”可以理解為“形式”和“性質”上兩個方面的對應。
4.1情景真實性
所謂情景真實性指測試方法特征與將來某一特定目的語使用的情景特征相關的程度。劉潤清認為:考試任務的特征和將來目的語的使用的情景特征相一致的時候,考試任務才具有情景真實性。具體到每個考試它的情景真實性是相對的,是隨著考生情況而變化的。例如,參加商務英語證書(BEC)考試的考生在其工作中肯定會遇到與客戶用英語就商務活動面對面交談的情景,而該口試中就安排了考生之間面對面交談這一活動,因此該口試具有很強的情景真實性。
4.2交際真實性
它指的是考生在完成某一測試任務時,其語言能力的哪些方面參與了完成該測試任務的活動, 參與的程度如何,與情景真實性真實性不同,交際真實性強調的是考生與測試任務之間的交際關系。
4.3如何提高語言測試交際真實性
一般來說,提高測試的情景真實性要容易些,而提高交際的真實性要難些。Bacherman提出用以提高語言測試交際真實性的四項措施[4]:在設計考題時可以具體說明考生只有使用何種策略才能完成任務。提供機會。即給考生提供充足的時間、必要的信息和工具等。考試任務要得當。任務太難會影響考生的策略的應用。考試任務要有趣味性。通過提高考試的情景真實性可以提高考試任務的趣味性。
4.4編寫試題的真實性原則
語言的測試目的就是為教學服務的,要考察考生在實際的環境下使用語言的能力,所以試題的編寫要遵循試題的真實性原則。例如,下面的例子中:
____, I would take an umbrella with me.
A. Had I been you B. I were you
C. Were I you D. I had been you
這道題從語法的角度來講,答案應該是C。但現實的情況是人們很少這樣用。在人們日常的交談中,多半是直接說I would take an umbrella with me. 不會出現題目答案那樣的倒裝形式。就是說這樣的題目雖然情景是真實的,但交際的真實性較差。總體上也就影響了這道題的真實性。那么,如何保證試題的真實性呢?我們建議題干最好來源于實際語言交流的自然篇章。這樣的題干可以給考生提供一定的語境,出題也方便,同時也保證了試題的真實性。
5.結論
英語教學和英語測試是教學過程中密不可分的兩個部分。英語測試直接服務于英語教學,對英語教學有一定的監督和反饋作用。因此要使測試真正起到應有的作用,并且達到預期的效果,就應該挑選適合我們教學目的和要求的測試形式,并知道如何從一套測試卷的效度、信度和真實性出發確定試卷的質量,這對于一線的教學工作有很重要的應用價值。
參考文獻:
[1]劉潤清、韓寶成編著.語言測試和它的方法[M].北京:外語教學與研究出版社,2000.
[2]Hughes, A. Testing for Language Teachers. 1989. Cambridge University Press.
[3]Bachman, L. Fundamental Considerations in Language Testing. 1990. Oxford University Press.
[4]鄒申,楊任明.簡明英語測試教程.高等教育出版社.2004.