大學英語三級快速閱讀試題的難度、區分度、正態性分布分析

摘要： 大學英語試題庫測試系統數據分析是大學英語教學和科研工作中的一項重要內容，通過分析試卷的易度值，或者難度系數、區分度和正態性檢驗，可以了解命題質量和教學效果，為試題庫科學地篩選、補充、修訂和配置試題提供科學準確的數據參考。本研究以三級快速閱讀試題的難度、區分度、正態性分布分析為例對試卷信度和效度進行分析。

關鍵詞： 大學英語 三級快速閱讀題 難度 區分度 正態性分布

1.引言

大學英語試題庫測試系統數據分析是大學英語教學和科研工作中的一項重要內容，通過分析試卷的易度值（facility value），或者難度系數（coefficient of difficulty）、區分度（dipartite degree）和正態性檢驗（test of normality），可以了解出題質量和教學效果。它既可以作為教學評估的手段，其本身又是教學研究的一個重要方面，對提高教學質量具有十分重要的指導意義。

2.研究的依據

所謂題庫就是以一定的教育測量理論為依據，按照一定的規范編制，收集的有相當數量和較高質量、附有試題性能參數、并經過分類編碼的大批題目的科學集合，其理論基礎主要來自于經典測量理論。這種理論經過幾十年的實踐發展得已相當成熟，應用十分廣泛。

在試題庫建設中，不進行題目分析，不分析試題的信度、效度，就不能科學地篩選、補充、修訂和配置試題。效度的關鍵就在于試題設計的科學性，即真正按照考試大綱的要求把最典型、最富代表性的內容編入試卷，并做到題量合理，比例適當，內容與形式統一，使試題的難度適合測試者的實際水平。

為了了解題目的信度和效度，我們必須掌握試題的易度值、區分度，并對試題進行正態性檢驗。

2.1易度值（或難度系數）

所謂易度值，就是指題目的難易程度，或說測試的難易程度，常以試題的平均正確率作為易度值的指標。難度系數與易度值成反比例關系。

易度值P在0至1之間。P>0.8時，試題太易；P<0.2時，試題太難。一份試卷應該由不同難度按一定比例組成。一般地說，P>0.8、P<0.2的試題各占10%；P=0.2—0.4和P＝0.6—0.８的試題各占20％；P=0.4—0.6的中等難度試題應占60%。整套試卷平均易度值在0.4—0.6之間。

（1）客觀性試題易度值P（這時也稱通過率）計算公式：P=K/N（K為答對該題的人數，N為參加測驗的總人數）（2）主觀性試題難度P計算公式：P=X/M（X為試題平均得分；M為試題滿分）（3）適用于主、客觀試題的計算公式：P=（PH+PL）/2（PH、PL分別為試題針對高分組和低分組考生的難度值）。在大群體標準化中，多采用第三個計算公式。具體步驟為:①將考生的總分由高至低排列；②從最高分開始向下取全部試卷的27%作為高分組；③從最低分開始向上取全部試卷的27%作為低分組；④按上面的公式計算。

2.2區分度

所謂區分度是指測驗對考生實際水平的區分程度或鑒賞能力。它是題目質量和測驗質量的一個重要指標。一般要求試題的區分度在0.3以上。

區分度D在-1至+1之間。D≥0.4時，說明該題目能起到很好的區分作用；D≤0.2時，說明該題目的區分性很差。D值為負數時，說明試題或答案有問題。

（1）客觀性試題區分度D的計算公式為D=PH-PL（PH、PL分別為試題高分組和低分組考生的難度值）。（2）主觀試題（非選擇題）區分度D的計算公式為D=（XH-XL）/N（H-L）（XH表示接受測驗的高分段學生的總得分數，XL表示接受測驗的低分段學生的總得分數，N表示接受測驗的學生總數，H表示該題的最高得分，L表示該題的最低得分）。

整個試卷的區分度，是所有試題區分度的平均值。

2.3成績分布的正態性檢驗

計算出來的區分度界于0.30-0.39之間，或高于0.39，就表明同質考生的考試成績分布符合正態分布。具體指標如下：

3.研究的方法步驟

本次數據分析的樣本為某高校大學英語三級快速閱讀試題，參加測試的學生人數為1249人，全部在讀大學英語三級課程，學習者來自人文社科、經濟管理、機械工程、材料工程等多個專業。測試題為客觀性試題，全文927個單詞，要求學習者在15分鐘之內讀完，并對于文章相關的十個句子作出正確、錯誤或信息缺失的判斷。本次研究所采用的計算公式為：P=K/N（P為該試題易度值，K為答對該題的人數，N為參加測驗的總人數）。D=PH-PL（D為該試題區分度，PH、PL分別為試題高分組和低分組考生的難度值）。經計算后得到的題目錯誤率、區分度、難度系數統計表如下所示：

從經典教育測量理論來分析，在此次測試的快速閱讀試題中，難度系數在0.2到0.4的試題所占比例為10%，接近理想數據。難度系數大于0.8的試題所占比值為10%，這個數據也是符合預期的。但是難度系數小于0.2的試題所占比例為60%，這個比例過大，致使試題整體難度降低。難度系數在0.6到0.8的試題所占比例為零，而在理想命題狀態下，此期望數值應為20%。特別是難度系數在0.4到0.6之間的試題所占比例僅為20%，遠遠低于60%這個期望數據值。全部試題難度系數的平均值僅為0.289，也遠低于0.4到0.6這個期望系數區間。數據顯示，此次快速閱讀試題偏簡單，在試題庫中應屬于大學英語二級到三級之間難度的試題。

從區分度數據分析，此次測試題中區分度大于等于0.4的試題占全部試題的90%，這些試題區分度非常良好，可以在試題庫中予以留用。但是有10%的試題區分度如需繼續留用，必須予以修改。具體而言，快速閱讀試題中的第10小題的題干“President Bush has signed into law an emergency spending plan”就是幾乎照搬原文最后一句話：“President Bush has signed into law a 40，000 dollar emergency spending plan.”學習者在不理解文章意思的情況下也可以找到上述信息。從命題角度而言，可以適當增加這個題目的信息承載量，更好地測試學習者對文章的理解程度。

從試題的錯誤率分析，此次快速閱讀測試題中第二小題和第三小題的錯誤率是最高的。而這兩個小題的答案都是“Not Given”，也就是說在文章中找不到題干中的信息，是信息缺失類試題。這類試題往往具備這樣的特征：題干中的某些內容在原文中沒有提及；或者題干中涉及的范圍小于原文的范圍，也就是更具體；題干是某人的主觀思想（目標、目的、想法、愿望、保證、發誓），而原文陳述的是事實。以第二小題為例，“There were children in the day-care center of the World Trade Center when the terrorist attacks took place.”這正是主觀思想，而不是文章陳述的事實內容。因此，信息缺失類快速閱讀試題不僅能測試學習者的理解能力，還能測試學習者的邏輯思維能力，應當配置在大學英語試題庫當中。

4.結論

我們認為，出擬試題，組建題庫只是一個載體。在題庫建設過程中，要進行一系列教學改革的研究，并藉此加強教學管理，規范教師的教學行為，提高教學質量。而對大學英語測試系統進行多角度數據分析與研究正是教學改革的一個方面，它能夠幫助教師了解教學水平，提高命題質量，從而提高教學水平?？梢詮囊韵氯c總結此項研究的深刻意義。其一，大學英語試題庫測試系統數據分析可以幫助提供每套試題易度值等相關參數，從而了解出題質量。其二，分析得到的數據可以幫助教師了解教學效果，特別是發現教學中的薄弱環節，從而有的放矢地進行教學。其三，分析得到的數據是大學英語教師進行教改、科研不可多得的參考依據。

參考文獻：

［1］勵景編著.考試命題與試卷分析［M］.浙江寧波出版社，2002.

［2］白曉明，陳國明，葉成華等編著.考試命題與試卷分析［M］.浙江寧波出版社，2003.

［3］汪美瓊.大學英語試卷分析探析［J］.青海師專學報（教育科學），2008，58卷第2期.

［4］曾凡貴編著.大學英語教學與研究［M］.湖南大學出版社，2004.