河南農業職業學院 楊晨欣 姚 旭 劉彥博 張亞菲 劉述忠
考試是對學生、教師及教學管理各環節的集中檢測,從中得出有益于教學決策的信息,即學生了解自己的學習情況,調整學習方法;教師了解學生的學習質量,及時發現教學過程中存在的問題和薄弱環節,以改進今后的教學;教學管理人員了解教師和學生的教與學質量,優化教學管理決策。但所有這些信息都是以正確有效的考試為前提。大學英語是高職院校種植類專業的基礎課,是學生提升學歷必考的課程。為了解大學英語教與學的狀況,本文對河南農業職業學院種植類專業大學英語試卷質量及成績分布進行分析,以期為大學英語教學改革提供有益參考。
以河南農業職業學院現代農業專業2020 和2021 級5 班次172份大學英語期末考試試卷為研究對象,試卷共有五類題,分別是單項選擇、閱讀理解、完形填空、翻譯和寫作(聽力單獨考試)。設參試考生為n(n=172)人,試卷由k(k=5)題組成。
考試質量評價分析包括試卷質量分析和考試成績分析。以郭瑞林[1]、劉洪霞[2]的方法進行試卷質量分析,以蓋鈞鎰[3]的方法進行成績分布的正態性檢驗,以張戈[4]的方法對影響成績的主要因素進行灰色關聯度分析。
試卷質量主要指試題難度、區分度、信度、效度,即“四度”指標,其中試題難度和區分度為試題質量的主要指標。
1、試題難度(P)。試題難度是試題難易程度的量化指標。試題難度既能反映試題本身的復雜程度,又可反映教師與學生間教與學的狀況,其計算公式為:
式中,Qi為第i 題的滿分值,Pi為第i 題的難易適合度。Hi為高分組第i題的平均分,Li為低分組第i題的平均分,Ei為試題的難度。
學校期末考試的試卷,應有一個合適的難度,從歷次考試看,試卷難度控制在0.3~0.5 之間難度合適,有利于測量學生的真實水平,對不及格率也有較好的控制;Pi<0.3試題難度不合適,即偏難或偏易。
試題難度對成績分布也具有重要影響。試題越難,得低分的學生就較多,成績分布將會相對集中在低分段,分布呈正偏態;試題越易,成績分布則呈負偏態;當試卷中等難度試題題目數量比例過大時,成績分布呈陡峭峰形態。
本次大學英語試卷各試題的難度分析結果見表1。由表1 可以看出,第一、二試題難度值分別為0.321、0.401,難度值在0.3~0.5之間,表明這2題難度合適;其他三題的難度值分別為0.153、0.142、0.157,均小于0.3,表明難度較小。就整個試卷來說,難度基本合適,但為更好地測試學生的英語水平,還應適當加大試題難度。
表1 試題質量評價指標及結果
2、試題區分度(D)。區分度是反映試題對學生學業水平的區分程度,體現試卷對考生真實水平高低的鑒別能力。試題只有具備良好的區分度,考試才會有一定的效度。其計算公式為:
式中,Di為第i 題的區分度。試題區分度評價一般采用美國測量學家伊貝爾的評價標準,Di>0.4,試題區分度很好,0.3≤Di≤0.39,試題區分度良好;0.2≤Di≤0.29,試題區分度尚可;Di<0.19,試題區分度差,在題庫建設中,類試題應淘汰。
本次大學英語試卷各試題的區分度分析(見表1)表明,第一題(0.423)區分度很好,第四題(0.314)區分度良好,第二題(0.226)、三題(0.276)區分度尚可,第五題(0.144)區分度稍差。就整個試卷來說,區分度尚可。區分度高低與試題難度有關,試題難度過大或過小,都會使考生得分比較集中,導致區分度較低;難度適中的試題,不同水平的考生將有較大差異的得分反應,從而有較高的區分度。所以,作為命題者,對試題的難度控制是提供一份優質試卷的關鍵,這依賴于命題者對教學大綱的理解程度,對教學內容的熟悉程度,對學生水平的了解程度。
3、試卷信度(C)。試卷信度是指測量結果的穩定性或可靠性的程度,即測量結果是否真實、客觀地反映了考生的實際水平。其計算公式為:
式中,S 為學生成績標準差,zj為第j 人的試卷總成績,z為所有考生試卷總成績的平均分。一般認為0.5<C<1,試卷高度可信,0.35<C≤0.5,試卷基本可信,0<C≤0.34,試卷一般可信,C<0,試卷不可信。
本次大學英語試卷信度分析(見表1)表明,試卷信度僅為0.1091,為一般可信。試卷信度低的原因,與難度和區分度較低有關。試題越難或越易均使信度較低,試題越難,學生猜答案的可能性越大,造成成績的不穩定;試題越易,得分容易,導致分數的離差偏小,使信度偏低。
4、效度(T)。效度指考試結果能否準確地表征所要測量的特征的程度,它反映了測驗結果與測驗目標的符合程度。根據不同的測驗目的,采取不同方法編制試題,就可以達到不同的測驗效果。本文采用各試題得分與試卷總分的一致性或者相關性表征試卷效度,其計算公式為:
式中,Ti為第i題的效度,yij為第j人第i題的得分,yi為試卷第i 題的平均分。一般認為T>0.7 時,試卷效度高;0.4≤T≤0.7時,試卷效度較高;T<0.4時,試卷效度低。
本次大學英語試卷各試題的效度分析(見表1)表明,第二題(0.721)效度高,第三題(0.412)、四題(0.405)效度較高,第一題(0.341)、五題(0.270)效度低,試卷總效度為較高,表明該試卷的有效性尚可。為較好試卷,能較好地檢查學生的知識水平和評價教師的教學水平。
學生成績在外界條件相同情況下,受智力影響較大,應呈正態分布。也就是說,如果考試能反映考生的能力,其成績應呈正態分布。因此,學生成績分布正態性檢驗是試卷評價的又一個主要指標。
首先,對五班次172名學生每試題得分及總分計算基本特征數,結果見表2。其中,總分平均分79,變異程度為4.86。然后,對學生總成績排序并進行分組,依據學生人數,本資料分成9 組較為合適,組距為3,各組的頻數見表3,據此繪制頻數直方圖,平滑后即為近似的χ2分布密度圖,如圖1。
圖1 正態曲線擬合圖
表2 學生成績基本特征值
表3 正態分布卡方擬合度檢驗
對學生成績分布χ2檢驗的χ2值為8.536(見表3),即χ2=8.536<=12.59,表明學生成績的頻數分布服從正態分布,本次大學英語期末考試學生能正常發揮。
關聯度分析是根據灰色理論,揭示相關因素間的主次關系,找出影響目標性狀的主要因素。為了解學生考試在哪個環節失分最多,即影響成績的主要因素,以便有針對性地加強教學和引導,對試卷中每試題得分與總分進行灰色關聯度分析。即以學生總分為參考數列,以每試題得分為比較數列,計算每試題得分與總分的關聯系數(ζi(k))和關聯度(γi),其計算公式如下:
關聯度分析結果見表4。表4 表明,以第二題得分與總分的關聯度最大,為0.706,然后依次是第三題(0.685)、四題(0.661)、五題(0.609)、一題(0.553)。第二題是閱讀理解題,詞匯量大,覆蓋面廣,重點考查學生分析問題的能力。學生失分的主要原因是基本功不過關,往往因為一個知識點沒有掌握好,而影響了整道題的理解。因此,在今后的教與學中,應在閱讀理解方面加強,具體應做到:一是閱讀題材要廣泛,如科普類、文史類、應用文類等;二是提高閱讀速度,平時可以運用一定的閱讀技巧進行限時訓練;三是注重課外閱讀,要堅持每天閱讀,適量的課外閱讀,能提升使用英語的能力。英語學習,重在夯實基礎,完善語感,提高語言應用能力。
表4 每試題得分與總分的關聯度
在傳統情況下,一次考試往往以評分而告結束,而考試中大量有益于改進教學的信息產生于考后分析。因為通過試卷質量分析與評價,獲取有關試題質量的各項指標,以判斷考試的有效性,發現學生錯誤的集中點,明確教學過程中的薄弱環節及存在問題,有助于教師有針對性地改進教學方法和手段,改進考試設計,完善命題工作,減少考試設計中的隨意性。因此,考試成績的分析與評價是教學過程中的一個重要環節,特別是在提倡教考分離的時代,通過試題質量分析,積累一定數量的好試題,是逐步建立科學規范試題庫的基礎。
作為教師,應能根據教學決策的需要組織相應的考試,善于分析、解釋和運用各種考試資料,以獲取教學決策所需要的信息,這是提高教師素質的重要環節。