大學英語校內測試有用性研究

周文明

摘要：測試和教學密切相關，大學英語校內測試的有用性對整個大學英語教學過程具有重要的影響。本文基于Bachman & Palmer提出的測試有用性框架，重點分析了大學英語校內測試的信度、構念效度、影響力以及可行性。結合理論分析和實踐經驗，揭示測試過程中潛在的問題，為更多高校語言測試的開發、實施和使用提供建議。

關鍵詞：大學英語；測試有用性；信度；構念效度；影響力

中圖分類號：G642.0 文獻標志碼：A 文章編號：1674-9324（2017）32-0224-02

自上世紀60年代語言測試成為獨立的一門學科以來，國內外專家學者從理論和實踐方面進行了大量的研究，豐富了語言測試的研究成果。過去的幾十年里，語言測試領域的研究對象主要是大規模、高風險考試。而我國高校學生所必須參加的校內考試具有校本特色，具有不同于大規模、高風險考試的特征。因此，有必要對具有校本特色的校內測試進行研究，從而更好地服務于教和學，實現測試的目的。

一、測試有用性框架

語言測試界的理論大多源自教育與心理測量學。信度和效度是一項測試優劣最重要的指標。20世紀80年代以前，效度的概念不斷演變發展，從單一的效度觀發展到“三位一體”效度觀。80年代中期，構念效度逐漸成為效度的核心，進入了效度整體觀時期。Bachman（1990）將教育與心理測量學家Messick的效度整體觀理論引入語言測試領域，從一個新的角度討論效度和效度驗證理論。Messick認為效度只有一個（構念效度），其他的效度只是解釋構念效度的證據。這種“一元多維”的效度整體觀將測試的“社會影響力”置于足夠的高度。但是Messick的效度理論抽象、復雜，涉及效度驗證因素較多，且并未提供效度驗證的具體方法。為了解決這一問題，Bachmann & Palmer（1996）提出了語言“測試有用性框架”。該框架明確了信度、構念效度、真實性、交互性、影響力和可行性六條質量屬性，使用語言測試效度驗證具有了可操作性。按照Bachman & Palmer（1996）的測試有用性理論，信度是指測試的穩定性和可靠性；構念效度指對測試分數所做的解釋在多大程度上是有意義的；真實性指語言測試任務語言特征和真實使用語言特征之間的相似度；互動性指考生哪些個體特征參與完成測試任務以及這些特征被激活的程度如何；影響力則是指一項測試對整個社會、教育體制及個人帶來的各種后效作用；可行性指在測試設計、開發和使用過程中從物力、人力和財力方面考慮是否可行。

二、大學英語校內測試

大學英語校內測試主要指在校學生參加的常規性期末考試，也包括入學考試、分級考試等。筆者所在院校大學英語期末考試側重以語言知識為重點的語言能力考察，屬于心理測量學-結構主義的測試模式。本測試模式將語言知識理解為語音、詞匯、語法以及流利度等的組合，認為語言技能包括聽、說、讀、寫四項，多采用分立式的題目進行測試。通過多年的摸索，筆者所在院校大學英語期末測試已基本形成固定的試卷結構，由聽力理解、詞匯與語法、閱讀理解、完形填空以及翻譯或寫作部分構成。聽力理解部分（25%）考查本學期所對應級別的聽力理解能力，時長在20分鐘左右；詞匯（10%）語法部分主要考查本學期教材中所學習基礎語法詞匯知識；閱讀理解部分（40%）對應該學期級別要求，選擇四篇不同題材的文章，考查學生的閱讀分析、歸納總結以及批判性思維能力；完形填空（10%）為綜合題目，全面考查學生各方面英語運用能力；翻譯或寫作部分（15%）為主觀性試題，選擇恰當的、教材話題相關的翻譯或者作文題目，全面考查學生輸出能力。本研究將依托Bachman & Palmer（1996）提出的“測試有用性框架”，結合校內考試的特點，著重分析筆者所在院校大學英語期末測試的信度、構念效度、影響力以及可行性。

三、測試有用性分析

1.信度。信度是指一項測試的可靠程度。影響考試信度的因素很多，但對于大學英語校內測試來說，主要有客觀題的內部一致性信度和主觀題的評分信度。影響客觀試題內部一致性信度因素包括以下幾點：第一，試題的難度和區分度。題目難度會影響區分度，進而影響測試信度。第二，試題數量。從理論上來說，題目越多，信度越高，但需要考慮考試時長和考生承受力。第三，試題的同質性，即試題是否屬于同一范疇。為保證試題的內部一致性，筆者所在院校盡量做到試題編制標準化、規范化。學校成立專門考試中心，負責制定考試規范、命題準則，并對命題人進行集中專業培訓，確保所選每一道試題質量可靠、難易度和區分度適中。每一套試題題量在95和105之間，適合110分鐘完成。影響主觀題評分信度的主要是評閱人因素。主觀測試的評分常常因人而異，所以很難達到較高的信度。為了盡可能把評閱人主觀因素影響降到最低，首先要制定詳細明確、可操作性強的評分標準；其次，加強評閱人閱卷前的培訓學習，使閱卷人員掌握統一、細致、穩定的評閱程序和評閱要求。

2.構念效度。效度回答的是一項測試在多大程度上考了想要考察的內容的問題。效度整體觀理論下，效度是一個整體概念，構念效度是其核心，內容和校標關聯證據是構念效度證據的一部分。

構念，即“構成語言能力的理念”。試卷開發前首先要明確所要測量的構念，也就是說，要考查的能力是什么。測試與教學密切相關，兩則都是建立在一定的語言學理論和語言教學理論基礎之上的。大學英語校內測試屬于成績測試的范疇，主要考查范圍是本學期所學內容和能力。因此，在明確測試構念時可以借助于本校的大學英語課程教學大綱中本學期能力量級的描述。教學大綱對各學期各級別學生從聽、說、讀、寫、譯能力要求的角度給出了宏觀描述。首先，教學大綱涵蓋的能力要求轉化為具體的測試構念時還需進一步細化，明確各種能力在不同級別上的具體要求，以提高構念框架的可操作性。此外，為保證測試效度的完整性，應盡可能采用主、客觀相結合的多種題型。

3.影響力。大學英語校內測試的影響力主要是指對教學過程、學生學習、教師教學的影響。期末測試除了檢驗學生是否達到了該學期的教學要求，還兼有促教促學的功能。學生通過參加考試了解前一段時期的學習情況，發現自己的不足和努力方向；教師通過分析測試成績，發現教學中潛在的問題，及時調整教學過程，優化課程設計。

4.可行性。測試的可行性主要考慮在測試設計、開發和使用過程中物力、人力和財力等方面的因素。校內測試主要涉及到人力方面的因素。首先，試題的命制是一項技術含量高的專業性任務，并非每一位大學英語教師都是合格的命題者。命題人員必須進行專業的培訓，對試題的難易度、區分度等技術指標有深刻的理解，否則，所命試題就達不到測試質量要求，更難保證測試的信度和效度。組建專業的命題團隊是十分必要的。此外，主觀試題閱卷費時費力，信度相對較低，命題者不得不忍痛割愛，放棄一些效度較高的開放性試題，這將影響測試整體效度的完整性，筆者所在院校大學英語測試由教務處統一組織管理。

四、總結

測試在整個教學過程中占據著至關重要的地位。研究大學英語校內測試的有用性，對于開發、實施具有校本特色的科學、合理的考試，切實保障大學英語教學質量具有重要意義。根據以上分析，對各高校大學英語測試工作的開展提出以下建議。

第一，成立專門的測試機構，完善、優化測試程序，制定測評工作章程，從制度上保證測試的信度。第二，加強命題人學習、培訓、交流，在深入了解相關測試理論和教學理論的基礎上，合理組織試卷結構，選擇考題類型，保障測試的科學性，提高測試信度和效度。第三，針對自身人力、物力的不足，發揮形成性評價的積極作用，提高綜合評測的構念效度完整性。第四，明確教學目標和測試標準，引導學生樹立正確學習態度，走出教材，跨越課堂，全方位多渠道提高自身英語語言應用能力。最后，提高任課教師專業素養，尤其是數據分析能力，以更加高效地利用測試數據，服務于教學。

參考文獻：

[1]Bachman.L.F.& A.S.Palmer.1996.Language Testing in Practice [M].Oxford：Oxford University Press.

[2]Messick S.Validity and washback in language testing [J].Language Testing，1996，13（3）：241-256.

[3]韓寶成，羅凱洲.語言測試效度及其驗證模式的嬗變[J].外語教學與研究（外國語文雙月刊），2013，（3）：411-425.

[4]楊惠中.有效測試、有效教學、有效使用[J].外國語，2015，（1）：2-26.