高等學校英語應用能力考試“詞匯用法和語法結構”內容效度分析

摘 要: 近年來，高等學校英語應用能力考試受到了越來越多的重視和關注。本文以2001年至2006年的12份試卷的“詞匯用法和語法結構”(Vocabulary and Grammar)部分共240道題為樣本，從三個方面(測試內容是否和測試目標有關;測試內容是否具有代表性;測試內容是否符合測試對象)對其進行內容效度分析，希望對該考試的命制有所幫助，并提出了一些建議以提高其試卷的質量。

關鍵詞: 高等學校英語應用能力考試 詞匯用法和語法結構 內容效度

1.引言

隨著社會對高等技術應用性人才需求的不斷擴大，我國高等職業教育的發展得到了很好的發展，規模也迅速擴大。目前在全國1731所普通高校中，高職高專有1047所，占總數的60.49%。近年來，高職高專的畢業生人數和在校人數都超過了全國本科大學生，參加高等學校英語應用能力考試(Practical English Test for College，RETCO)的人數也逐年增加。

PRETCO是由教育部批準成立的高等學校英語應用能力考試委員會設計、供高職高專院校和成人高專院校學生自愿參加的標準化考試，也是由教育部高等教育司委托全國高職高專英語課程教學指導委員會和全國高等學校英語應用能力考試委員組織進行的國家級考試。根據《高等學校英語應用能力考試大綱》(以下簡稱《大綱》)，該考試是為檢測高職高專學生是否達到所規定的教學要求而設置的考試。它以《高職高專教育英語課程教學基本要求》(以下簡稱《基本要求》)為依據，既測試語言知識，又測試語言技能;既測試一般性語言內容又測試與涉外業務有關的內容，它的目的是考核考生的語言知識、語言技能和使用英語處理有關一般業務和涉外交際的基本能力，主要考核考生實際應用英語進行日常和業務涉外交際的能力，旨在促進高職高專英語教學向培養高等應用技術型人才的方向進行改革;同時為用人單位提供對高職高專畢業生英語水平的評價標準，以提高其進入人才市場的競爭力。從測試的目的可以看出，該考試的性質實際是一項英語水平考試，這一點在《大綱》中也明確地提了出來。

考慮到我國高職高專學生英語入學水平的現狀，《基本要求》將教學要求分為A級要求和B級要求，PRETCO也相對應地分為A級考試和B級考試。A級為標準級別，覆蓋《基本要求》的全部內容，B級對應于《基本要求》的B級范圍，屬于過渡級別。目前廣東省大部分高職高專院校對學生的要求是通過B級，由于篇幅所限，本文僅探討PRETCO的B級考試。

根據《大綱》，B級考試主要包括五個部分:聽力理解、詞匯用法和語法結構、閱讀理解、翻譯(英譯漢)和寫作(或漢譯英)。《大綱》中對各部分的測試題型、內容及時間安排都作了具體的規定。那么，近幾年來該考試的試卷質量如何呢?通常一份試卷的質量好壞，一般要看它的效度(validity)、信度(reliability)、難度(power)、區分度(discrimination)、實用性(practicality)及后效作用(backwash)。效度，也叫有效性，是指一套測試所考的是否就是設計人想要考查的內容。效度的高低是語言測試最重要的指標，是語言測試的基本出發點(劉潤清，2000)。某次測試的效度如何，可以從幾個不同方面去說明、驗證，如內容效度(content validity)、結構效度(construct validity)、預測效度(predictive validity)和共時效度(concurrent validity)(李筱菊，1997)。本文僅從內容效度方面，對高職高專英語應用能力考試(B級)考試第二部分“詞匯用法和語法結構”進行一些統計分析，并根據統計分析結果提出合理的建議，以引起命題者的注意。

2.“詞匯用法和語法結構”的內容效度分析

語言測試的內容效度是指測試是否考了它所要考的，即是否考了大綱規定要考的(李筱菊，1997)。驗證考試的內容效度如何，主要看試題設計和試題產生是否嚴格依據《大綱》進行，測試中所涉及的內容是否具有代表性，是否能準確、全面、充分體現《大綱》要測試的內容。因此，要評估該考試“詞匯用法和語法結構”的內容效度，就要把其測試內容與《基本要求》作一比較，看其是否符合《基本要求》的規定。為了便于統計，我以2001年6月至2006年12月共12份試卷的“詞匯用法和語法結構”部分的測試內容(即360道題)為樣本，根據依據《基本要求》和《大綱》就以下三個方面進行內容效度分析。

2.1測試內容與測試目標的相關性

一直以來，B級考試的詞匯用法和語法結構部分共有20題，其中10題為多項選擇題(占總分值的5%);10題為填空題(占總分值的10%)，要求根據所給句子的結構和內容，寫出括號里所給單詞的適當形式。“詞語用法和語法結構”部分根據命題內容為標準可劃分為詞匯測試題和語法測試題。也就是說，如果試題主要考查詞匯意義或搭配問題，則該試題屬于詞匯測試題;如果試題的命題內容涉及語法范圍，即句法或詞法時，那么該試題就為語法測試題。通過對12份試卷的分析不難發現，多項選擇題的有些題目，是屬于詞匯測試題，舉例如下:

If you travel in a foreign country，a tour_______may save you a lot of trouble.(2004年6月第23題)

A.director_______B.helper_______C.guide_______D.assistant

該試題的考點為詞義辨析，“tour guide”為固定搭配，意為“導游”其他三個選項均為干擾項，因此該試題就歸屬于詞匯測試題。

而填空題的有些題目，很明顯是屬于語法測試題，舉例如下:

They talked to him for hours，(try)_______to persuade him to change his mind.(2006年12月第30題)

該試題的考點為非謂語動詞作狀語，根據是“(try)_______to persuade him to change his mind”此處作狀語，表示伴隨情況，對謂語加以說明。因此，正確答案為trying。現在分詞作狀語表示主語正在進行的另一動作，對謂語表示的動作或狀態加以說明。因此該試題就屬于語法結構測試題。

從表一中可以發現，從2001年到2006年的這12次考試中，在“詞語用法和語法結構”部分的240道題中，詞匯測試題占113道，語法測試題占127道。也就是說，在“詞語用法和語法結構”部分詞匯測試題和語法測試題的比例幾乎相當，約為1∶1.12，語法測試題的出題份額稍占優勢。總體看來，體現出對詞匯、詞組、短語用法和語法結構的均衡考查。但是值得引起注意的是，“詞語用法和語法結構”部分的兩種題型的分值是不一樣的，每個多項選擇題的分值為0.5分，而填空題則為1分。因此，從分值的分布來看，語法測試題的分值明顯大于詞匯測試題的比重，從這點來說試題體現了對語法測試的重視。

《大綱》規定，“詞語用法和語法結構”的測試目標是測試考生運用語法知識的能力。測試范圍包括《基本要求》中的“詞匯表”和“語法結構表”所規定的全部內容，即“認知2500個英語單詞(包括入學時要求掌握的1000個詞)，以及由這些詞構成的常用詞組，對其中1500左右的單詞能正確拼寫，英漢互譯;掌握基本的英語語法規則，在聽、說、讀、寫、譯中能正確運用所學語法知識”。從語法測試題來看，這些題基本涵蓋了《基本要求》中“語法結構表”所列出來的語法知識點;而詞匯測試部分的試題主要的考點為詞形轉換、固定搭配、近義近形詞辨析和短語動詞等，也很好地符合了《基本要求》規定要求學生掌握的詞類和構詞法的詞綴法、轉化法和合成法等詞匯知道的要求。由此，我們可以肯定地得出“詞語用法和語法結構”的兩類試題和《考試大綱》所規定的測試目標是一致的，具有較高的內容效度。

2.2測試的內容是否具有代表性

測試內容是否具有代表性是指考試題目取樣的代表性如何，而評估試卷的代表性如何要看試題樣本是否充分全面體現了要考查的全部內容。試卷的代表性如何直接影響測試效度的高低。表二是對這12套試卷的“詞語用法和語法結構”部分的127道語法測試題所作的進一步詳細分類。

表2 127道語法測試題考點分布一覽表

從表二中我們可以看出，從2001年到2006年的這12次考試中，每年的試卷在“詞語用法和語法結構”部分的試題基本覆蓋了全部的考點，從考點的分布來看，考點主次分明，重點考查的內容如對非謂語動詞和動詞的時態語態的考查幾乎每份試卷都覆蓋到了。因此，語法測試題的測試內容基本上具有代表性，即語法測試題有一定的內容效度。但縱觀這12套考題我們也可以發現，對于《基本要求》中要求掌握的個別內容如插入語等也沒有涉及，這使語法測試題的內容效度稍微打了點折扣。

表三是對這12套試卷的“詞語用法和語法結構”部分113道詞匯測試題所作的進一步詳細分類。

表3 113道詞匯測試題考點分布一覽表

從表3我們可以看出，從2001年到2006年的這12次考試中，在“詞語用法和語法結構”部分對詞匯的測試占較大比重的是詞形轉換，而且這類考題都是以填空題的形式出現，這很好地彌補了多項選擇題測試詞匯的單一性的不足之處，也較好地體現了《大綱》規定的“測試考生運用語法知識的能力”這一點，具有很好的內容效度。

2.3測試內客是否適合測試對象

“詞語用法和語法結構”試題的測試內容是否符合測試對象，從歷次的測試結果和學生的實際情況分析，答案應該是肯定的。從每屆學生的考試成績來看，“語法與詞匯”部分很少有得滿分的，也很少有得零分的。而填空題對考生運用語法知識的要求更高，這一部分學生失分較多。總體來說，其測試內容基本上符合大部分的測試對象，其內容效度也是不錯的。

但是，我們也發現，在這12份試卷的240題試題中，有些考題測試內容重復，舉例如下:

After careful(consider)，the committee decided to recommend Mr.Smith for the post.(2001年月6第35題)

After careful(consider)，the committee agreed on the proposal.(2002年月12第32題)

這兩道題測試的考點是consider一詞的名詞形式，從形式上看幾乎一模一樣。而通常考生在復習迎考前，都會找出往年的全真題來進行模擬測試，試想考生在考場做題時欣喜地發現題目是才做過的，他根本無需思考就能做對試題，那么這道題對于考生來說就沒有什么效度可言。如果一套試題出現了用之前考過的類似試題，該試卷的整體內容效度勢必會受到影響。而同一份試卷中的測試內容則沒有發現測試考點重復的現象。

3.結語

從以上分析來看，PRETCO中的“詞語用法和語法結構”試題的命制具有較高的內容效度。和CET—4和CET—6等大規模標準化考試比起來，PRETCO開始時間雖不長，但已成為衡量高職高專院校學生英語水平的一個較為統一的尺度。近幾年的實踐表明。英語能力考試對于提高高職高專院校學生的英語應用能力起到了積極的作用，也得到了更多的關注和重視。為了提高測試的內容效度和試卷質量，命題者須注意:第一，嚴格按照《大綱》的規定來命制試題，做到對考點的全面覆蓋。第二，避免測試內容的重復。只要這樣才能進一步提高PRETCO試卷的內容效度和質量。

參考文獻:

[1]李筱菊.語言測試科學與藝術[M].長沙:湖南教育出版社，1997.

[2]劉潤清，韓寶成.語言測試和它的方法[M].北京:外語教學與研究出版社，2000.

[3]教育部高等教育司.高職高專教育英語課程教學基本要求[M].北京:人民教育出版社，2000.

[4]徐清平，張延續.英語專業四級考試“語法與詞匯”內容效度分析[J].外語研究，2004，(2).

[5]2001年-2006年PRETCO(B級)12份試卷.