黎開明
【摘要】高職高專英語A級測試試卷的信度與效度如何,在很大程度上體現出該測試試卷的設計水平,決定著在多大程度上該測試的可信程度以及該測試對教學的有效度。本文以英語教學的《基本要求》和《考試大綱》為參考依據,側重探討如何構建與現代經濟社會發展相適應的新型高職高專英語A級測試評價體系,提升其信度與效度,從而促進高職高專英語教學研究與改革。
【關鍵詞】高職高專英語 ?A級測試 ?信度 ?效度 ?測試評價體系
一、A級測試評價模式需要改革
改革開放幾十年來,社會經濟快速發展,高職高專英語教學進行了一系列的改革創新,但是相應的高職高專英語測評模式的改革情況卻不盡人意。高等學校英語應用能力考試(即通常所說的A、B級考試) 是在我國高職院校中廣泛應用的主要英語測試評價模式, 其全國統考模式與不同發展地區的高職英語教學水平差異以及個性化的需求本身就是不一致的,出現了許多急需解決的問題。
(一)A級測試的信度不夠,即不能反映學生真實英語水平
信度(reliability)定義如何界定?所謂高職高專英語A、B級測試的信度,即指該測試的設計過程、測試過程、測試結果與考生真實英語水平的關聯程度究竟有多高,決定了該測試的可信程度。由于學生將來就業時對英語過級證書的現實需求,以及學校相關部門對提高英語過級率的期望值和硬性指標要求, 教師將重點放到了提高考試成績,提高英語過級率之上,最后導致出現重信度而輕效度的結果。在這個期間,學生應該學什么,教師應該教什么,已經變得不再重要。以A級(PRETCO)的測試項目及其題型為例,雖然客觀題型具有很多優點,然而并不能考查出學生的聽說讀寫的實際應用能力,無法實現“著重考核學生實際運用語言的能力”的教學初衷。
(二)A級測試的效度不夠,即考非所學,不能樹立正確的學習導向
效度(validity)定義如何界定?簡單來說,就是測試的有效性。
換句話講,所謂高職高專英語A、B級測試的效度,即指該測試能在多大程度上反映出考生所學與所考的關聯度 ,從而體現出該測試對教學的有效度。目前實行的A級測試對《高職高專教育英語課程教學基本要求》是有很大的促進和推動作用,標準化、規范化的考試操作流程簡單,易操作。但由于教師將重點放到了提高考試成績,提高英語過級率之上,導致在現實中客觀存在重信度輕效度的現象,現實實踐過程中又不利于反向促進高職高專英語教學。因此,就會出現考生所學與所考的關聯度偏低,導致教師把重心放到英語過級率之上的非正常現象。
二、信度與效度具體問題
(一)A級試卷設計者的相關測試體系理論水平偏低
目前我國大部分教師,尤其是高職院校的教師,主要是從原來的中等職業學校、中等專業學校、行業企業職業培訓學校轉化而來,缺乏高職高專系統的A級測試學理論。因此,在A級試卷的設計過程中,測試的戰略方向和測試策略存在不系統、不科學的現象,結果導致一種錯誤的社會引導,使很多人把考試成績的高低與學生的英語水平聯系起來。
(二)英語A級測試很難客觀、準確地反映學生的真實英語水平
從技術上講,考試是對一個人全部學習行為的抽樣測驗。因此,抽樣的代表性、典型性,直接影響測試的有效性和可信程度。① 因此常常會出現試題難易程度不穩定,知識面難以客觀、穩定等現象。
(三)英語測試題型的固化
目前我們的A級測試中,選擇題的比例過大,而選擇題有很多弊端。測試專家 Alderson 說:“有證據表明,考生在答多項選擇題時可以通過一些應試技巧將自己的分數‘人為地提高許多。”
(四)閱卷評分質量穩定性差
每套試卷幾乎都有一定比例的主觀題(寫作和翻譯),但在閱卷評分的過程中往往又失去了主觀題在考試中應有的作用。一方面是因為主觀題缺乏詳細、科學的評分標準,另一方面是閱卷教師各自的側重點有所不同,打分的主觀性和隨意性很大。
三、對策與建議
(一)命題模式:集體命題人員專家庫和題庫相結合的原則,教考分離原則
(1)命題人員的確定。建立集體命題和題庫相結合的制度,并逐漸制度化、規范化。建立命題人員專家庫制度,靈活抽取命題人員。集體命題使命題人員可以集體討論相關的命題原則和細節,努力保證標準一致、質量穩定。設立隨機題庫可以避免命題的隨意性。同時,采取“教考分離”的制度,有效縮小命題者對自己學生的個人感情空間與個人利益輸送空間。
(2)命題制度化、規范化。第一,努力控制該試卷的題量。一份試卷必須具備一定的題量, 才能考查出考生真正的語言知識和能力水平。④第二,全局掌握試卷的題型結構,其根本標準就是,是否“所考即所學”,這直接決定該項考試的效度。第三,試卷難易程度。難度太大或者過于簡單,都不能保證考試的信度和效度。第四,注意試卷題型結構順序的科學性、合理性。先易后難,順應考試的心理學特點,幫助考生發揮出最好水平。
(二)測評過程:處理好信度和效度的平衡關系
考試策劃者應從試卷設計和命題一開始, 就把握好信度和效度關系這把評估考試質量標準的尺, 而不應把它們看作是事后的統計數據。⑤換句話講,既要保證盡可能反映出考生真實英語水平,從而體現出該測試的可信程度;也要盡可能反映出考生所學與所考的關聯度 ,從而體現出該測試對教學的有效度。
(三)評卷制度:公平公正公開
(1)評分細則穩定化、規范化、細化,包括客觀、主觀答案答案細化,并將每個大題的總分分解到每一道小題。
(2)評卷題目相對固定化。即每位評卷員只負責相對固定的某個題型的評卷,而不負責一份完整試卷,這樣就更專業,標準相對更穩定。
(3)保證集體閱卷方式,這樣閱卷結果有更高的可信度,提高閱卷的信度。
參考文獻:
[1]謝穎梅.“教考分離”啟示下對高職高專英語測試的思考[J].科教文匯,2008.
[2]謝穎梅.對高職高專英語測試的思考[J].科教文匯,2008.