摘 要: 考點效度(testing-point validity)這一概念的提出,意在從命題的角度,盡量提高刪除項目的語境層次,擴展英語完形填空試題的考點層次,把單詞、詞組層次的題目提高到篇章、語篇層次,提高試題效度。本文通過對選擇式完形填空和開放式完形填空的考點效度進行對比研究,發現現行選擇式完形填空考點層次低于開放式完形填空,但鑒于其信度較高,以及命題、實施和評分方面的優勢,應努力提高其考點效度,同時也要根據考試特點使用開放式完形填空。
關鍵詞: 考點效度 選擇式完形填空 開放式完形填空
1.考點效度概念
考點效度(test-point validity)是我國語言測試研究領域的著名學者李筱菊教授在其論著《語言測試科學與藝術》中提出的一個頗具創見性的概念。它同內容效度、結構效度、表面效度和反撥效度等概念一樣都是對語言測試題型在效度方面提出的質量要求,不同的是,它是專門針對完形填空和短文改錯等一類綜合考點單技能試題類型提出的。對完形填空題而言,所謂考點效度,就是指命題者在命題時應該對所要刪除的項目進行考查分析和選擇取舍,盡量提高刪除項目的考點層次,充分體現和利用完形填空題的篇章特色、語境功能和綜合特點,以便能充分考查出受試者綜合運用語言知識的能力(李筱菊,1997)。總之,完形填空題的考點效度就是對完形填空題在考點刪除的合理性方面提出的效度要求。
2.考點效度分析的必要性
我國英語測試和練習完形填空大都采用的是合理刪詞分題選擇完形填空(rational deletion-separate item MC cloze)。與原詞完形填空(exact word cloze)和可接受詞完形填空(acceptable word cloze)等開放性題型相比,選擇式題型大大限制了這種題型的表面效度、結構效度和反駁效度甚至是內容效度,因此,我們很難對這些效度進行有效的控制和操作。李教授的考點效度概念從命題者的角度出發,主張完形填空的刪詞應著重體現這一題型的篇章特征和綜合特點,著重于對學生語言綜合能力的考查,而不僅僅是對學生進行低級的離散的語言點的考查。對目標試題進行考點效度分析,從統計學的角度分析完形填空題考點的語境層次分布,可以有效地檢驗該題的命題質量。在高考完形填空其它效度不好操作的情況下,考點效度分析幾乎成了對其試題質量檢驗的唯一途徑了(聶建忠,1999)。
3.研究問題和假設
(1)完形填空題型的變化是否影響試題的考點效度?
(2)導致考點效度發生變化的因素有哪些?
4.研究方法
4.1實驗材料
本研究的實驗材料為兩份試題。一份是多項選擇完形填空,另一份是開放式完形填空(略),即第一份完形填空除掉選擇題部分。
多項選擇完形填空試題
In the United States there was an unusual tale telling of the daughter of a mechanic(技工).One day while walking along the bank of a lake,the girl 36 to see _20_eggs laid by a wild goose.After some time the girl 37,the mother would not return to her eggs and she 38 to take them home.There she carefully 39 the eggs in the heat of a lamp.Several days 40 the eggs broke and the baby geese came into the 41.
Geese are known to take the first living thing they see as their mother.42 to these young geese,the girl was their mother.
As they 43,the girl was able to 44 her birds to run across the grass,but she could not teach them to 45.The girl became increasingly worried about this,both when 46 and in her dreams.Later,she had an 47.She would pilot a plane to guide them in 48.She asked her father for a plane and he assembled(組裝)a small aircraft for her.
Caring about 49 safety,the father decided to pilot the plane himself.However,the birds did not 50 or follow him,and 51 slept in the grass.
One day,the girl 52 into the plane,started it and soon left the 53.Seeing their mother take to the air,the birds 54 flapped(拍打)their wings and 55.She flew the plane freely in the sky,her young birds following.
36.A.managed B.attempted C.happened D.supposed
37.A.realized B.expected C.imagined D.admitted
38.A.helped B.decided C.afforded D.meant
39.A.placed B.protected C.treated D.examined
40.A.ago B.out C.later D.long
41.A.family B.lake C.home D.world
42.A.But B.Also C.Thus D.Still
43.A.increased B.improved C.rose D.grew
44.A.ask B.lead C.want D.allow
45.A.fly B.race C.swim D.sing
46.A.asleep B.away C.around D.awake
47.A.idea B.opinion C.explanation D.excuse
48.A.sky B.heaven C.flight D.plane
49.A.his B.her C.their D.its
50.A.respect B.remember C.recognize D.receive
51.A.so B.instead C.hardly D.too
52.A.climbed B.looked C.reached D.fell
53.A.house B.floor C.water D.ground
54.A.secretly B.disappointedly C.patiently D.eagerly
55.A.looked away B.set out C.went by D.turned back
4.2方法及步驟
4.2.1研究方法
用考點層次理論對兩試題考點效度進行分析。
表1 選擇式完形填空和開放式完形填空考點層次分析圖
圖例:·—·—·:開放式完形填空;——:選擇式完形填空
4.2.2數據的統計
表2 兩種題型考點層次統計比較考點效度變化
注:W—單詞層次。單純考拼寫、語法變位或單純考構詞法的題目,屬于這一層次,是最低層次。P—詞組層次。需要填的詞和它前后的詞有固定的搭配關系,只要看空缺前或后的詞便能決定該填什么。S—句子層次。空缺需要填什么詞,本句之內就可以決定,不用超出句子的范圍。D—語篇層次。空缺需要填什么詞,需要超出句子在語篇層次上考慮才能決定。W、P、S、D屬于考點層次的內容。M是意義因素,C是慣用搭配因素,G是語法因素。M、C、G屬于考點因素。
5.結果分析
通過(表1)選擇式完形填空和開放式完形填空考點效度的比較,我們發現選擇式完形填空考點效度明顯低于開放式完形填空。選擇式完形填空詞組層次的題目有7道占總題數的35%,考查句子層次的有11道占總題數的55%,這兩塊加起來就占到了整個題目的90%,篇章層次的題目僅有1道占5%;而將題目選擇項去掉變為開放式完形填空后,考點層次明顯有了提高,篇章層次的題目有9道占了45%。
題目變為選擇式完形填空后,考點效度降低的原因是因為選擇式完形填空的開放程度低于開放式完形填空,開放式完形填空要求對目標語有一定的產生性運用,而選擇式完形填空則提供了選擇項,完全排除了對目標語的產生性運用,大大限制了填空的自由度,縮小了考點的制約范圍,考點層次也就必然降級,同時還減弱或失去了向下包含其他層次其他因素的可能性,因此,考點效度必然降低。只要考試材料相同,所刪詞的位置也相同,開放式完形填空的考點層次必然高于選擇式完形填空相對應題目的考點層次。
選擇式完形填空因其題型特點,不能達到同開放式完形填空一樣高的考點層次,但因其測試信度以及與其它測試題型的相關性相對較高,在命題、實施和閱卷方面的方便、快捷,我國大部分考試都還在廣泛使用。我們完全可以從命題上作出努力,盡量使選擇式完形填空考點層次做到科學、合理的分布,以確保完形填空試題的區分度和效度,真正體現該題型考查受試綜合能力這一宗旨。正如Alderson(1983)所說,完形填空應該如Oller(1979)所倡導的著重于測試考生的綜合語言能力,否則它就是無用的測試。同時,對于小規模的測試,如分班測試,我們也可以考慮使用開放式完形填空,從而真正考查學生的綜合語言能力。
參考文獻:
[1]李筱菊.語言測試科學與藝術[M].長沙:湖南教育出版社,1997.
[2]聶建中,趙秀紅.高考英語完形填空的考點效度分析[J].教育理論與實踐,2005,(25):54-56.
[3]Alderson,J.C.et al.Language Test Construction and Evaluation[M].Cambridge University Press,1983.
[4]Oller,J.W.Language Tests at School[M].A Pragmatic Approach.London: Longman Press,1979.