摘要:本文以Access課程為例,探討如何構建網(wǎng)絡題庫,研究Access課程網(wǎng)絡題庫的構建方法。實際應用效果表明,所構建的題庫難度系數(shù)合理,考試結果的信度和效度較高,能夠全面、客觀、公正地評價學生的學習情況。
關鍵詞:網(wǎng)絡題庫;信度;效度;難度系數(shù);區(qū)分度
1 題庫設計原則
計算機知識和技能已經(jīng)成為衡量當代大學生能否適應信息社會發(fā)展的重要標志,考試是教學過程中的一個重要環(huán)節(jié),也是檢驗教學效果的一個重要手段。計算機基礎課程的學生人數(shù)眾多,適合采用無紙化網(wǎng)絡考試,實現(xiàn)計算機自動選擇考題、自動組卷、自動評分。在組織無紙化網(wǎng)絡考試時,需要構建龐大的題庫。構建題庫有利于教學過程的科學化、系統(tǒng)化和規(guī)范化,公正、客觀、有效地評價教學效果,提升教學管理水平。優(yōu)質(zhì)題庫是教學管理成熟和完善的標志。在設計題庫時,需要注意如下幾個原則。
1)題庫設計應當充分考慮教師、學生、教材和教學方式等4個要素,緊緊圍繞教學要求和教學目標,按照教學大綱設計題庫。
2)題庫中要有足夠的題量和題型,且難易程度分布合理,確保考試的信度、效度和可操作性,使得考試結果客觀、公正,能夠全面反映學生的知識掌握情況。
3)題庫中的試題要能覆蓋所有知識點,遍及全書的各個章節(jié),每個知識點都有相關的題目。以Access程序設計課程為例,題庫內(nèi)容包括數(shù)據(jù)庫的基本概念和數(shù)據(jù)庫的操作。
4)在構建題庫前,需要深入研究和全面把握教材內(nèi)容,經(jīng)過周密構思,確定題量、題型、試題屬性、輸入格式、參考書目、注意事項等,最終確定題庫設計方案。
5)題庫中的試題表述,要求語言準確、表述簡潔,不能產(chǎn)生多義性,便于計算機自動評閱試卷。
2 試題類型設計
在構建題庫時,首先將每個章節(jié)中所涉及到的知識點提取出來,然后根據(jù)知識點設計試題,使得所設計的試題不會出現(xiàn)遺漏內(nèi)容,確保題庫的覆蓋范圍。Access程序設計課程題庫分兩大部分:理論題和操作題。理論題主要測試學生對基本概念、基本理論的掌握情況,從不同角度考查學生對所學知識的掌握情況。理論題題型有單項選擇題、雙項選擇題、填空題和判斷題。
2.1 試題數(shù)量設計
確定整個題庫的數(shù)量是一個關鍵,如果題量太小,計算機隨機選題時,同一個題目重復的幾率就比較大。在確定題庫的試題數(shù)量時,要遵守以下原則。
1)一般來說,每個知識點的試題數(shù)量至少5個或更多,試題類型至少2個或更多,試題難度至少分為兩個層次。例如,交叉表查詢這一知識點,所設計的試題數(shù)量多達20個,試題類型4個,試題難度共有4個層次。
2)重點章節(jié)題量要大,題型要多,試題難度層次完整,盡量設計為單項選擇題或雙項選擇題。對查詢、窗體、報表等重點章節(jié),試題數(shù)量占總題量的74%,題型設計為單、雙項選擇及填空和判斷。試題難度包含5個層次,同一知識點,難易有別,基本達到了設計完整、合理的目的。
31非重點章節(jié)題量較小,在無法設計為單項選擇題或雙項選擇題的情況下,可以設計為填空題或判斷題。
2.2 理論試題設計
題庫的理論題型包括:單項選擇題、雙項選擇題、填空題、判斷題,這樣既豐富了題型,又使組成的試卷結構和難易程度更趨合理。在設計理論試題時,首先考慮設計雙項選擇題,其次考慮設計單項選擇題,然后考慮設計填空題,最后考慮設計判斷題。
1)單項選擇題:一個知識點可以設計多個單項選擇題,備選答案要有一定的迷惑性,相互之間關系平行,不能相互包含。
2)雙項選擇題:一個知識點如果存在多于2個以上選擇,此時可設計多個雙項選擇題,這樣可以增加試題數(shù)量。
3)填空題:一般來說,填空題設計為一題一空,一個知識點可以設計多個填空題。為了提高試題的客觀性,答案應當盡量唯一。
4)判斷題:如果知識點無法設計為單項選擇題、雙項選擇題或填空題,再考慮設計為判斷題,判斷題的數(shù)量不易過多,在計算機自動組卷時,一套試卷的判斷題不超過10%。
2.3 操作試題設計
計算機基礎教育需要注重培養(yǎng)非計算機專業(yè)學生的程序設計能力,使學生能夠運用高級程序設計語言獨立編制簡單應用程序,并應用于所學專業(yè)。操作試題用來考查學生的數(shù)據(jù)庫運用能力。試題分為基本應用題和綜合應用題。兩類試題的基本設計原則如下。
1)基本應用題:基本應用題主要是數(shù)據(jù)庫的基本操作,內(nèi)容包括建立數(shù)據(jù)庫、修改字段類型、字段名稱、字段屬性等內(nèi)容,用來考查學生的基本操作能力。
2)綜合應用題:綜合應用題要求學生對整個Access課程有一個全面的掌握,考查學生對整個課程所學知識的把握程度,內(nèi)容包括查詢、窗體、報表、頁、宏、模塊等操作。在設計操作試題時,一方面考查學生對數(shù)據(jù)庫的理解,另一方面還要考查學生對數(shù)據(jù)庫的綜合應用能力。
3 試題屬性設置
試題屬性是每個試題的參數(shù),目的是為計算機自動組卷提供依據(jù)。試題屬性包括:知識點、題干、備選答案、正確答案、試題等級、區(qū)分度等。根據(jù)課題組研制的網(wǎng)絡考試系統(tǒng),題庫采用電子表格Excel輸入,4張工作表分別為知識點編寫格式(如表1所示)和三個題型編寫格式(如表2、表3和表4所示),操作試題采用Word格式輸入。


3.1 知識點
知識點是教學內(nèi)容的基本單元,具有基元性和相對完整性,網(wǎng)絡考試系統(tǒng)按照知識點自動抽取試題。根據(jù)教材內(nèi)容和教學大綱,按教材的章節(jié)劃分,析出每節(jié)知識點;再根據(jù)每個知識點的內(nèi)容與性質(zhì),設計適當數(shù)量、難度不同的題型。
知識點是整個試題設計的關鍵,知識點太細,設計出來的題量就小,題型也不會很豐富;反之,知識點太寬,設計出來的試題可能出現(xiàn)交叉的情況,即同一試題可能會屬于兩個知識點。考慮到這個原因,課題組負責人指定由經(jīng)驗豐富的老師負責知識點的析出,然后再由其他人員設計試題。
3.2 難度系數(shù)
難度系數(shù)是指試題的難易程度,是試題屬性的重要參數(shù)之一。本題庫按照難易程度,劃分為五個等級——1、2、3、4、5,其中1級最容易,5級難度最大。如果一個知識點有多個題目,難度等級相同,但區(qū)分度可以不同。每個試題的難度等級不是一成不變的,根據(jù)每次考試成績的難度系數(shù)計算,可以動態(tài)調(diào)整試題的難度等級,使得題庫能夠更科學、更客觀地反映試題的難度。
試題難度的計算公式為P=1-R/N。其中,R為第i題的答對人數(shù),N為抽取第i題的總人數(shù)。難度系數(shù)越趨近于0,試題難度就越小;越趨近于1,試題難度就越大。當P≤0_3時表示試題難度較低;0.3<P<0.7時表示試題難度適中;P≥0.7時表示試題難度過高。
3.3 區(qū)分度
試題區(qū)分度是指試題對學生實際水平的區(qū)分程度或鑒別能力,區(qū)分度高的試題能對不同知識水平和能力的學生加以區(qū)分,使能力高的學生得高分,能力低的學生得低分;反之,區(qū)分度低的試題則不能對學生的能力進行有效的鑒別,水平高和水平低的學生得分相差不大或無規(guī)律可循。試題區(qū)分度的計算方法如下。
1)將抽到第i題的全體學生得分由高到低排序,前27%作為高分組,后27%作為低分組。
2)計算第i題高分組學生的平均成績X和低分組學生的平均成績x。
3)設第i題滿分為W,則第i題區(qū)分度D定義為:D=(X-X)/w。
一般認為,D>0.4的試題區(qū)分度為“很好”;0.2≤D≤0.4的試題區(qū)分度為“良好”;D<0.2的試題區(qū)分度為“較差”,如圖1所示。

4 題庫應用效果
Access網(wǎng)絡題庫建成后,經(jīng)過多次考試使用,利用考試效能分析軟件,對考試成績和考試效能進行了分析。通過考試成績分析,有利于教師不斷提高教學質(zhì)量,學生也能發(fā)現(xiàn)自己的不足之處,針對薄弱環(huán)節(jié)加強訓練。考試效能分析軟件主要包括三個方面的定量分析。
1)成績分析:分析內(nèi)容包括成績值分布情況、均值、及格率、優(yōu)秀率、標準差、成績分組對比等統(tǒng)計指標。
2)試題分析:試題分析就是計算題庫中每道試題的難度和區(qū)分度。
3)試卷分析:試卷分析就是分析計算機自動組卷的信度和效度。
以2008年級考試為例,學生5000余名,平均成績75.25,及格率占92.97%,優(yōu)秀率占20.41%,考試成績呈正態(tài)分布。試題難度和區(qū)分度的截圖如圖1所示,從圖中可以看出,試題難度適中,大部分試題難度系數(shù)都在0.3以上,區(qū)分度情況較為理想,對少數(shù)難度系數(shù)小于0.3的試題和區(qū)分度在0.2以下的試題,可以考慮從題庫中刪除或修改試題內(nèi)容,使其難易程度和區(qū)分度更趨合理。總的來說,試題平均難度系數(shù)為0.52,平均區(qū)分度為0.34。分析結果表明,題庫具有良好的難度和區(qū)分度。
通過對每次考試結果的統(tǒng)計分析,可以適當修正試題屬性以改善題庫質(zhì)量,提高組卷效力,使考試更加標準、科學、客觀、公正,真實、全面反映教學情況。雖然題庫設計針對Access程序設計課程,但設計思想同樣適用于大學計算機基礎和Visual Basic程序設計等課程。

(編輯:白