教務管理系統試卷質量量化評價的探討與實現

周 媛

（福建中醫藥大學教務處，福建 福州 350122）

課程考試試卷作為對高校學生所學知識和技能的一種考核方式，是學生理解掌握所學知識的原始記錄，階段性和總結性地反映了學生的學習效果。試卷和成績是在各類教學質量檢查和評估中不可或缺的重要材料，通過試卷檢查可以發現教學過程中教與學兩方面的問題反映，試卷質量真實反映了高校的教學質量水平和質量評價結果，決定了考試質量、成績的公平和有效性。所以試卷質量評價日漸成為教學質量反饋和評估的核心和重要指標，試卷質量管理也變成高校教學管理的重要組成部分，如何有效地監控和提高試卷質量，可建立考試質量評價系統推動考試質量不斷提高[1]。長期以來為了促進試卷命題、評卷和歸檔的規范化建設，我校多次組織校院兩級教學督導組專家，從試卷歸檔、試卷評閱、試題質量三個方面對全校多個學年學期所有課程進行全覆蓋式的抽調性隨機檢查，檢查結果試卷質量方面凸顯問題主要集中在試卷格式要求上，說明這種檢查方式只能進一步規范試卷形式，卻無法對試卷命題質量和內容進行把關和審查。在2016年的審核性評估中共調閱74門課程5737份試卷 ,針對試卷質量問題，各位專家提出了很多寶貴意見和建議，希望進一步提高試卷質量管理工作，采取更有效的措施對考試成績、試卷、試題進行科學分析，及時發現教學內容和試卷試題中存在的問題，形成長效反饋機制，使教師可以充分了解學生學習情況，自查教學效果和質量，促使其不斷總結教學經驗、改進出題方法和技巧從而提高試題和試卷質量，確保考試職能的有效發揮。學校教學管理部門也可以根據教學質量評價獲取的反饋信息，對整個教學信息進行全方面科學分析，對教學質量和人才培養質量做出價值判斷，從而有針對性地調整和改革教學。

一、試卷質量的研究意義和方法

試卷質量可以檢驗教學質量好壞，考核學生學習水平高低，真實反映學生掌握知識和靈活運用知識的能力，是教學質量評價的核心內容，所以進行試卷質量分析是非常重要的。根據分析結果對試題進行篩選，去粗存精，保留高質量題目，剔除低質量題目，整體提高試卷質量，達到試卷考核的最終目的，體現考試成績的真實有效和公平性。

試卷質量評價方法一般分為定性和定量兩種。定性評價是指對試卷或試題的語言文字的描述是否合理進行分析，如遣詞用語是否恰當、題目敘述是否清晰易懂、知識點涵蓋是否得當、卷面結構是否合理等一系列語言文字組織的問題的分析；定量評價是指對試卷或試題進行難度、區分度、信度、效度與標準差等定量指標的結算與分析[2]。青海師范大學采取一種利用MATLAB數理統計方法為基礎算法的試卷質量分析方法，MATLAB強大的數學運算處理功能，可以大大降低教學管理人員在原先只是簡單利用工作軟件進行手工計算的工作強度，提高了工作效率和準確性，提高命題質量，為實現教學管理的科學化與規范化提供了一種方便的途徑[3]。廣東工業大學利用考試質量分折專用軟件Examanls，能夠迅速、準確地對每一道試題以及整份試卷的總體質量作出科學的比較和評價[4]。東莞理工學院基于知識點的試卷質量分析使評測粒度更加細膩，評價依據更加準確有效，能夠真正反映出試卷的實際難度。最后根據評測標準的自身特點，利用OLAP技術對其加以實現，通過實踐證明評測標準的有效性[5]。

二、試卷質量量化評價在我校教務管理系統的實現

我校自2014年起引進強智教務管理系統，為了更適應我校的管理模式，有效地提高各崗位工作效率，強智公司派駐技術員為我們進行量身定制開發。試卷質量管理及評價分析模塊的研制開發工作，需要崗位工作人員與技術開發人員進行有效溝通，定制合理方案。

1.試卷質量量化指標的算法設計

試卷質量評價通常是利用教育測量學原理和多種統計分析方法，對成績分布、比較與試卷質量進行分析的結果。通過考核成績進行試卷質量評價時，首先可采用檢驗法去驗證待測試卷樣本量是否滿足正態分布，如果隨機樣本數據不能嚴格符合正態分布要求，要適當擴大觀測樣本單位數，使其盡量符合正態分布，在此基礎上再對試卷質量進行量化分析。試卷質量量化評價最重要的是要確定試題難度、區分度、試卷信度和效度四項量化指標的算法和要求。

難度是指試題的難易程度，是評價考試的一個非常重要的指標。教師在命制試卷時，務必使整卷試題具有適當的難易度，題目應由易到難，逐步增加，不應太過偏頗，題目太難或太容易，均不利于鑒別出學生的實際水平。一般最常用的難度指標是得分率P,根據試題的客觀性和主觀性不同，難度指標分別為Pi=ni/N和Pi=Pi=xi/Xmax。客觀性試題得分率Pi跟第i道題目通過人數有關，n是該題選擇了正確答案的考生數，N是考生總人數；主觀性試題得分率Pi跟第i道題目得分平均分有關，xi是第i道題目主觀性試題的得分平均分，Xmax是第i道題目的滿分得分。難度指標的數值與試題的實標困難程度相反，P值越小，題目越難。P＜0.3為難題；P＞0.8為易題；0.3≤P≤0.8為適中題.

區分度是試題對考生心理特征的區分能力，可以反映學生掌握知識水平高低和能力差異，是篩選試題及評價試題質量的重要指標。區分度高的試卷能將不同水平的考生區分開來，好、中、差三個層次的學生，試卷得分會處在相應的分數段中，學習好的學生得到高分，學習差的學生得到低分；試卷的編制應該要求區分度明顯，即應該真實切合學生的真實學習水平，不同層次學生的考試成績應該處于不同分數段中。區分度的算法一般主觀性試題采用極端分組法，客觀性試題采用相關法。

信度是指使用同一試卷對考生重復測驗時，或兩個平行試卷對考生測驗時，所得測驗分數的一致性和穩定性程度。信度除了要說明成績的真實性之外，還要說明題目涉及的內容與教學的相關程度。就試卷總體而言，信度高的試題較少受到偶然因素的影響，對任何學生的多次測定，都會產生比較穩定一致的結果。Examanls通過計算內部一致性信度系數間接地估計信度的太小：對客觀性試題采用的是目前被認為是最準確的庫一理法(Kuder—Richar-sonmethod)的第2O號公式，而對主觀性試題采用的則是克龍巴(cr0nbach)的α系數[4]。

效度是指考試有效性或正確性的質量指標，體現考試成績是否可以準確反映考生掌握知識程度。效度表示題目的得分與試卷總分之間的內在一致性，可以鑒別被試者水平高低，若測試的結果與學生平時學習成績基本一致，則說明這次考試有較高的效度。試題效度的計算是用該試題得分與總分之間的相關系數表示。

2.試卷質量評價系統的設計

在進行試卷質量系統設計時，要求可以對試卷質量分析相關指標、項目進行加權設定，根據不同試卷要求有效調整信度、效度、區分度、難度在質量分析中的權重比值，通過實際測量值驗證評價指標的合理性和科學性。

3.影響試卷質量評價的其他因素

對試卷質量量化指標的分析，實際上是在考試結束后對試卷質量的一種延后性反映，通過試卷成績高低來判斷試卷質量的優劣，就整體提高試卷質量而言，這只是一個方面。根據我校實際情況分析，教師重視考試卻輕視試卷分析,試卷分析流于形式，甚至同一科目試卷每次分析結果大致相同，卻未真正意義上從試卷分析結果中發現問題，改進試題，提高命題水平。因此，考前做好試卷質量的檢驗，通過反饋信息，及時發現教和學雙方面的薄弱環節和不足之處，有效地改進教學方式，提高教學水平，使教學相長，真正意義上起到檢驗提高教學質量才是試卷質量分析的目的所在。

三、結語

目前我校教師命題一般都是根據教學大綱和教材內容，以考查學生基本知識和基本理論為主，會出現延用往年試卷，對語言文字等稍作改變，同一理論不同名詞單純反復考試基本概念，作為教師本身沒有深入挖掘知識內涵，沒有從開發學生綜合分析和思維能力的角度去設計題目，知識點較為零散單一，試卷題目整體感覺較為隨意和敷衍。為了正確評價試題質量，教師應破除單純強調知識考核的片面質量觀，樹立對學生的發展進行全面考核的觀念；正確掌握考核依據和范圍，以相應的課程大綱為依據，以教材為基本范圍，理論聯系實際；課程教學內容覆蓋要廣的前提下突出重點，命題形式多樣化，主觀題、客觀題比例要適當；試卷題目盡量減少機械記憶和簡單模仿，適量增加分析、綜合、歸納型的題目，以提高學生分析和解決問題的能力，適當引入該門課程目前學科發展的前瞻性內容，理論與實際相結合，以實現課程大綱規定的目標。總之，在對試卷質量量化分析的基礎上，要切實重視分析結果，有分析、有解決、有貫徹、有提高。