摘 "要 "高校成人教育學士學位英語機考是運用信息技術優化命題、組考、成績分析與反饋的過程,是提高考試實施效率、充分利用考試數據優化評價質量的基礎。在分析現狀及存在問題的基礎上,提出高校成人教育學士學位英語機考策略,通過強化教學質量監控和評價結果反饋,促進教學工作水平和考試管理水平不斷提升。
關鍵詞 "高校成人教育;學士學位;學位英語考試;試題
庫系統;機考
中圖分類號:H310.421 " "文獻標識碼:B
文章編號:1671-489X(2022)13-0025-04
0 "引言
2020年10月,中共中央、國務院印發《深化新時代教育評價改革總體方案》,明確提出“充分利用信息技術,提高教育評價的科學性、專業性、客觀性。堅持統籌兼顧,針對不同主體和不同學段、不同類型教育特點,分類設計、穩步推進,增強改革的系統性、整體性、協同性”[1]。高校成人教育學士學位英語統一考試(以下簡稱“學位英語考試”)是由省級高等教育主管部門主管,省級考試機構組織的統一考試,其目的是客觀地評價本地區非英語專業成人本科畢業生申請學士學位者的英語語言知識和運用能力,考查其是否達到普通本科教育(非英語專業)英語教學的一般要求,是各省市成人高等教育本科畢業生獲得成人學士學位的必備條件之一[2]。充分利用信息技術,為學位英語考試提質增效,是加快高校成人教育信息化建設的抓手,也是推進新時代高等學歷繼續教育發展的重要課題。
1 "學位英語考試的特點
學位英語考試是典型的結果評價,從考試所處
地位來看,是對高校成人教育英語學科教學質量的評價,是教學過程中不可或缺的環節;從考試考核內容上看,主要考核學生運用語言的能力,重點考核閱讀能力以及對語法結構和詞語用法的熟練程度,范圍參照全日制文理科本科英語教學大綱所規定的一至三級除說的技能以外的內容;從考試試卷題型設置上看,除英漢互譯題是主觀性試題外,其余試題均為客觀選擇題。
2 "學位英語考試現狀和存在的問題
2.1 "考試現狀
自1991年以來,在30多年的學位英語考試組織管理實踐中,命題工作一直采用命題組集中入闈的方式;考試采用考生紙筆作答形式;評卷采用機器加人工的方式,主觀題由人工評閱,客觀題由機器評閱;評卷結果以成績總分的形式向考生和考生所在院校進行反饋。隨著信息技術與教育深度融合,在高校成人高等教育教學實踐中,線上線下混合式教學模式已成為主流[3]。學位英語考試采用的傳統模式已經明顯落后于新的教學方式,而且在一定程度上制約了高校成人高等教育英語教學的發展。
2.2 "存在的問題
2.2.1 "考試成本持續增大 "學位英語考試是高利害關系評估測試,具有考生規模大、考點分散在各高校內、工作環節多、涉及人員多等特點。隨著外部考試環境的變化,考試安全保密工作面臨的風險和挑戰越來越嚴峻。此外,出于新冠疫情防控需要,為了保障考生身體健康和生命安全,組考工作內容、工作強度也相應增大,特別是在試卷準備、考場準備、考試實施等環節,致使人力、物力成本持續增加。
2.2.2 "評價反饋信息單一 "評卷結束后向考生反饋的只有總分信息,缺少對于考生掌握知識點情況的分析反饋,不利于考生了解考試反映出的學習薄弱之處。而且,僅從總分上也不能全面反映考生階段性的學習成果,特別是對于多次參加但未通過考試的學生而言,學習過程中取得的進步得不到有效體現,對于激發學生學習主動性,培養學習習慣、語言興趣等可能會產生負面影響。
2.2.3 "對教學的反撥作用發揮不足 "學位英語考試屬于區域性統一考試,考試成績可以反映各高校學生整體學習水平,也可以反映高校課程實施效果與課程目標存在的偏差,還可以作為衡量教師教學水平和治學態度的參考。目前,高校對于考試的認識還主要停留在學位授予條件方面,對于利用考試數據信息重視不夠,對于挖掘隱含的教學內容、教學水平、學風建設等問題探索不足,尚未形成有效的信息分析與反饋機制,高校層面、系部層面、任課教師不能及時通過考試了解教學目標達成情況和存在問題,考試對于教學的反撥作用發揮不足。
3 "學位英語機考策略
針對目前學位英語考試中存在的不足,要對學位英語機考建設進行整體設計,共同推進考試命題、考試實施、成績分析反饋的信息化建設。一方面,在命題工作環節的題庫系統建設中要充分考慮評價反饋的多樣化需求;另一方面,在考試實施環節的測試系統構建中要綜合考慮省級考試機構、院校和考生不同的使用需求。通過學位英語機考建設,推進成人高等教育英語學科評價改革。
3.1 "構建支持多目標評價的試題庫系統
通過對高校成人教育英語教學評價的調研與分析,依據評價目標、命題主體、測試時間特點可分為過程性評價和結果性評價。過程性評價命題主體是高校,旨在反映學生學習中的情況,具有題型和題量多樣化、考試時長不同、評價次數多的特點,如單元測試、模塊測試等。結果性評價命題主體是省級考試機構或高校,旨在檢驗學生學習達標情況,具有題型、題量、考試時長相對固定,評價次數少的特點,如學位英語考試、課程結束考試等。兼顧兩種類型評價的題庫建設需求,構建支持多目標評價的試題庫系統,是改進結果評價,強化過程評價,加強命題教師隊伍建設,整體提高評價水平,推進學位英語機考的首要工作。
3.1.1 "總體設計 "多目標評價的試題庫系統兼顧過程性評價和結果性評價需求,設置基礎庫和擴展庫。基礎庫供學位英語考試使用,擴展庫供高校組織考試使用,基礎庫由省級考試機構建設、管理,擴展庫由高校建設、由省級考試機構和高校共同管理。多目標評價的試題庫系統采用題庫管理、征題、組卷、審校等功能一體化設計,是一個動態管理系統,包括管理模塊、征題模塊、審校模塊、組卷模塊等。
1)管理模塊。管理模塊用于配置用戶賬號、角色、權限及功能,維護試題庫結構,設定命題和審題任務,管理試題和試卷使用等。管理模塊由系統管理人員使用。
2)征題模塊。征集試題是題庫建設的基礎和中心環節。征題模塊主要用于收集和維護基礎庫和擴展庫的試題。征題模塊功能包括試題導入、試題參數標定完整性核查、查重及完成情況統計等。基礎試題庫征題模塊由省級考試機構選聘的命題組教師使用,擴展試題庫征題模塊由各校負責教學工作的教師使用。
3)審校模塊。審校模塊主要用于多人、多輪、多角度審查、研磨試題試卷[4]。審校模塊功能包括
試題校核、試卷審查、考核內容分布統計、重復考核統計等,實現自審、互審工作環節的協同和管理。
基礎試題庫審校模塊由命題管理人員和命題組使用,擴展試題庫審校模塊由各高校負責教學工作的命題教師使用。
4)組卷模塊。組卷模塊主要用于抽取試題并生成試卷。組卷模塊功能包括抽題管理、組卷管理、試卷查詢統計、庫存試題管理等。基礎試題庫組卷模塊由省級考試機構命題管理人員使用,擴展試題庫組卷模塊由高校教學管理人員使用。
3.1.2 "系統建設策略
1)加強頂層設計,統一并優化試題參數。試題庫建設需要按照考試目標,分類加強頂層設計,并統一優化參數設置。一方面要根據考試的性質和特點、考試內容和考核要求,制定命題細目表,通過預先設計試卷藍圖,確定搭建題庫框架,并明確內容結構、難度結構、能力結構、題型結構和分值權重等;另一方面要對試題基本參數和使用參數設定進行統一,并細化試題參數標定規則,提高試題參數標定質量。
試題基本參數設置旨在體現題目特征,包括知識維度參數(知識單元、章節、關鍵詞、試題類型、分值、難度、區分度等)、能力維度參數(識記、理解、應用等)、其他參數(命題人、審校人、命題時間、審校時間等)等。使用參數設置旨在通過積累試題反復使用中的實測值,為修正提高試題參數標定準確性提供參考,具體包括使用次數、最后使用時間、實測難度、實測區分度等。
2)做好征題工作,促進命題資源整合。試題庫建設除了要保證質量外,還要保證一定建庫規模。一方面要依據考試不同的目標要求和題庫使用情況,明確征題需求,合理安排征題任務,為試題庫快速、高質量地擴充容量奠定基礎;另一方面要充分發揮擴展庫對于基礎庫擴充的支撐作用,制訂擴展庫補充基礎庫的征題計劃,整合命題資源,為系統推進學科評價改革的整體性和協同性提供有利條件。同時,要加強補充試題質量控制,定期組織命題組教師對補充試題的內容及參數標定進行審核,確保優中選優、標準一致。
3)增強信息安全防護能力。題庫建設雖然可以降低大規模考試的安全風險,增強應對突發事件的能力,但是也存在涉密人員多、保密環節復雜等安全問題。因此,在題庫建設的征題、審校、組卷等環節都應該認真做好安全保密工作。題庫建設工作中要制定相應的保密制度并嚴格遵守。題庫相關工作人員的操作權限設置應本著最小化原則進行,并配備獨立的局域網和服務器,內部數據的傳輸、存儲要采取加密技術。
3.2 "構建通用型測試系統
構建通用型英語測試系統能夠改善多數基于計算機的英語測試系統[5]在測試形式和試題類型支持方面的局限性,既可以滿足結果性評價需求,也能夠滿足過程性評價需求,是高校成人教育教學與考試管理信息化的重要組成部分。
3.2.1 "總體設計 "測試系統采用與試題庫分離的設計,利用試題庫生成試卷,通過下載方式導入測試系統。測試系統按照用戶、角色不同,為用戶提供不同的權限和功能,承擔多個角色的同一用戶可以具有多個權限。測試系統包括系統管理端、考務管理端、監考端、測試端、評卷端等。
1)系統管理端。系統管理人員通過管理端進行系統管理與維護,系統管理端功能主要包括系統的基本信息(如高校、考場及考位等信息)管理與維護、系統用戶功能和權限管理、系統數據備份與維護等。
2)考務管理端。考務管理人員通過考務管理端
進行考試管理和成績管理,考務管理端功能主要包括考試計劃管理、報考管理、考場編排管理、監考管理、考場狀態查詢(如在考人數、提交人數、缺考人數等)、答題數據回收、評卷組織管理、成績統計與分析、考試數據歸檔等。
3)監考端。監考人員通過監考端進行考試實施
管理,監考端功能主要包括測試機管理、入場和測試管理、查詢考生狀態(設備調試、登錄、提交)及異常情況處理等。
4)測試端。考生通過測試端參加測試,測試端功能主要包括身份核驗、試題目錄、閱覽布局調整、記錄標記及時間提醒等。
5)評卷端。評卷教師通過評卷端開展閱卷工作,評卷端功能主要包括身份核驗、任務查詢、主觀題評分管理等。考務管理人員在系統中制定閱卷工作安排之后,評卷教師會收到閱卷任務通知,在指定評卷時間內可登錄系統評卷端參與閱卷工作,對分配的考生答卷主觀題進行評閱。答卷客觀題評分由系統完成,在導入正確答案后,系統自動進行評閱。
3.2.2 "系統建設策略
1)采用B/S模式。首先,測試系統采用B/S模式,客戶端只需借助瀏覽器即可訪問系統,簡化了安裝與配置,節約了管理成本;其次,B/S模式更方便進行升級與維護,能更好地適應系統管理功能升級;最后,由于對客戶端計算機設備要求不高,增加機考考位比較簡便。
2)充分利用現有設備加快系統建設。學位英語考試是常規工作,因此,測試系統建設應盡量擺脫建設周期和經費的限制,盡量利用現有資源進行建設。由于各高校都有信息化建設的基礎,因此,系統建設可以充分利用現有計算機教室和設備,提高現有設備使用率,有效減少建設成本。
3)建立系統使用和管理制度。一方面要依據考試方式、模式變化重新構建組考工作流程,規范系統的使用和管理;另一方面,考慮到考試工作人員的流動性,要建立基于角色和任務的訪問控制機制,合理規劃用戶、角色的訪問、修改權限,并可根據工作人員流動動態分配使用權限。此外,還要建立網絡安全管理制度,強化和運用安全措施和手段,保障考試數據安全。
4)持續完善人員培訓機制。系統建設的最終目的是為考試工作人員提供便利和助力,因此,系統使用人員培訓是系統建設的重要環節。系統操作使用培訓要以人為本,依據人員信息化水平現狀、工作職責進行操作使用培訓和必要的基礎知識培訓并形成機制。同時要根據實際培訓效果,動態調整培訓內容和對象,促使受訓人員能盡快熟悉并適應新的考試工作環境。
此外,還要注重在不斷梳理總結系統使用經驗的基礎上,持續對培訓內容和方式進行完善,特別是要針對考試中可能出現的突發情況組織演練,避免因操作使用不當對考試工作帶來負面影響。
3.3 "運用考試數據為教學質量管理、試題質量控制提供支撐
考試數據是試題試卷設計和評價結果最直觀、最具體的反映,通過比對、分析考生群體/考生作答信息、試題試卷設計參數信息等考試數據,能為院校評估教學質量、調整教學側重點提供依據,也能為考生查漏補缺提供指導,還可以為科學評價命題工作質量提供數據參考。
3.3.1 "以數據促考試指揮棒作用發揮 "在構建支持多目標的試題庫系統和通用型考試系統基礎上,通過考試數據在命題工作、教學工作之間流動和共享,以考試數據為紐帶,形成“考試機構—高校教管部門”和“教師—學生”的雙環路。一方面通過省級考試機構與高校之間的考試數據共享,宏觀上可使高校動態了解本校學生整體以及各年級學生群體在地區高校中的相對英語水平和水平變化情況;另一方面通過“教”與“學”之間的數據流動,微觀上使高校教師動態了解本班級、本年級在本校的英語水平以及學生個體的學業水平及變化情況。通過數據流動和共享,形成推進教學工作質量提升的合力,充分發揮教育評價的指揮棒作用。
3.3.2 "改進結果評價,開展增值評價 "一方面要利用考試數據豐富結果評價內容。評價內容除了提供考試總分外,更應充分展現評價構成的細節,利用當次多維度、多層次的命題設計參數數據與考生個人作答數據進行比對分析,運用多維度得分率為考生目前知識掌握情況進行精準畫像,為考生了解自身知識掌握情況提供便利,提高后續學習針對性,強化評價的診斷和導向作用。另一方面要利用考試數據開展增值評價。從高校或考生群體角度,通過對高校或考生群體(年級、班)進行增值評價,運用分項得分率、排名變化、動態及格率、動態優秀率等指標,更加準確地評價高校或考生群體(年級、班)教學的實際成效,為高校教學管理部門監控教學質量提供依據,促進高校持續優化教學工作;從考生個體角度,通過多維度比較、分析當前成績數據與歷史成績數據差異,運用得分率及排名變化等指標,全面、科學反映學生進步情況,強化考試對持續學習的激勵和促進作用。
3.3.3 "建立評價信息反饋機制 "通過建立反饋機制,形成“教—學—評”閉環,持續改進教學質量。建立健全安全的評價信息反饋途徑,通過數據可視化方法反饋評價數據,結果評價和增值評價信息一是要及時推送給高校,使其全面、系統了解“教”實施的實效,為進一步改進教學管理提供數據支撐;二是要及時推送給考生,使其及時了解
“學”中發現的問題及可能原因;三是要及時推送給命題組,為提升“評”的質量提供參考和依據。通過不斷積累,分析試題、試卷使用實測數據,考生數字畫像將更加貼合高校成人教育學生群體,使得命題工作更加契合教育特點,更加客觀、科學。
4 "結束語
高校成人教育學士學位英語機考通過在考試命題、組織考試、成績分析反饋中引入現代信息技術,為促進考試改革提供助力,為提升考試工作整體水平提供支撐,是順應新時代深化教育評價改革需要、加快教育現代化建設的具體體現,對于促進學位英語考試提質增效,辦好高等學歷繼續教育,嚴把高校成人教育出口關,具有重要意義。
參考文獻
[1] 中共中央 國務院印發《深化新時代教育評價改革總體
方案》[A/OL].(2020-10-13)[2020-10-20].http://
www.gov.cn/zhengce/2020-10/13/content_5551032.htm.
[2] 北京教育考試院.北京地區成人本科學士學位英語統
一考試說明[M].北京:高等教育出版社,2013:1-6.
[3] 張莉玲,馬忠玲.混合式教學在成人高等教育中的實
踐與探索[J].當代繼續教育,2019,37(2):58-63.
[4] 詹曉莊,沈潔,蘇婧,等.自學考試命題審校工作信
息化策略研究[J].高等繼續教育學報,2020,33(6):72-76.
[5] 鄧斯芮,周杰.我國英語無紙化考試研究綜述[J].教
育文化論壇,2019,11(3):106-111.