基于數(shù)據(jù)驅(qū)動的課程教育評價指標體系構(gòu)建與應用

周建芳 張楚俊 周振

摘? 要：信息技術與教學過程緊密結(jié)合產(chǎn)生的大量的伴隨性教學數(shù)據(jù)為新時代教育評價改革提供數(shù)據(jù)支撐。基于教學平臺產(chǎn)生的教學數(shù)據(jù)，構(gòu)建課程評價指標體系，采用過程性評價和結(jié)果性評價相結(jié)合的方式，從學習態(tài)度和學習效果兩個維度對學生的學習情況進行綜合性評價。評價結(jié)果更加科學、立體、客觀，能促進學生具有能動性地進行自主學習，協(xié)同學習，反思學習，減少學生學習過程中的投機行為。

關鍵詞：教育評價；數(shù)據(jù)驅(qū)動；過程性評價；增值評價；結(jié)果評價

中圖分類號：G640? ? ? 文獻標志碼：A? ? ? ? ? 文章編號：2096-000X（2023）35-0080-05

Abstract： The combination of information technology and teaching process produces a large amount of accompanying teaching data， which provides data support for the educational evaluation reform in the new era. Based on the teaching data generated by teaching platform， this paper constructs the curriculum evaluation index system， and adopts the method of combining the process evaluation with the result evaluation， from the two dimensions of learning attitude and learning effect and makes a comprehensive evaluation on students' learning. The result of evaluation is more scientific， three-dimensional and objective， which can promote students' self-learning， cooperative learning， reflective learning and reduce their speculative behavior.

Keywords： education evaluation; data-driven; process evaluation; value-added evaluation; result evaluation

教育評價是指在一定教育價值觀的指導下，依據(jù)確立的教育目標，通過使用一定的技術和方法，對所實施的各種教育活動、教育過程和教育結(jié)果進行科學判定的過程[1]。教育評價作為我國深化教育體制改革，推進教育現(xiàn)代化的重要環(huán)節(jié)，在教育發(fā)展中起著重要的導向作用。

我國的教育評價發(fā)展大致可分為三個階段：古代的科舉制度考試、近現(xiàn)代的科學測試和當代的科學評價。我國的教育評價取得了長足的進步，形成了豐富的教育評價研究成果，但同時也表現(xiàn)出與新時代教育事業(yè)內(nèi)涵式發(fā)展和高質(zhì)量建設不相適應的問題[2]。教育評價改革勢在必行。

隨著教育信息化的持續(xù)推進，教學過程中產(chǎn)生的大量數(shù)據(jù)為教育評價改革提供了重要的技術支持和實踐方向。《國家教育事業(yè)發(fā)展“十三五”規(guī)劃》中明確指出：“鼓勵學校利用大數(shù)據(jù)技術開展對教學活動和學生行為數(shù)據(jù)的收集、分析和反饋，為推動個性化學習和針對性教學提供支持”[3]。2020年中共中央、國務院印發(fā)了指導教育評價改革的綱領性文件《深化新時代教育評價改革總體方案》（以下簡稱《總體方案》），指出新時代教育評價改革的主要原則是“堅持科學有效，改進結(jié)果評價，強化過程評價，探索增值評價，健全綜合評價，充分利用信息技術，提高教育評價的科學性、專業(yè)性、客觀性”[4]。《總體方案》為新時代教育評價改革指明了方向。

一? 課堂教育評價的現(xiàn)狀

傳統(tǒng)的課程教育評價以結(jié)果評價為主，過程評價為輔。結(jié)果評價往往通過期末考試的成績作為學生學習效果的評價，過程評價則是以平時上課考勤和課后作業(yè)作為過程性評價的依據(jù)。在這種傳統(tǒng)的教育評價模式下，由于信息技術與教學過程融合不夠緊密，用于過程性評價的數(shù)據(jù)如課后作業(yè)、考勤、期末考試成績等數(shù)據(jù)依靠手工采集，數(shù)據(jù)量比較少，很難真實客觀地刻畫學生的完整學習過程和學習效果。過程數(shù)據(jù)處理慢，缺乏高效的統(tǒng)計和分析手段，教師很難從這些數(shù)據(jù)中及時準確了解學生對課程內(nèi)容的掌握情況，更不要說根據(jù)這些數(shù)據(jù)及時調(diào)整教學進度，進行精準的教學干預。這必然造成課堂教學效果欠佳。

不僅如此，傳統(tǒng)的教學評價采用的都是一些顯性數(shù)據(jù)，部分學生為了通過課程考核，會針對考核指標采取某些投機行為，如考勤時他人代考勤，課后作業(yè)抄襲，期末考試更是“臨陣磨槍”，只求低空飛過，甚至有部分同學在期末考試環(huán)節(jié)鋌而走險，采用作弊的方法達到通過課程考核的目的。極端情況下會出現(xiàn)踏實認真學習的同學，比投機取巧、不認真學習的同學獲得的評價更低。這不僅使得教育評價結(jié)果失去了公平性和客觀性，更是與新時代教育“立德樹人”的根本任務背道而馳。

隨著教育信息化的持續(xù)推進，大數(shù)據(jù)、人工智能、物聯(lián)網(wǎng)等技術與教育教學活動緊密融合，產(chǎn)生了大量伴隨性的學習過程數(shù)據(jù)。通過分析學生的學習行為數(shù)據(jù)，了解學生的學習特點和學習態(tài)度，通過分析學生的學習過程數(shù)據(jù)，了解學生對課堂教學內(nèi)容的掌握情況，并根據(jù)分析結(jié)果進行教學策略的調(diào)整，并對不同類型的學生進行個性化干預，以期提高課堂教學效果，提高學生學習效率。在課堂教育評價中，充分利用教育大數(shù)據(jù)，精選評價指標，強化過程評價，改進結(jié)果評價，探索增值評價，最終實現(xiàn)綜合評價。

二? 基于數(shù)據(jù)驅(qū)動的課堂教育評價的應用實踐

本文以教育技術學專業(yè)21級數(shù)據(jù)庫原理與應用課程一學期基于學習通的混合式教學過程中獲取的伴隨性教學數(shù)據(jù)為例，探討了該門課程教學評價改革的實踐路徑和價值。

（一）? 混合式教學過程與數(shù)據(jù)基本情況

學習通是超星集團推出面向智能手機、平板電腦的移動學習專業(yè)平臺。其為課堂教學提供了大量教學活動功能。教師在教室進行線下教學，在課堂教學過程根據(jù)需要發(fā)布教學活動，學生通過手機完成教學活動，系統(tǒng)采集到學生的學習過程數(shù)據(jù)。根據(jù)學習數(shù)據(jù)的統(tǒng)計結(jié)果教師可以了解學情、及時進行教學策略調(diào)整，對特定學生群體或個人進行個性化教學干預。線上線下有機結(jié)合，為混合式教學提供了很好的支持。

混合式教學過程中的數(shù)據(jù)情況主要分兩大類：一類是供學生學習、復習、練習的教學資源，如課件、相關閱讀文獻、試題庫等，一類是教學活動產(chǎn)生的學習數(shù)據(jù)。本課程主要的教學活動如下。

1? 簽到

學生在手機上完成簽到任務非常簡單，在線下教學過程中為了防止學生曠課和代簽到情況，學習通提供了多種簽到方式。教師可以在課前隨機選擇不同簽到方式來采集學生的考勤信息。為了避免簽到過程過于繁瑣冗長，本課堂中主要采用位置簽到方式進行簽到。教師通過學習通的線上簽到信息以及線下學生到課堂的情況判斷學生真實簽到情況，對個別線上線下簽到不一致的情況采用學習通手工標注的方式修改簽到信息。

2? 問卷

相比較課堂上教師口頭詢問學生這種交互方式，問卷能更好地收集全體學生的數(shù)據(jù)并實時統(tǒng)計，教師可以根據(jù)學生回答問卷的情況及時了解學生情況并及時做出反饋。在教學過程中，以下幾種場景都可以通過問卷收集學生的反饋數(shù)據(jù)。

1）在第一次課前發(fā)布摸底問卷可以了解學生對課程的初步認識，先修課程學習情況，對課程上課頻次、教師教學方式的偏好以及對課程的預期。

2）每3～5周發(fā)布問卷，詢問學生最近一段時間學習效果，對教師教學方面的意見和建議，學習中的困難等。周期性獲得學生對自己最近一段時間學習情況的反饋。

3）在某些講解關鍵知識點的課堂，課后發(fā)布問卷了解學生對關鍵知識點掌握情況的自評，課前發(fā)布問卷進行課前回顧，對問卷中列出的知識點進行自評。

4）在某些關鍵知識點作業(yè)完成提交，教師進行批改后，發(fā)布問卷，對某一次作業(yè)的完成情況進行反思，看自己本次作業(yè)的不足之處在哪里，以強化對知識的掌握。

3? 隨堂練習

隨堂練習是檢驗學生對單個知識點掌握情況最好的方式。在課堂教學過程中，教師講完一個知識點，布置與該知識點有關的隨堂練習，要求學生在限定的時間內(nèi)（5～10分鐘）完成。根據(jù)學生完成隨堂練習的時間和正確率可以快速了解學生對知識點的掌握情況。

4? 課后作業(yè)

和隨堂練習相比，課后作業(yè)考察的知識點較多，難度稍大，完成時間較長（3～5天）。課后作業(yè)允許學生通過復習、查閱資料、與同學討論后完成。課后作業(yè)的評價不僅與作業(yè)的正確率有關，還與學生的學習態(tài)度有關。部分同學可能會敷衍了事，在并未真正掌握知識點的情況下采用直接網(wǎng)上搜答案、借鑒其他同學答案等方式完成，需要教師結(jié)合其他相關數(shù)據(jù)仔細辨別。

5? 期末考試

學習通支持按章節(jié)和知識點智能組卷、機器監(jiān)考等功能，并生成豐富的考試過程數(shù)據(jù)，教師可以根據(jù)考試數(shù)據(jù)分析試卷的整體難度、題量是否飽和、覆蓋面是否足夠等，為改進結(jié)果評價提供了強力的支持。

經(jīng)過一學期18周72學時的教學總計收集到的學生學習數(shù)據(jù)見表1。

（二）? 強化過程評價

過程性評價的目的在于幫助教師提升教學效果，促進學生的學習[5]。過程性評價需要收集學生學習過程中的多樣化數(shù)據(jù)。對于表1中列出的數(shù)據(jù)，其中簽到、問卷、隨堂練習、課后作業(yè)數(shù)據(jù)都是學生的過程性學習數(shù)據(jù)，通過對這些數(shù)據(jù)進行分析和處理，不僅可以了解學生的學習效果，還可以了解學生的學習態(tài)度。選取合適的數(shù)據(jù)指標并設置合適的權(quán)重，能夠真實客觀地反映出學生的學習過程。

用于評價學生學習態(tài)度的數(shù)據(jù)主要來自學生正常簽到次數(shù)（線上簽到地點與線下上課地點一致），參與問卷次數(shù)，參與隨堂練習次數(shù)、在規(guī)定時間內(nèi)完成課后作業(yè)次數(shù)來體現(xiàn)。除了以上教學活動的參與次數(shù)可以評價學生的學習態(tài)度，課后作業(yè)的完成情況中有兩種不良行為會影響學生的態(tài)度和效果評價。

1）作業(yè)中的主觀題（計算題和簡答題）需要學生在草稿紙上完成作答后拍照上傳解題過程和結(jié)果，經(jīng)學習通作業(yè)的“雷同檢測”為雷同作業(yè)，則幾份雷同作業(yè)中除最早提交的作業(yè)為正常作業(yè)，其余的雷同作業(yè)均視同抄襲。

2）作業(yè)中的客觀題（選擇題）可以通過一次作業(yè)的領取時間和提交時間之間的時間差來判斷，如果這個時間差極小（例如小于1分鐘），不足以讓學生能夠閱讀完作業(yè)中的題目并做出正確解答，據(jù)此判定這份作業(yè)是照抄答案而不是學生通過復習消化知識點后獨立作答。

以上這兩種情況在進行態(tài)度評價量化時要賦負分，降低評價，在學習效果上這份作業(yè)的得分也要視同無效，用于評價學生學習效果的數(shù)據(jù)主要來自學生隨堂練習的正確率和課后作業(yè)的正確率。隨堂練習是老師在課堂上完成一個知識點的講解后，在課堂上要求指定時間內(nèi)要求完成的任務，針對某一個具體的知識點，難度相對較低，主要考查學生對知識點的基本理解和掌握情況。便于老師根據(jù)隨堂練習的結(jié)果從全局角度了解學生的學習情況，以便及時進行策略調(diào)整和個性化干預。對于全班都掌握較好的知識點，在下一輪教學過程中對該知識點的內(nèi)容進行翻轉(zhuǎn)，以學生自主學習為主，課堂講授為輔；對于全班都掌握不好的知識點，及時調(diào)整教學進度和策略，采取課堂討論、增加習題課強化鞏固等補救措施，最終幫助學生掌握知識點；對于部分同學掌握較好、部分同學掌握不好的知識點，通過在課后作業(yè)布置該知識點相關的難度不等的多道題目，促使部分同學通過復習課堂內(nèi)容、查閱資料、與其他同學討論等方式掌握該知識點內(nèi)容。

（三）? 改進結(jié)果評價

傳統(tǒng)的結(jié)果評價主要是通過期末考試的分數(shù)來進行的。僅僅通過分數(shù)來對學生一門課程的結(jié)果評價不夠公正客觀，而且可能助長學生在考試中的投機作弊行為。本文的教育評價方案中結(jié)果評價以學習通的考試數(shù)據(jù)為依據(jù)進行。與傳統(tǒng)結(jié)果評價相比在以下三個環(huán)節(jié)有所改進。

1? 組卷環(huán)節(jié)

試卷組卷有人工組卷和智能組卷兩種方式。人工組卷需要教師從題庫中手工挑選題目，指定題目分值。采用這種方式組卷，試卷的科學性（覆蓋率、難度、題量飽和度）完全取決于教師的經(jīng)驗和對學生的了解程度。智能組卷可以按照章節(jié)（同一章節(jié)的題目放在同一文件夾）、知識點、難度和教學目標從題庫中隨機組卷，前提是試題庫中的每一道題目都標注了相應的信息，如試題所在章節(jié)、知識點、難度和教學目標等。采用智能組卷方式，試卷的科學性可以通過組卷策略中的參數(shù)得以保證。

2? 監(jiān)考環(huán)節(jié)

在考試過程中，不僅線下有教師現(xiàn)場監(jiān)考，學習通系統(tǒng)還通過隨機抓拍的方式進行電子監(jiān)考，對于學生考試過程中的答題行為進行記錄，全程詳細記錄學生從開始考試到交卷整個過程中在什么時間、答哪道題、答案、所用時長、是否切屏及切屏時長等。在線上考試過程中，切屏信息可以輔助教師判斷學生是否由于不會答題而切出考試環(huán)境去搜答案。對于時間較短的切屏可能是學生考試過程中收到短信、電話或者通知造成的切屏，而對于時間較長的切屏則可能是學生在網(wǎng)絡上搜答案。對于學生的每次切屏學習通考試系統(tǒng)可以向監(jiān)考教師發(fā)送預警信息，輔助監(jiān)考老師重點關注切屏的同學，并根據(jù)具體情況進行干預。

3? 試卷分析環(huán)節(jié)

考試結(jié)束之后，教師進行試卷批閱，分析整套試卷每一道題的得分情況，以及每個知識點的得分情況，判斷整套卷子的難度以及學生對知識點的了解情況。根據(jù)學生的答題記錄，統(tǒng)計每道題的答題時長，整套卷子的答題時長，判斷整套卷子的題量是否飽滿。統(tǒng)計分析的結(jié)果可以作為下一輪教學改進的依據(jù)。

（四）? 探索增值評價

增值評價是對單個學生的學習情況進行縱向評價。教師在開課前需要充分了解單個學生的起點情況（可以粗略采用開課前的摸底調(diào)查問卷了解學生的情況），在教學過程中通過階段性的過程評價數(shù)據(jù)發(fā)現(xiàn)學生存在的問題，并進行個性化干預。并觀察干預一段時間之后學生是否有進步。增值評價和過程評價一樣，也需要從學習態(tài)度和學習效果兩個方面來進行評價。教學干預需要教師和輔導員共同協(xié)作，對學生表現(xiàn)出來的問題進行交心談話，了解學生的具體情況，制定適合學生的干預方案。經(jīng)過干預之后有進步的學生要適當鼓勵，經(jīng)干預之后沒有進步的同學可能是干預方案不合適，需要調(diào)整干預方案。在探索增值評價的過程中，可能更多的是基于過程評價的結(jié)果，進行線下的教學干預。

（五）? 實現(xiàn)綜合評價

綜上所述，通過學習通平臺能夠采集到大量伴隨性的學習過程數(shù)據(jù)，根據(jù)這些數(shù)據(jù)進行綜合評價，比傳統(tǒng)的教學評價更加科學、專業(yè)和客觀。

綜合評價從兩個維度進行評價：學習態(tài)度和學習效果。每個維度的指標選取前面已經(jīng)討論過，結(jié)合專業(yè)的培養(yǎng)目標和教學大綱的要求，為每個指標設置權(quán)重見表2。

需要說明的是，一級指標“不良行為”屬于懲罰性扣分項，只有具備這些不良性行為的才需要扣分，最多扣15%。無不良行為的同學不扣分。

根據(jù)以上評價指標和一學期采集到的教學數(shù)據(jù)（每一項數(shù)據(jù)在教學執(zhí)行過程中都進行了真實性驗證），得到的綜合評價見表3。

三? 結(jié)論

（一）? 評價結(jié)果更加科學、立體、客觀

基于學習通平臺采集的大量伴隨性教學數(shù)據(jù)，進行分析統(tǒng)計，發(fā)現(xiàn)教學數(shù)據(jù)背后的規(guī)律和價值，不僅評價學生的學業(yè)成績，而且評價學生的學習態(tài)度。并且根據(jù)階段性過程評價結(jié)果進行精準的個性化教學干預，更有利于學生的發(fā)展，評價結(jié)果更加科學、立體、客觀。

（二）? 實現(xiàn)立德樹人根本目標

在教學評價的各個環(huán)節(jié)都有相關的措施來保證用于評價的數(shù)據(jù)的真實性和客觀性。在考勤環(huán)節(jié)核對線上考勤數(shù)據(jù)和線下實際考勤情況并對特殊情況進行手工調(diào)整；在限時隨堂練習環(huán)節(jié)根據(jù)學生完成隨堂練習的流暢度（速度和正確率）了解學生對考察知識點的掌握程度，在課后作業(yè)階段發(fā)現(xiàn)學生的不良行為（雷同和抄襲）進行實時標記并線下預警和干預，在考試階段根據(jù)學生的答題記錄和切屏情況了解學生的考試行為并對不良行為及時干預。以上措施一方面引導學生樹立正確的價值觀和榮辱觀，以端正積極的態(tài)度認真完成教學過程中的各個環(huán)節(jié)，完成新時代立德樹人的根本任務，另一方面能夠極大地促進學生自主學習、協(xié)同學習、反思學習的主觀能動性，減少學生在學習和考試過程中的各種投機行為。

參考文獻：

[1] 劉志軍.教育評價[M].北京：北京師范大學出版社，2018.

[2] 葉賦桂.教育評價的浮華與貧困[J].清華大學教育研究，2019（7）：18-21.

[3] 國務院.關于印發(fā)國家教育事業(yè)發(fā)展“十三五”規(guī)劃的通知[EB/OL].https：//www.gov.cn/zhengce/zhengceku/2017-01/19/content_5 161341.htm.

[4] 周洪宇．深化教育評價改革，加快推進教育現(xiàn)代化——《深化新時代教育評價改革總體方案》解讀[J]．中國考試，2020（11）：1－8.

[5] 韓磊，許發(fā)磊，黃陳蓉.新時代教育評價的技術思考與改革實踐[J].現(xiàn)代教育科學，2022（3）：7-12，20.