基于兩極四元定性評價法模型的教學評價系統設計與實現

從傳鋒

（重慶對外經貿學院 信息技術中心，重慶 401520）

0 引 言

新冠疫情催生了線上教學，在后疫情時代，線上與線下相結合的教學也成為常態，這也給教學提出了新的挑戰，即在教學新形態下如何有效地開展教學評價。傳統的教學評教指標包括教師授課水平、目標達成、師德師風等，線上教學的引入為教學評價帶來新的觀察點，如線上討論、數字資源建設、任務發布等，傳統的評價手段與方法已不能滿足新的教學形態。因此，基于信息化技術推進新時期教學評價方法及手段的創新是高校首當其沖的任務。

1 兩極四元定性評價模型

基于學習效果的教學質量評價體系才是有效的教學評價體系。在信息化教學質量評價體系的構建中，首先要確定教學質量評價模型，再根據評價模型來確定評價方式。本系統將以復旦大學張學新教授提出的“兩極四元定性評價法（Learning-effect-targeted Two extremes and Four elements assessment,TeaFea）”為參考模型，評價內容如表1所示。為適配信息化評價手段，筆者對該模型進行了進一步的優化。提出該評價法的學者認為教與學的質量是符合正態分布的，正態分布的突出特點是靠近左右兩個極端的樣例數較少，處于中間區段的樣例數較多。在教學質量評價過程中，把位于兩極超出或低于一般水平的樣例甄別出來，其余樣例則自動歸入一般水平，這是兩極法。而四元是指納入教學評價體系中的教師講授、學生獨學、同伴討論和教師答疑四個核心元素，四個元素構成線上教學場景標準范式。按兩極法對四個教學元素進行評價，可對教學質量做出有效的評價。

表1 TeaFea 評教個人分項評價參考表

2 系統總體框架

該系統以兩極四元定性評價模型為核心，結合教學評價的對象、參與主體以及基本的工作流程，通過基礎數據治理和關聯業務系統的融合，實現教學評價數據的過程化、全量化采集，全面適應并支持新常態下的線上與線下混合教學評價。該系統的主要特點是客觀評價與主觀評價相結合、形成性評價與定性評價相結合，評價的指標參數可自定義，評價的數據源可自定義。基于教學評價組織流程與教學評價實際應用場景，按照功能將系統分為數據層、業務層、表示層、訪問層四個層次和多個系統模塊。系統架構如圖1所示。

圖1 系統架構圖

3 數據流分析

在該系統的運行中，數據采集自與教學過程相關的網絡學習空間、實驗管理系統、教學督導系統等多個平臺，不同的平臺架構不一樣，數據存儲標準不一樣，產生的數據結構也不一樣，因此所采集的數據無法直接應用于評價模型。為此，本系統的解決方案是，全面梳理各業務平臺的數據結構，建立教學數據標準，打通各平臺底層數據接口，對數據進行清洗，形成教學評價標準數據庫，以評價系統為中心，實現跨教學系統的數據對接互通。在此基礎上，以兩極四元定性評價法的指標體系為依據，梳理各指標所對應的教學數據字段，通過優化算法挖掘與強化各項數據的價值關聯度，對兩極四元定性評價法的評價指標進行進一步的優化，構建以兩級四元定性評定法為基礎的算法模型，利用大數據分析與數據呈現技術對數據進行建模與可視化呈現，形成以教師教學質量畫像、課程運行質量畫像為主要應用的信息化教學評價體系。

教學評價數據源由兩類數據構成，一類是來自網絡學習空間、實驗系統的教學過程化數據，該類型數據是定量評價的基礎數據，另一類是來自教學督導系統、教學評價終端的主觀評價數據，該類型數據是定性評價的基礎數據，兩部分數據通過算法模型按照一定的比例構成評價結果。系統數據流如圖2所示。

圖2 系統數據流圖

4 功能設計

系統采用B/S 架構，同時開發H5 版本，依據行業通用開發規范進行開發，可適配不同高校智慧校園業務平臺技術路線，可與存量業務系統進行融合，提高系統的兼容性，例如與已建設的統一身份認證系統、VPN 系統、一站式服務大廳、釘釘、微信服務號融合對接，形成一體化認證生態與統一的訪問窗口。

4.1 評價模型與指標設置

分解并分類兩極四元定性評價法的評價指標。一類指標數據來自于網絡學習空間、實驗系統的過程化數據，一類指標數據來自于教學督導、學生、教師的主觀評價數據，兩部分數據按照一定的比例構成評價結果。以“教師答疑”這一元素的評價為例，第一類數據來自于網絡學習空間教師答疑次數（答疑次數≤2，評價結果為D；3 ≤答疑次數≤5，評價結果為C；5 ＜答疑次數≤10，評價結果為B；10 ＜答疑次數，評價結果為A），第二類數據來自于學生客觀評價中對“教師答疑”的主觀評價（只能給出A、B、C、D 四檔評價結果），最終評價結果以兩個維度評價結果的均值進行核算，核算結果仍以定性為導向，如兩個C 記結果為C，一個C 一個B，記結果為C+，以此類推，對教師最終的評價只有D、D+、C、C+、B、B+、A、A+八個結果。同時，在該模塊中，管理員可以對取自于網絡學習空間與實驗系統的過程化、定量數據（次數或數量）與評價結果（A、B、C、D）關聯比例算法進行參數設置。

4.2 評價模塊

針對學生、教師等不同角色，該系統提供學生評價、同行評價、自我評價等不同評價場景的應用服務，評價者可從手機端或Web 端獲取評價對象清單、評價內容清單。評價結果以定性評價的方式提交，只能選擇A 檔、B 檔、C 檔、D 檔。在該模塊中師生還可以獲取評價說明、評價結果、課程概況、教師概況等信息。

4.3 課程管理

管理員可以批量導入要評價的課程信息，修改、刪除個別要評價的課程信息，鎖定已完成評價的課程信息等操作。課程信息主要包括課程編號、課程名稱、課程類型、開課單位、授課專業、開課地點、開課時間、授課教師等內容。

4.4 用戶管理

該模塊面向個人提供個人基本信息修改、密碼修改、我的消息、我的任務等服務。面向管理員提供用戶批量導入、用戶角色設置、用戶權限設置、用戶刪除、用戶重置、群發消息、任務發起等服務。

4.5 數據應用

該模塊包括教師畫像、課程畫像、數據分析三個部分。在教師畫像中會給出對教師的定性評價結果與可視化畫像雷達圖。同時，按照全校排名給出排名次序的定性結果，即全校排名前10%（優秀）、全校排名前30%（良好）、全校排名前70%（合格）、全校排名后30%（基本合格）、全校排名后10%（不合格）五個檔次的定性評價結果。在課程畫像中，從課程資源量、學生學習態度、低于期望值的學生數、課堂活躍度、課程成績分析等維度對課程質量進行畫像，得出較為客觀與直觀的課程評價結果，反向支撐教師評價。在數據分析中，為管理人員提供教師查詢、課程查詢、報表統計與分析、數據導出、評價進度監控等服務。

教師畫像模型如圖3所示。

圖3 教師畫像示意圖

4.6 系統管理

該模塊涵蓋數據管理、系統設置兩個部分。在數據管理中，管理員通過開放性的API 數據接口，可以完成與第三方數據庫的對接、數據抽取、數據清洗轉化，實現對整個評價數據的規范化、系統化、一體化管理，可滿足不同高校業務系統技術標準與數據庫建設要求。在系統設置中，管理員可以設置學校信息、系統啟動、關閉時間、數據自動備份周期等。

5 實際應用

目前，該系統的基本功能已經完成開發設計，并在部分課程中進行試點，通過對試點過程的觀測，以及對師生使用情況的問卷調查反饋，得出該系統的應用大大簡化了教學評價流程，提高了教學評價效率，可以全面支撐基于數據、面向過程、定性與定量相結合的教學評價工作。

系統運行情況如圖4所示。

圖4 系統運行界面截圖

6 結 論

教學質量評價工作的關鍵是對教學數據的有效應用，在信息化管理模式下，對大數據的全方位應用是新時期教學質量評價的內在要求。在梳理傳統教學評價指標結構特征的基礎上，以兩極四元定性評價法為基本模型，充分利用大數據技術，從多個維度對各個教學環節進行精準觀察與定性評價，解決了當前規模化開展線上與線下混合教學的質量評價難題。本系統的構建從創新融合的角度出發，充分考慮高校中存量的統一身份認證、一站式服務大廳的信息化基礎設施，提出了建設技術路徑，兼容性強，有效降低了教學評價在實施過程中的應用門檻，可操作性較強。