面向學習過程的在線課程綜合評價方法的研究與實踐

摘要：本文針對“互聯網+教育”背景下，在線開放課程的單一性、終結性學習評價弊病，提出面向學習過程的模糊綜合評價方法，介紹面向學習過程的綜合評價整體設計。綜合評價以學習過程為中心，制訂對應的評價方案，建立學習評價標準，設置在線監測指標，采用模糊綜合評價方法實現學習評價。在學習單元的應用實踐中，綜合評價引導學生注重學習過程，提高學習能力，問卷調查的結果也體現了學生進步的幅度和較高的滿意度。

關鍵詞：學習過程;在線課程;模糊綜合評價

中圖分類號：G642 ?文獻標識碼：A ?論文編號：1674-2117（2019）13/14-0178-04

● 引言?

隨著知識經濟的到來，單一的、面對面的教學模式受到了前所未有的沖擊，各種新的教學模式如潮水般涌現，滿足社會不同層次以不同的形式方便快捷地獲取知識的需求。在所有的教學模式中，最具有沖擊力的便是隨著計算機技術、多媒體技術、網絡技術發展而出現的在線學習平臺，大規模在線開放課程——慕課（MOOC）是其中應用廣泛、影響較大的代表。移動互聯網技術的飛速發展使“互聯網+”成為國家戰略發展目標，互聯網在線教學更深入地進行線上教學與線下教學的有機結合，使得技術支持的在線學習發生了結構性的變化，但是，在線學習也面臨著學習動力不足、可持續學習差、課程中斷率高、學習評價方式單一等問題。針對在線課程學習評價的問題，筆者認為可以從學習過程和綜合評價的角度，研究在線課程的模糊綜合評價策略，提高評價的有效性和科學性，改善評價方式，增強評價對教學反饋的影響力。

● 面向學習過程的綜合評價整體設計

相對于終結性評價系統，筆者提出的在線課程學習評價方法面向學習過程，監控并記錄學生的學習過程，通過模糊綜合評價模型給出形成性評價。為了實現這一目標，筆者將系統的整體設計分為以下幾部分：在線監測模塊、課程評價標準、綜合評價模塊、電子學習檔案。系統整體結構如圖1所示。

在線課程模塊包括視頻教學、討論區、互動、作業和測試等內容，圍繞教學目標提供學習資源和教學內容，是在線學習系統的重要部分。學生在學習過程中的學習狀態數據由在線監測模塊收集并處理。對于學習過程，系統從三方面進行監測，具體指標如下頁表1所示。

學習過程中，獲取知識和提高技能是在線學習的目標，學習興趣是保證可持續性學習的條件。上述測試項目能否實現取決于在線學習平臺是否具有相應的功能模塊，因為學習評價部分只是在線學習平臺的一個重要的環節，學習平臺在設計時應綜合考慮，依據評價體系設置各功能模塊，并保證數據能夠被順利收集。對知識的測量，通過在線測試和在線作業進行考核，成績采用百分制或者等級制均可。對技能的測量需要相應的量表，通過在線調查問卷的方式實現。對學習興趣的測量最為簡單，通過記錄登錄用戶ID，記錄次數或者時間。在線課程的教學方式以視頻教學為主，能夠完整聽完該段教學視頻是測量學習興趣的重要方式，因為學習興趣低的學生聽課的時間也會很短。

在線評價模塊主要由監測數據、評價指標和評價方法組成，其中監測數據由在線監測模塊收集并處理，獲得有效數據。評價指標和評價方法是評價系統的核心部分，完善的評價標準和科學、合理的評價方法是評價的有效性的重要保證。

● 在線課程學習綜合評價方案

對在線學習平臺課程的學習效果評價，最簡單的方式是通過在線測試給出終結性評價或成績。該方式忽略了對學習過程的考核，特別是對可以通過在線學習修讀學分的課程，存在作弊的空間和極大的不公平性，因此，在線課程學習評價采用綜合評價的方式是極其必要的。參照已有的文獻資料，綜合評價方法的要素主要有以下幾方面：

①評價主體。評價主體可以是個人或者系統，評價主體依據評價的目標建立評價標準、評價指標和評價方法，并依據監測數據給出評價結果。

②評價對象。依據評價的目標，評價主體對評價對象給出有效的、具有區分度的等級或者分數。在線課程學習評價中，評價的對象是學生通過在線學習在知識、技能和興趣方面的實際學習水平。

③評價指標。評價指標體系是從多個角度和層次客觀反映特定評價對象的數量規模與數量水平的。它是評價主體對評價對象的數量特征的認識、抽象和量化的結果。

④權值系數。權值系數的分配，關系到綜合評價結果的可信程度。

⑤綜合評價模型。對于基于學習過程的在線課程評價而言，多個評價指標的量化量綱是不同的，所以在選擇評價模型時必須消除量綱的影響。本文設計的評價系統采用模糊綜合評價模型，目的在于盡量減少量綱和主觀因素的影響。

評價的對象從知識、技能和興趣三方面考核，評價主體依據在線學習的特征，減少教師的參與，以系統自動測評和學員互相打分為主。評價的內容可以量化為評價指標，以分數、等級或者次數等數據呈現。為了描述的便利，將評價標準改寫為指標形式（如表2）。

指標權值可以通過專家打分法或層次分析法獲取，在線評價系統中設計權值設置選項，可以依據實際情況修改權值。評價標準確立后，評價系統依據在線監測模塊提供的數據，利用模糊綜合評價模型進行綜合評價。

● 模糊綜合評價方法

模糊綜合評價法是一種基于模糊數學的綜合評價方法，該方法根據模糊數學的隸屬度理論把定性評價轉化為定量評價，利用模糊運算對受到多種因素制約的評價對象做出一個綜合的評價。筆者設計的綜合評價系統中評價流程如下頁圖2所示。

參看圖2，基于學習過程的模糊綜合評價主要步驟如下：

①依據表2確定的評價指標，設置模糊評價集合{優秀、良好、中等、及格、不及格}，為了便于數據的量化將評價集合設置為S={95，85，75，65，55}。因為指標分為一級指標和二級指標，所以權值設置為一級指標權值WT={0.5，0.3，0.2}，二級指標權值W1={0.4，0.6}，W2={0.3，0.4，0.3}，W3={0.2，0.4，0.4}，通過指標模塊和權值模塊完成上述設置。

②數據集合X={xij}，xij表示在第i個一級指標中的第j個二級指標的數值。數據通過監控模塊自動收集，并需進行數據檢驗，處理無效或者錯誤的數值。

③集合E表示權值集合W與模糊關系矩陣R模糊運算后的結果。

④一級模糊評價結果可以從知識、技能和興趣三個方面呈現學生在線課程學習的效果和水平。如果針對在線學習修讀學分的課程，還需要在一級模糊評價的基礎上進行二級模糊評價，獲得該課程的總成績，方便學分換算。T表示總成績集合，WT表示一級指標權值，E表示一級模糊評價結果集合，模糊算子為加權平均型。

模糊綜合評價過程由模糊評價模塊實現，該模塊的輸入為數據集合X，輸出為一級評價結果集合E和二級評價結果集合T。對于結果集合的處理可以采用最大隸屬度原則獲得評價等級或者通過加權平均法計算具體分數，評價結果保存于電子檔案中。

● 綜合評價的應用及實踐

為了驗證面向學習過程的模糊綜合評價方法的實踐效果，筆者設計了實驗組和基礎組進行驗證實驗。實驗組和基礎組各由5人組成，組間成員的知識水平和能力相近，進行同一知識的50分鐘的在線學習。實驗組采用模糊綜合評價系統，基礎組采用標準測試方法。通過學習記錄和問卷的方式對學習過程數據進行采集與分析，實驗結果如表3所示。

根據上述數據，對實驗結果進行分析。平均登錄次數實驗組比基礎組提高2.3次/人，平均在線時間實驗組比基礎組提升20.3分鐘/人，說明基于學習過程的評價方式激發了學生的學習興趣，提高了學生對學習過程的重視程度。平均發言次數實驗組比基礎組提高了3.5次/人，說明通過提高學習過程的質量和效率，學生擁有更多的發言動力和積極性。學習活躍度的提高較大地影響了學生的學習效果，所以平均測試成績實驗組比基礎組提高了15.3分。

滿意度實驗組比基礎組提高了23%，說明對于學習平臺的單一終結性評價問題，基于過程的評價系統，能夠科學合理地評價學習效果，提高了學生學習的積極性和滿意度。

應用結果表明該評價系統提高了形成性評價的效率，改善了學習平臺教學評價環節的功能，而且基于過程的設計思路對高等教育院校在線開放課程學習平臺的設計和應用具有積極的借鑒作用。

● 結語

作為在線學習平臺的重要組成部分，面向學習過程的綜合評價方法以知識、技能和學習興趣為評價目標，設計評價標準和指標，利用模糊綜合評價方法提高評價的科學性，避免主觀因素。面向過程的評價方案、評價指標和評價方法構成了合理的、可行的形成性評價策略。面向學習過程的模糊綜合評價方法提高了評價的效率，完善了評價的功能?；谛畔祿幚砑夹g，評價方法具有可行性和實用性，面向過程的綜合評價方法能夠為在線學習平臺的完善提供有益的幫助，對學習效率的提高具有實際應用價值。

參考文獻：

[1]劉斌，張文蘭，江毓君.在線課程學習體驗：內涵、發展及影響因素[J].中國電化教育，2016（10）：90-96.

[2]陳靜，杜婧.在線課程的進化特征及主流模式分析[J].現代教育技術，2017（03）：112-115.

[3]周賢波.慕課學習過程有效性提升策略[J].成人教育，2016（03）：51-54.

[4]孫宏輝.在線學習過程管理大數據的建設與應用[J].中國遠程教育，2016（11）：17-21.

[5]呂嘯，余勝泉，譚霓.基于發展性評價理念的網絡教學平臺學習評價系統設計[J].電化教育研究，2011（02）：73-78.

[6]白雪梅，馬紅亮，吳海梅.在線課程有效性的實證研究：基于某師范類大學四個不同專業的800個研究樣本[J].現代教育技術，2017（02）：92-96.

作者簡介：楊友林（1978—），男，講師，碩士，研究方向為智能控制、計算機應用技術。

基金項目：遼寧省渤海大學教學改革研究一般項目（BDJG2016YC24）。