基于層次分析法的中職網絡課堂教學效果評價指標構建

摘要：本文利用層次分析法構建以網絡教學設計評價指標體系為目標層，教學內容，教學實施，教學反饋，診斷提升為準則層，以及科學性，規范性，嚴謹性，啟發性，情境性等29個因素為指標層的三級評價指標體系。參照商業化網絡課程設計標準及中職生網絡學習特點，結合互聯網知識傳播特性，采用專家打分的方式構造判斷矩陣，并計算指標層綜合權重，成功建立一個系統、客觀、操作性良好的網絡教學設計評價模型。

Summary：This paper uses the analytic hierarchy process to build a network of teaching effect evaluation index system ，and takes it as the target layer.It also uses teaching content， teaching implementation， teaching feedback， and teaching diagnosis and upgraded as the criterion layer. Eventually it forms 29 factors of three-level evaluation index system including scientific， standardized， rigorous， enlightening， contextual and so on. According to the design standards of commercial online courses and the characteristics of online learning for secondary vocational students， it combines with the characteristics of internet knowledge transmission， the judgment matrix constructed by expert scoring， and the comprehensive weight of the index layer to establish a system successfully， which is a objective and well-operable online teaching effect evaluation model.

關鍵詞：層次分析法 教學效果 評價指標

Keywords： analytic hierarchy process; teaching effect; evaluation index

一、研究背景

隨著“互聯網+”教育的深入推進，教育信息化進入2.0時代，教育信息化網絡平臺日趨完善，教師信息化應用能力顯著提高，“互聯網+”教育打破了傳統教育時間與空間的限制，實現優質教育資源共享，滿足學生個性化學習需要[1]。同時互聯網提升了教育服務效率，優化在線課堂組織形式，將前期測評、過程監控，成果反饋融為一體，提高學習的針對性。互聯網教育憑借著獨特的優勢，成為傳統課堂教學的有益補充，然而在其快速發展過程中，如何有效評價網絡教學效果，也引發了專家和學者的關注。

在國外網絡教學效果評價體系的研究，主要分為三個方面。（1）網絡教學平臺的開發和評價，以OpenLearn為代表的公眾學習平臺，為用戶提供免費訪問開放大學的教育資源。以Udacity為代表的商業平臺，開發高等教育在線課程，并提供行業應用型人才的在線培訓和認證。自從2003年，國外針對不同類型的網絡教學平臺進行比較和評價研究，已經形成多個較為典型的網絡教學平臺評級指標體系。（2）網絡教學中教師的作用，認為課程的組織者，策劃者和實施者，也是教學反饋的評估者，對于教師的標準化訓練至關重要[2]。（3）從用戶體驗出發，美國教學設計與適用專業委員會從可用性，技術性和教學性三個方面對在線學習進行了評價并提出在線課程的應用標準。

在國內網絡課程質量體系構建中，學者提出必須從學校支持，課程開發，教學過程，教學組織，學生服務，教師培訓和教學效果等多方面進行綜合管理，而網絡教學設計研究，則認為教學設計應該體現互聯網碎片化學習的特點和情景遷移的學習習慣[3]。

綜上所述，國內外對網絡教學設計的評價指標體系的研究各有所長，還未形成一套操作性強的評價標準，缺少各指標在評價體系中科學的權重賦值。因此，構建中職院校合理、系統、有效的新型網絡教學效果評級指標體系，具有相對重要的應用和實踐價值。

二、網絡教學效果評價指標體系構建

（一）構建三級評價結構模型

為確保評價指標的科學性和有效性，項目組邀請網絡教學經驗豐富的專家和一線教師組成研究團隊。首先根據網絡教學的特點，認真詳細分析構建總目標，然后根據問題的性質和要達到的總目標，將問題分解為不同的組成因素，并按照因素間的相互關聯影響以及隸屬關系將因素聚集組合，最終將問題歸結至底層，形成客觀，科學，可執行的行動方案和解決措施[4]。三級評價指標體系（見表1）

（二）構建兩兩比較的判斷矩陣

在確定各層次各因素之間的權重時，借助Saaty的九分位標度法，采用相對尺度，以盡可能減少性質不同的因素相互比較的困難，提高準確性[5]。通過對同一層次兩兩元素重要性的比較，可以得到表示本層某一因素針對其他因素的相對重要性的成對比較矩陣A，其中滿足（A-λE）W=0的λ值叫做矩陣A的特征值，W是特征向量，最大特征值λmax所對應的方程組的解向量W（w1，w2， …，wn）即為各個因素的權重。

（三）層次單排序和一致性檢驗

層次單排序：W的元素為同一層次因素對于上一層次因素某因素相對重要性的排序權值，這一過程稱為層次單排序，能否確認層次單排序，需要進行一致性檢驗，所謂一致性檢驗是指對成對比較矩陣確定不一致的允許范圍[6]。一致性檢驗是通過計算一致性比例來進行：在CR=CI/RI中CI是一致性指標，RI是平均隨機一致性指標，若CR<0.1，則通過一致性檢驗;若CR>0.1，則一致性檢驗未通過。

如果成對比較矩陣是一致陣，則我們自然回取對應于最大特征根λ的歸一化特征向量W（w1，w2， …，wn），且，wi表示下層第i個因素對上層某個因素影響程度的權值。

若成對比較矩陣不是一致陣，Saaty等人建議用其最大特征根對應的歸一化特征向量作為權向量W，或者重新構造判斷矩陣[7]。

首先構建目標層A與準則層B的判斷矩陣，得到B層各個元素相對于A層的權重。以準則層的四個要素兩兩比較的判斷矩陣為例，教學內容與教學實施比較，認為后者較前者稍微重要，所以賦值為3，教學內容與教學反饋相比，前者重要性介于明顯重要和強烈重要之間，所以賦值為6，教學內容與改善提升相比，前者相比后者強烈重要，所以賦值為7，以此類推。在構建判斷矩陣時，為了提高指標評分的客觀性、全面性和準確性。我們依據專家評分的方式，對指標層的各項指標做出科學的評估，去掉一個最低分和一個最高分取剩余專家對各項指標評分的均值。

準則層B1-B4關于目標層A構成A-B判斷矩陣，如下所示：

（三）計算指標層相對于目標層的綜合權重

如果準則層對目標層的權重向量為W=（W1，W2，…，Wn）T，而且指標層元素對準則層的權重向量為，P=（P1，P2，…，Pn）那么指標層對目標層的綜合權重向量為 W=P*W

通過Matlab軟件計算所得綜合權重，可以看出教學活動執行的規范性和準確性，以及教學活動中的情景設計和互動感知所占比重較大，分別為0.16，0.091和0.086，因此教學活動的執行環節是評價網絡教學效果的關鍵，同時也明確了其他指標對目標層的影響程度，該指標體系對于中職院校網絡課程建設和教學效果評估具有良好的指導作用。

三、總結

本文所構建的網絡教學設計評價指標體系，重點解決了以下幾個目標。一是評價指標比較客觀。克服了人為主觀定級評分的缺陷。二是評價相對精確。按照網絡教學活動進程的內在邏輯，通過定性與定量研究對指標進行識別，篩選，確保指標權值的科學性和規范性;三是指標可操作性強，該指標體系遵循教學活動規律展開，從教學內容，教學執行，教學反饋和改善提升四個環節重新還原了教學設計過程，通過知識重組，知識呈現，學習行為管理，學習效果診斷，輔導提升等步驟，形成教學閉環。同時結合網絡學習者偏好和互聯網內容傳播的特性，為進一步細化為課程實施方案提供了依據。當然在實際應用中，可以根據學科導向，參考教學實施者和教學感知者的體驗調整各項指標權重，滿足實際教學評價的需要，使教學評價結果更加科學，公正，客觀。

參考文獻：

[1] 周俊.以質量為核心 推進職業教育持續發展——《國家教育事業發展“十三五”規劃》解讀 [J].江蘇教育，2018（44）：23-27.

[2] 孫楠，徐麗君，王子龍，關英紅.基于層次分析法的網絡教學效果評級分析[J].黑龍江教育（理論與實踐），2017，（11）：20- 21.

[3] 譚光興，徐峰，屈文建.高校學生網絡教學行為意向影響因素與模型[J].電化教育研究，2012，33（01）：47-53.

[4] 齊宏影. 中職學校電子商務專業課堂教學中的激勵問題及對策研究[D].吉林：吉林外國語大學，2019.

[5] 李寶斌，許曉東.高校課堂教學效果的教師評價維度探究[J].中國大學教學，2011（8）.

[6] 馮麗霞，施韶亭，杜文明.基于層次分析法的教學評價指標模型[J].西北師范大學學報：自然科學版，2010（5）.

[7] T.L.Saaty. The Analytic Hierarchy Process[M].Mc.Graw： Hill International Book Company.1980.

基金項目：上海市職業教育協會2020—2021年度一般課題，《課證融合模式下網絡教學效果評價指標研究》階段性成果之一。

上海市現代流通學校 林明輝