MOOCs課程教學效果評價指標與權重研究

余璐

（河南理工大學萬方科技學院，鄭州451400）

?

MOOCs課程教學效果評價指標與權重研究

余璐

（河南理工大學萬方科技學院，鄭州451400）

摘要：教學效果評價是衡量課程教學質量的關鍵。本研究以課程論、教學論為基礎，以評價理論為依據，綜合運用德爾菲法，通過計算集中度、離散度、變異系數的方法，確定了MOOCs課程教學效果評價指標及權重。從MOOCs課程建設、教師教學和學生學習三個維度對MOOCs課程教學效果全方位評價，為今后更好地評判和發展MOOCs課程帶來依據和參考。

關鍵詞：MOOCs；教學效果；評價；指標；權重

此文為2015河南省教育科學“十二五”規劃項目“MOOCs課程教學效果評價體系構建研究”（JKGHYB-0682）的階段性成果。

MOOCs課程教學效果評價是指以課程論與教學論理論為基礎，以評價學理論為指導，運用可操作的科學方法，按照一定的評價標準，對MOOCs課程教學效果進行價值判斷的過程。本研究所要解決的問題為：1.用什么評價指標能夠對MOOCs課程教學效果做出評價？2. MOOCs課程教學效果評價各指標的權重分別是多少？

一、理論依據

（一）診斷性評價、過程性評價和總結性評價

診斷性評價是指在課程實施之前，對課程定位、教學目標等基礎條件做出的評價。形成性評價是指在教學過程中，在持續了解課程教學進行的情況下，不斷對教學內容、教學方法等做出評價。形成性評價針對的對象是動態的。總結性評價是指在課程教學完成之后，對教學活動的成果做出鑒定，是對課程計劃的成效做出整體判斷。三者相輔相成，不可或缺。

（二）目標評價模式和目標游離評價模式

目標評價模式又稱為“泰勒模式”。根據這一模式，課程評價實際上是判斷學生的實際活動是否達到目標的活動。目標評價模式在提出之初對課程及教學的評價帶來了極大便利和好處，但也有局限性，該模式不能評價發展中的教師授課過程和學生學習過程，而且只關注預期結果，許多非預期效果被排斥在外。

目標評價游離模式是美國評價專家斯克里文針對目標評價模式所存在的弊端所提出來的評價模式。該模式強調評價的關注點是課程計劃的實際結果。這種評價模式以實際結果為評價對象，使評價更加客觀。但也有其自身無法克服的問題，即評價完全游離于既定目標之外，導致對某些結果不可測。

目標評價模式與目標游離評價模式得而兼之才能對課程教學效果進行全面而準確的評價。

二、MOOCs課程教學效果評價指標

“指標”是對評價對象品質的衡量標準，它明確了評價對象的特征和性質。教學目標是課程教學效果評價的基礎，而評價指標正是對教學目標分解后的具體規定，它是具體的、可測量的、行為化和可操作的。

（一）MOOCs課程教學效果評價指標初構

1. MOOCs課程教學效果評價指標制定原則

MOOCs課程教學效果評價指標建構（見表1）遵循一般指標建構原則，即客觀性、全面性、科學性、可行性、可比性和導向性。客觀性是指在制定評價指標時要依據MOOCs課程教學的實際情況；全面性是指評價指標要能覆蓋評價MOOCs課程教學的所有方面；科學性是指評價指標應尊重教育規律；可行性是指指標可以通過觀察評價對象的實際行為而檢測；可比性是指同級或不同級指標之間不能相互重疊和包含，也不存在因果關系；導向性是指評價指標能夠指導今后的教學工作。

表1　MOOCs課程教學效果評價指標初構表

2. MOOCs課程教學效果評價指標構建

教學效果評價是在教學評價的基礎上，對教學產生的實際結果的評價。綜上，初步制定MOOCs課程教學效果評價指標如下：該指標體系分為三個一級指標、十個二級指標和二十八個三級指標。每級指標都有具體的標準闡述其內涵，且每級指標都運用利庫德五級量表進行評分，即：非常不合適1分、不合適2分、較合適3分、合適4分、非常合適5分。

3.對MOOCs課程教學效果評價指標的分析

一級指標。一級指標分別為MOOCs課程建設效果、教師教學效果和學生學習效果。MOOCs課程建設效果評價是在課程進行之前對課程的基本信息做出評價，屬于診斷性評價；教師教學效果評價關注點是課程進行的過程，屬于形成性評價；學生最終學習成果評價屬于總結性評價。此外，MOOCs課程建設效果評價指標屬于典型的目標評價模式，該評價指標的參照物為預定的教學目標；學生學習效果體現了目標游離評價模式，該評價指標針對的對象包括不可預知的結果。

二級指標。在MOOCs課程建設效果的二級指標中，課程基本設置、課程內容設計、欄目設計、教學環節設計分別從形式到內容，對一級指標做出完整的闡述；在教師教學效果二級指標中，教學組織是對教師對課程安排的評價，教學過程是對教師授課行為的評價，教學指導則是對教師課后輔導的評價；在學生學習效果二級指標中，參與度和考試成績是客觀量化的評價，而自我評價則是學生主觀能動的評價。

三級指標。課程基本設置下的三級指標為課程定位與教學目標，是對課程教學的基礎進行評價的依據；課程內容設計三級指標側重評價課程教學所需要的資料、題庫等是否完備；頁面設計三級指標對MOOCs課程版面予以關注；教學環節設計概括了教學的各個步驟。教學組織三級指標從教師的課程執行力方面做出評價；教學過程三級指標則是對教師掌控力及教師負責程度的評價；教學指導三級指標關注點是教師對學生的課外關注度。參與度三級指標是客觀考量學生參與學習的指標；考試成績三級指標可以直觀檢測出學生是否掌握了教學大綱要求掌握的知識；自我評價三級指標是學生主觀評價自己學習效果的最好方式。

（二）德爾菲法重構MOOCs課程教學效果評價指標

德爾菲法即專家咨詢法，是指運用問卷、訪談等方式向相關專家征詢意見，并獲得專家意見和建議的方法。本研究邀請10位具有MOOCs課程一線教學經驗的專家作為德爾菲法的研究小組成員。組內專家對指標給予了評分和修改意見之后，研究小組將專家給各指標的評分以平均值、標準差和平均值/標準差進行計算。指標的平均值為指標的集中度；指標的標準差為該指標的離散度；離散度與集中度的比值為該指標的變異系數。集中度、離散度和變異系數綜合表示該指標的必要程度。

三、MOOCs課程教學效果評價指標權重

各指標在該評價指標體系中的重要程度也不相同，即“權重”。本研究所運用確定指標權重的方法為排序法和百分數計算法。專家對各級指標的重要程度分別進行排序，排序靠前的指標得分高，排序靠后的指標得分低，通過計算指標在該級指標里所占的百分數即得權重。

在評價MOOCs課程教學效果時，應該從MOOCs課程建設效果、教師教學效果和學生學習效果三方面進行。對學生最終學習效果的評價仍然是課程教學效果評價最重要的部分；對教師教學過程做出的評價能夠動態、實時監控該課程教學過程；而對課程基本信息的考量則是對該課程教學效果進行評價的基礎。本研究所得結果將為今后更好地開展MOOCs教學提供參考，并為將來進行MOOCs課程評價帶來啟示。但由于條件所限，本研究并沒有對MOOCs課程的評價主體進行闡述，今后的研究可以針對不同的評價主體進行，以對MOOCs課程教學效果評價指標進行更細致的劃分。

表2　MOOCs課程教學效果評價指標權重一級指標

參考文獻：

[1]B.S.布盧姆.教育評價[M].上海:華東師范大學出版社，1987.

[2]陳玉琨，趙永年.教育評價仁[M].北京:人民教育出版社，1989.

[3]馬武林，胡加圣.國際MOOCs對我國大學英語課程的沖擊與重構[J].外語電化教學，2014(3):48-54.

[4]R.W.泰勒.課程與教學的基本原理[M].臺北:桂冠圖書有限公司，1981.

編輯朱榮華

[5]G. F. Madaus, M.S. Scriven, D.L. Stufflebeam. Evaluation Models[M]. Kluwer-Nijhoff Publishing, 1983.

Research on the Indexes and Weight of MOOCs Teaching Effect

YU Lu
（Wanfang College of Science & Technology, Henan Polytechnic University, Zhengzhou 451400，China）

Abstract:Teaching effect evaluation is the key point in assessing the teaching quality of a course. With the curriculum theory, didactics and the evaluation theory as theoretical foundation, the research has determined the indexes and their corresponding weight of the teaching quality evaluation of MOOCs by using Delphi method and calculating concentration ratio, dispersion and variable coefficient of the statistics. The three dimensions are MOOCs curricula construction, teaching process and learning result. The findings would provide some references to judge and develop MOOCs curriculum in the future.

Key words:Teaching Effect; Evaluation; Index; Weight

作者簡介：余璐（1984），女，河南洛陽人，碩士，講師，研究方向為語言學、英語教學。

收稿日期：2015-09-23

中圖分類號：G642

文獻標識碼：A

文章編號：2095-8528（2016）01-012-04