在線開放課程評價指標體系研究

孫福，孫佳怡，賈帥

（1.陸軍工程大學石家莊校區，河北 石家莊；2.上海海事大學 信息工程學院，上海）

一 引言

在線開放課程評價是依據課程建設開發的標準、規范和方法，對在線開放課程的教學設計、課程質量、教學過程、課程效果等構成要素進行全面或某一具體方面的價值評定，其實質就是在課程的教與學活動的過程中，對課程的各個環節采取各種定性與定量相結合的方式方法，對課程實現教學目標、教學策略的價值判斷及其分析，為改進和完善課程提供決策依據和遵循[1]。

二 在線開放課程的起源、內涵及特點

（一）在線開放課程的起源

在線開放課程的起源可以追溯到二十世紀六十年代。1962年，美國發明家和知識創新者Douglas Engelbart提出一項題目叫《增進人類智慧：斯坦福研究院的一個概念框架》的研究計劃。在這個研究計劃中，Douglas Engelbart倡導將個人計算機與“互聯的計算機網絡”結合起來，形成一種大規模的、世界性的信息分享的效應[2]。

真正意義上的在線開放課程起源于2001年麻省理工學院的開放課程運動。2001年4月麻省理工學院宣布啟動開放式課件項目(Open Course Ware，簡稱 OCW)，這是開放課程共享的開始。作為在線開放課程的最典型的應用形式——慕課（Massive Open Online Course,簡稱MOOC）于2008年逐漸呈現。2011年5月，“喬布斯之問”呼吁并有效促進了教育與技術的深度融合，從2011年秋季開始，慕課呈井噴式發展。2012年，斯坦福大學的專家學者推出Udacity在線課程、創立Coursera在線免費課程，麻省理工學院和哈佛大學共同創建免費開源在線課程計劃—edX，各著名大學和教育機構，也都極力推動慕課教學，這一年也因此被《紐約時報》稱為“慕課元年”[3]。

（二）在線開放課程的內涵

在線開放課程屬于網絡課程范疇。網絡課程是指通過網絡媒體表現的某門學科的教學內容及實施的教學活動的總和[4]。我們常說的在線開放課程，一般是指慕課，即大規模開放在線課程，是一種新型在線教育模式，是一種針對大規模人群的在線課程，人們可以通過網絡實現碎片化、自主性學習[5]。針對慕課學習體驗缺失、監管乏力、學習者不宜堅持、課程完成率低、學分認證難、難以實現個性化學習及教師與學習者缺乏面對面交流等問題與局限，國內外教育機構和學者們致力于從不同的問題視角、課程類型和教育理念對MOOC進行改進，衍生出了SOOC、SPOC、PMOOC、DOCC、MOOL、MOOR 等教學模式，很好地補充和拓展了MOOC，進一步豐富了形式，增大了選擇的可能性。無論是哪種衍生形式，也都未能突破慕課的在線開放的特點。因此，接下來的研究和討論的對象主要以慕課為主，所稱在線開放課程也主要是指慕課。

（三）在線開放課程的特點

在線開放課程的典型特征主要有大規模、開放性、共享性、協作性和交互性[6]。此外，在線開放課程既然稱其為課程，具有傳統課程的一般屬性，包括教育目標、教學內容、教學資源、教學效果、教學評價等課程構成要素；在課程內容呈現方式上，又不同于傳統課堂教學模式，是運用信息技術在網絡支撐平臺上，采取文字、圖表、音頻、視頻、動畫等多媒體形式表現；在課程設計與教學方法上，在線開放課程的教與學的過程具有交互性、共享性、開放性、協作性和自主性的特征，在線開放課程的學習是一種基于資源、基于情境、基于協作的學習[7]。在服務方式與服務對象上，不受時空限制，學習者可以在時空分離的虛擬環境中自主選擇學習時間和學習內容；而且服務對象可以是在校師生，也可以是社會上有課程學習需求的任何人。

三 設計在線開放課程評價指標體系需要把握的幾個原則

在線開放課程既有傳統課程的屬性，又是運用“網絡+教育”的理念方法，具有信息技術與教育融合的典型特征。構建其評價指標體系時[8]，既要運用傳統課程評價的理論與方法，又應充分考慮信息技術支撐下的在線開放課程的特征與要求；既要考慮評價對象與評價主體，又要關注評價模式和評價技術；既要注重過程評價，又要注重結果評價；突出課程設計、教學過程、課程服務、課程應用等重點評價項目，構建覆蓋在線開放課程全要素、開發建設全過程的評價指標體系。具體操作中，應重點把握以下原則。

（一）方向性原則

評價指標體系是在線開放課程的課程定位和課程目標的具體化。在設計指標體系時，應站在立德樹人的高度，遵循教育教學規律，體現現代教育思想，體現課程思政理念，符合教學目標要求，在課程評價理論的指導下，體現評價的導向功能與激勵作用，使指標體系具有鮮明的方向性和導向性。

（二）科學性原則

評價指標體系是由彼此聯系又相對獨立的指標組成的，指標間具有一定的邏輯關系，評價指標體系的建立，應遵循科學的教育理論和統計學的資料分類要求，對各類指標科學分類[9]。

（三）全面性原則

評價指標體系是由指標的集合組成的，每個指標反映總體目標的一個點或面，應完整地再現目標，使其各個層面都能顯現出來，這樣指標體系才能夠全面地、無遺漏地再現和反映整個目標的要求。因此，在線開放課程評價指標體系應盡可能完備，最大限度地反映目標的各個層面。

（四）可操作性原則

評價指標是用可操作化的語言、數據加以測量或定義，應做到能定量則定量，不能定量的可以定性測量或利用其它方法加以測定。構建評價指標體系時，應盡量做到條目簡明，表達清晰準確，每個主要觀測點描述應內容具體、切實可行、便于操作[10]；指標末端可測量，可以通過一定的測量手段獲得信息，取得結論，以達到評價的可靠性、準確性和可操作性。

四 設計在線開放課程評價指標體系的思路與方法

在設計評價指標體系框架時，堅持理論與實際相結合、科學性和思想性相結合，運用現代教育理論和系統工程方法，對在線開放課程評價指標的科學性、準確性和可行性進行深入研究，并采用現代權重集合的構造方法、模糊綜合評判方法等方法進行數據處理。

（一）評價指標體系構建思路

在線開放課程評價指標體系是根據特定的評價目的，用于從多個維度選取相應的評價項目或要素進行科學、客觀地價值判定的指標集合[11,12]。評價指標主要來源于在線開放課程本身所包含的課程目標、課程內容、課程信息等構成要素和在線開放課程支撐平臺提供的教與學過程數據和考核數據。而每個指標應有相應的分值和計算方法。評價指標的分類由分值類型和分值范圍構成，評價指標的分值應落在規定的范圍內。評價指標的分值類型有整數型、實數型、列表型、有序類型（評價指標的分值是一個有序離散的值區間，如A、B、C、D）。

（二）評價指標體系設計方法

把在線開放課程構成要素和支撐平臺提供的數據信息類型分解為若干個評價項目，組成一個完整的指標系統。在這個系統中，應準確地反映達到的目標，以及完成目標的客觀情況，做出明確的結論。由于在線開放課程評價的復雜性，對目標的一次分解，可得到幾個一級指標；將一級指標進行再分解，得出若干個二級指標；各級指標根據其地位、作用和工作量的大小，分別設定出不同的權重。為增強指標可測性，通過再分解的方法，再將二級指標分解出若干個觀測點。根據觀測點的功能作用，制定出相應的評價標準，也就是對觀測點進行詳細而具體地描述。設計指標體系，力求簡便易行、考慮全面、突出重點，定量評價與定性評價相結合[13]，構成較為完整合理的評價指標體系。

五 在線開放課程評價指標體系框架

從理論上講，評價指標的層次越多、等級的數量越多，評價的精確度就越高，但超過五個等級的劃分，一般就很難掌握，教育評價一般常用二至五個等級[14]。鑒于此，結合上述評價指標體系設計原則、思路、方法，在構建評價指標體系框架時，運用現代課程評價理論與方法，對評價指標的科學性、準確性和可行性進行深入研究，梳理出影響在線開放課程價值評定的課程定位、課程內容、教學過程、媒體呈現、課程效果、課程團隊等六個維度，即六個一級指標。對每個維度再分解，得出若干個二級指標，分別對二級指標進行分解獲得相應的觀測點，對每個觀測點進行界定和描述，即構成了評價指標體系框架。

（一）課程定位維度

課程定位維度可分解為課程理念、教學對象、建設思路等3個二級指標。教學理念指標重點考察是否遵循教育教學規律、體現現代教學思想，以及與在線開放課程特點和規律的符合度等。教學對象指標重點考察在線開放課程服務對象是否明確。建設思路指標重點考察在線開放課程建設原則與思路是否明確清晰。課程定位維度評價指標體系框架如表1所示。

表1 課程定位維度評價指標體系框架表

（二）課程內容維度

課程內容維度可分解為內容選取、課程設計、課程資源和版權與保密等4個二級指標。內容選取指標重點考察課程內容是否滿足學習者學習需求、課程內容是否具有科學性、先進性、前瞻性等。課程設計指標重點考察課程要素是否齊全，知識體系、章節編排是否合理，知識點劃分和課程內容深淺度是否合適等。課程資源指標重點考察課程資源要素是否齊全規范，數據與事實引用是否嚴謹規范，課程輔助資源和參考資料是否滿足需求等。版權與保密指標重點考察課程政治上是否合規，有無侵權問題，是否符合保密要求等。如表2所示。

表2 課程內容維度評價指標體系框架表

（三）教學過程維度

教學過程維度可分解為教學設計、教學方法、課程講授等3個二級指標。教學設計指標重點考察教學設計思想、教學策略是否符合認知規律，教學形式是否靈活多樣，創意是否新穎等。教學方法指標重點考察教學方法是否符合在線開放課程類型及特點等。課程講授指標重點考察表述是否清晰、準確，講解是否透徹，重點是否突出等。如表3所示。

表3 教學過程維度評價指標體系框架

（四）媒體呈現維度

媒體呈現維度可分解為出鏡人員、媒體素材、編輯制作等3個二級指標。出鏡人員指標重點考察出鏡的教師和出鏡的示教人員的儀表、著裝、肢體語言、操作動作等規范性。媒體選用指標重點考察所選用的媒體形式是否合適，素材是否豐富，是否能有效支持內容表達等。編輯制作指標重點考察教學視音頻、畫面構圖、剪輯等是否符合標準規范。如表4所示。

表4 媒體呈現維度評價指標體系框架

（五）課程效果維度

課程效果維度可分解為課程服務、互動交流、課程應用等3個二級指標。課程服務指標重點考察課程團隊在線指導與服務的時效性，以及課程內容與課程資料更新情況等。互動交流指標重點考察學習者在線互動交流是否充分等。課程應用指標重點考察課程應用效果、社會影響、學習者評價等。如表5所示。

表5 課程效果維度評價指標體系框架

（六）課程團隊維度

課程團隊維度可分解為課程負責人和團隊成員等2個二級指標。課程負責人指標重點考察負責人的教學能力、學術水平、師德師風等。團隊成員指標重點考察團隊結構、各類人員的能力水平、是否符合項目服務要求等。如表6所示。

表6 課程團隊維度評價指標體系框架

區分二級指標的重要程度分配相應的權重，再對二級指標的觀測點賦值，將所有一級指標、二級指標（含權重）及其觀測點（含賦值）整合在一起，即可形成完整的在線開放課程評價指標體系。根據不同的評價目的，可選取所需的一級指標，并對相應的二級指標及其所屬觀測點進行取舍，給出相應的計算公式，便可形成滿足不同評價要求的指標體系。

六 結語

在線開放課程質量是決定在線教育質量的一個關鍵要素[15]。加強在線開放課程評價研究，有利于促進在線開放課程質量提升，推動在線開放課程的開發和應用。構建一套科學、合理、可行的評價指標體系尤為重要，這一體系也需要在實踐中不斷豐富和完善，以利于更好地發揮評價對在線開放課程的導向與促進作用。