基于用戶體驗的慕課公共服務平臺評價指標研究*

曾 宇 黎忠文

(成都大學 信息科學與工程學院， 四川 成都 610106)

一、背景

“互聯網+"促進了MOOC(Massive Open Online Course，大規模在線開放課程)的迅猛發展，優質教育資源的共享對推進教育公平、提高教學質量起到了重要的作用。2012年以來，MOOC在國外迅速發展，快速成為一種新興的網絡教育形式。近年來MOOC在中國也取得了長足發展，網易、果殼網、中國大學MOOC、學堂在線等平臺陸續出現并吸引了大批的網絡學習者，產生了一定的社會效益。教育部、四川省政府和成都市政府在2009年4月簽訂了《共建統籌城鄉教育綜合改革試驗區合作協議》，成都市成為了國家首個部、省、市共建的統籌城鄉教育綜合改革試驗區，開展MOOC基礎教育公共服務平臺評價指標的研究將有助于成都試驗區的國際化并搶占理論研究高地，進一步落實“互聯網+"在城鄉教育均衡發展中的推動和促進作用。在學校教育中，成都市區的學校已經全部實現了信息化教學手段的覆蓋，而成都的鄉鎮地區也已基本覆蓋了電子白板、平板電腦等教學手段。此外，智能手機、平板電腦等移動式計算設備在公眾中已經基本普及，學校教育逐步開始延伸到MOOC平臺上，一大批優質課程在MOOC平臺上的出現為成都市MOOC基礎教育公共服務平臺的搭建創造了良好的條件。

在MOOC平臺評價指標方面，Hollands F.M.和Tirthali D.在針對美國66所院校的MOOC研究中提出了6點共同目標： 延伸院校教育覆蓋面、MOOC平臺品牌效應、經濟效益、MOOC教學效果、創新教育以及引導教學研究[1]。該項研究發現由于種種原因，很少有MOOC達成了這6個目標。Chapman S.A.和Goodman S.等在研究中提出將MOOC的覆蓋面、參與度、教學質量和成績作為評價指標的要求[2]。Lorenzo Vigentini和Catherine Zhao的研究提出了MOOC平臺學生體驗概念模型的應用[3]。劉和海等基于Edutools評價體系提出了MOOC平臺的現狀與優化策略[4]。劉麗波提出了基于MOOC的學習行為評價量規[5]。在MOOC對基礎教育的影響的研究中，首都師范大學魏建宏、康昆等提出了MOOC理念對中小學“翻轉課堂”的啟示，認為中小學教育的“翻轉課堂"可以借助MOOC實現從“要我學"到“我要學"的轉變[6]。劉路等認為構建MOOC評價指標體系需要評價整個教育過程中“輸入"、“過程"、“輸出"三個要素，并需綜合MOOC教育的特點與對評估的特定要求，全方位地對MOOC教育質量進行評價[7]。

在這些評價指標中，國內外針對MOOC平臺的評價指標選擇有較大的差異，特別是針對MOOC公共服務平臺基于用戶體驗的評價指標研究尚存空白，基本沒有搜索到相關的論文和研究。用戶體驗(User Experience)是指在與產品的交互過程中用戶對產品的完整心理感受，除了對產品進行功能性的評估外，用戶體驗更要求對用戶使用產品的過程和體驗進行全面評價，這為MOOC公共服務平臺的評價指標研究提供了新的亮點。

二、MOOC公共服務平臺需求分析

(一)用戶調研

本調研分為預調查與用戶初步篩選、正式問卷調查、數據搜集三個步驟，采用網絡問卷的形式進行。

調查問卷中將調查者分為了兩類：MOOC平臺用戶和非MOOC平臺用戶。研究在網絡系統中隨機進行，經過15天的調查，收回有效問卷5107份，用戶的分布情況如圖1所示。

圖1 MOOC平臺用戶情況

從MOOC平臺用戶分布來看，目前使用MOOC平臺的公眾用戶數量在被調查者中占有不到10%的比例。MOOC平臺在公眾中的普及率比較低，還有較大的發展潛力。

在使用MOOC平臺的479名用戶中，職業分布情況如表1所示。

表1 MOOC平臺用戶職業分布情況

MOOC平臺用戶在年齡分布上，24周歲以下年齡組占比最高，為49.3%；60歲以上年齡組僅4人，占比0.8%。在性別分布上，男性和女性樣本占比分別為45.7%和54.3%。

(二)用戶需求模型

作為基礎教育公共服務，應該充分滿足公眾日益增長的教育公共服務需求，特別是在大數據、云技術和移動互聯網等新技術的發展與支持下，教育服務中的教育接受者需求的服務類型也在與時俱進。就參與學習者而言，這些服務的提供又直接與參與學習前用戶的心理動機、學習過程中用戶的滿意度和學習后對未來產生的效益密切相關。圖2為基于用戶的MOOC公共服務平臺需求關系層次模型。

對于用戶而言，評價MOOC平臺的需求分為使用前的心理需求，使用過程中的滿意度需求以及使用后對未來發展的影響。MOOC公共服務平臺提供者也應在這三個階段對用戶產生的影響進行定性與定量的評估和分析，使之更符合用戶體驗的需求。

圖2基于用戶的MOOC公共服務平臺需求關系層次模型

三、基于用戶體驗的MOOC公共服務平臺評價指標體系

結合成都市建設統籌城鄉教育綜合改革試驗區的要求，從基礎教育公共服務平臺的搭建出發，根據用戶體驗設計理論和MOOC公共服務平臺的自身特點，在基于用戶需求關系層次模型的基礎上，研究構建出基于用戶體驗的MOOC公共服務平臺的層次模型，在課程資源質量、教師教學過程、學生學習過程及結果評價、技術支撐、基礎設施建設等功能性評價指標的基礎上，引入了基于用戶體驗的評價體系，從用戶角度對所有影響用戶感受的因素進行全面的定性和定量研究。

(一)構建MOOC公共服務平臺評價指標體系指導思想

為了適應城鄉教育的要求，制定MOOC公共服務平臺評價指標應從信息化促進城鄉教育均衡發展和教育質量提升的視角出發，首先以“城鄉教育均衡發展"為指導思想，切實貫徹成都市城鄉教育一體化發展的政策導向。第二應該堅持以政府為主導，按照“全域成都"的理念，圍繞城鄉統籌、產教融合，深化、完善、創新統籌城鄉教育綜合改革試驗區的宗旨，促進區域教育均衡化、現代化、國際化，有助于提高“成都試驗區"和“成都統籌城鄉教育發展研究中心"的國際影響力。最后，要加強相關標準的制定和推廣，在研究基礎上搭建符合城鄉教育的公共服務平臺，并使已有的相關MOOC平臺逐步落實評價指標的要求。

(二)MOOC公共服務平臺評價指標體系的構建

基于用戶體驗的MOOC公共服務平臺評價指標體系層次結構如表2所示。

表2基于用戶體驗的MOOC公共服務平臺評價指標體系層次結構

(續表2)

四、評價體系的驗證及權重計算

(一)問卷調查

在用戶調研的基礎上，研究對479名MOOC平臺用戶進行了評價體系問卷調查，其中收回有效問卷471份。問卷對評價因子采用李克特量表的五點計量法，將各個指標的評價表現形式作為問題項，如表3所示。

表3 基于用戶體驗的MOOC公共服務平臺評價指標問題項

(二)問卷的信度分析

問卷采用克朗巴哈系數(Cronbach's Alpha)法，通過SPSS對所有數據的信度進行了分析，其可靠性統計量如表4所示。

表4 可靠性統計量

(三)權重分析

根據定量統計方法，研究在471名MOOC平臺用戶進行的問卷調查的基礎上，對調查結果進行了統計，將“非常重要"選項賦值“5”，“重要"賦值“4”，“一般"賦值“3”，“不重要"和“完全不重要"分別賦值“2”和“1”。將調查結果結合權重計算出每個指標的權重，如表5所示。

表5 各指標權重

(四)綜合分析

由權重的計算結果可以得到基于用戶體驗的MOOC公共服務評價指標排序結果。在用戶心理需求層中，政府戰略和學習指南等指標所占權重較大；過程滿意度層中，教學互動、學習規劃和課程創新等所占權重較大；而用戶后期需求層中，用戶對達成目標和大數據統計等指標比較看重，所占權重較大。

提出基于用戶體驗的MOOC公共服務平臺體系指標，能夠較好地滿足基層群眾對互聯網學習的需求。同時我們也發現，目前成都市還沒有統一的互聯網學習平臺及MOOC公共服務平臺標準，這也反映出政府在互聯網建設中階段性的特點，即首先著力于硬件設備建設，再進行軟件、平臺和體系的推廣。雖然我國近年來在MOOC平臺發展中取得了長足的進步，但與西方發達國家相比還有待完善，特別是平臺的評價指標體系和政府戰略的契合非常重要。建設好城鄉一體化發展的MOOC教育公共服務平臺，有利于城鄉教育的均衡發展。隨著我國大數據、移動互聯網、云計算等相關領域的發展，MOOC公共服務平臺一定能在指標體系上得到更好的完善，極大提升公眾教育面和教育程度。

五、結論

MOOC是一項受到公眾廣泛關注的技術，MOOC在公共服務平臺領域的應用契合了城鄉一體化發展的政府策略。雖然我國對MOOC的研究還不及發達國家，研究基礎還比較薄弱，但是隨著政府戰略的提出，建立一套成熟的MOOC公共服務平臺評價指標體系已經成為一項極具挑戰的課題。

本文在比較客觀和全面地分析了MOOC公共服務平臺內涵的基礎上，利用用戶體驗設計原理以成都市的實際情況構建了基于用戶體驗的MOOC公共服務平臺評價指標體系，研究在用戶體驗設計的前期、中期和后期選取了39個操作性較強的評價指標。結果表明，平臺的互動性指標和對用戶未來影響等指標占據了比較重要的地位，公共服務平臺的創新性指標有待完善。

參考文獻：

[1]Hollands F.M.,Tirthali D.MOOCs:Expectations and Reality[J].Online Submission，2014:3.

[2]Chapman S.A.,Goodman S.,Jawitz J.et al.A Strategy for Monitoring and Evaluating Massive Open Online Courses[J].Evaluation & Program Planning,2016,57:55-63.

[3]Vigentini L.,Zhao C.Evaluating the ‘Student' Experience in MOOCs[J].ACM Conference，2016:161-164.

[4]劉和海,李起斌,張舒予.基于Edutools評價體系的中文MOOC平臺現狀與優化策略[J].電化教育研究,2016(1):84-90.

[5]魏建宏,康昆.MOOC理念對中小學翻轉課堂的一些啟示[J].當代教育實踐與教學研究:電子版,2015(5):9-10.

[6]胡以濤,查貴庭,唐惠燕,等.國內外MOOC的移動終端評價研究[J].現代教育技術,2015(10):73-79.

[7]劉路,劉志民,羅英姿.歐洲MOOC教育質量評價方法及啟示[J].開放教育研究,2015(5):57-65.

[8]李雪.慕課及其在我國高校中的應用研究[J].教育與教學研究，2016(9)：95-99.

[9]曾一帆.基于教育生態視域的高校數字化教學模式研究[J].教育與教學研究，2016(7)：80-85.