試論基于學(xué)習(xí)者體驗(yàn)的在線直播課程評(píng)價(jià)體系

摘要：踐行“以學(xué)習(xí)者為中心”的理念，從學(xué)習(xí)者體驗(yàn)出發(fā)，綜合運(yùn)用文獻(xiàn)研究、用戶訪談和網(wǎng)絡(luò)研究等方法，構(gòu)建評(píng)價(jià)維度和指標(biāo)，通過(guò)問(wèn)卷調(diào)查對(duì)指標(biāo)進(jìn)一步篩選和優(yōu)化，運(yùn)用層次分析法計(jì)算指標(biāo)權(quán)重，并結(jié)合相關(guān)性分析和信度、效度校驗(yàn)驗(yàn)證指標(biāo)合理性，最后結(jié)合具體課程開(kāi)展實(shí)踐應(yīng)用。從實(shí)際應(yīng)用效果來(lái)看，指標(biāo)評(píng)價(jià)結(jié)果與學(xué)習(xí)者的直接反饋基本一致，表明指標(biāo)具有一定的合理性和可操作性。應(yīng)用該指標(biāo)體系評(píng)價(jià)直播課程，可以發(fā)現(xiàn)直播課程的不足，改善學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)，提高教學(xué)效果。

關(guān)鍵詞：學(xué)習(xí)者體驗(yàn)；在線直播課程；評(píng)價(jià)指標(biāo)；層次分析法

中圖分類(lèi)號(hào)：G642? ? ? 文獻(xiàn)標(biāo)志碼：A? ? ? 文章編號(hào)：1008-4657（2023）02-0082-07

0? ? ? ? 引言

自2019新冠疫情出現(xiàn)，為響應(yīng)教育部“停課不停學(xué)”的要求和部署，各高職院校紛紛建立和運(yùn)用網(wǎng)絡(luò)資源實(shí)施在線教學(xué)，而在線直播課程因其鮮明的現(xiàn)場(chǎng)感和互動(dòng)特征，成為在線教學(xué)的主要形式。相對(duì)于傳統(tǒng)課堂教學(xué)，在線直播課程教學(xué)不僅僅是教學(xué)場(chǎng)地的變化，同時(shí)也在教師的教學(xué)形式、學(xué)生的學(xué)習(xí)方式和師生互動(dòng)等方面產(chǎn)生巨大變革。直播課程的教學(xué)效果如何，是否滿足學(xué)生的需要，直播課程影響因素有哪些，如何評(píng)價(jià)在線直播課程教學(xué)質(zhì)量等，都是教育教學(xué)工作者需要關(guān)注的問(wèn)題。基于此，本文從學(xué)習(xí)者體驗(yàn)的角度出發(fā)，探索在線直播課程的評(píng)價(jià)標(biāo)準(zhǔn)，為提升在線直播課程的教學(xué)效果提供思路和參考。

1? ? ? ?研究現(xiàn)狀

自網(wǎng)絡(luò)課程開(kāi)展以來(lái)，不少機(jī)構(gòu)、教育教學(xué)工作者以及技術(shù)工作者進(jìn)行相關(guān)的研究，以期取得更好的教學(xué)效果。歐洲遠(yuǎn)程教育大學(xué)協(xié)會(huì)（Europe? Association? of? ?Distance? Teaching? University，EADTU）制定的遠(yuǎn)程教育質(zhì)量標(biāo)準(zhǔn)，設(shè)計(jì)了35個(gè)質(zhì)量標(biāo)準(zhǔn)和若干觀測(cè)指標(biāo)，覆蓋了課程的設(shè)計(jì)、課程的傳送和學(xué)習(xí)者支持等六個(gè)維度［ 1 ］。美國(guó)“QM質(zhì)量標(biāo)準(zhǔn)”作為頗具影響力的網(wǎng)絡(luò)課程認(rèn)證標(biāo)準(zhǔn)，從課程介紹、課程活動(dòng)、學(xué)習(xí)者支持、評(píng)價(jià)與測(cè)量等八個(gè)維度對(duì)網(wǎng)絡(luò)課程的設(shè)計(jì)和建設(shè)進(jìn)行指導(dǎo)和評(píng)議［ 2 ］。我國(guó)早在2003年，教育部教育信息化技術(shù)標(biāo)準(zhǔn)委員會(huì)發(fā)布《網(wǎng)絡(luò)教育服務(wù)質(zhì)量管理體系規(guī)范》（CELTS-24），提出網(wǎng)絡(luò)教育服務(wù)質(zhì)量評(píng)價(jià)參考模型和量表，用以對(duì)網(wǎng)絡(luò)教育服務(wù)質(zhì)量進(jìn)行評(píng)估和規(guī)范。2018年中國(guó)國(guó)家標(biāo)準(zhǔn)化管理委員會(huì)和國(guó)家市場(chǎng)監(jiān)督管理總局發(fā)布《信息技術(shù)—學(xué)習(xí)、教育和培訓(xùn)在線課程》，提出在線課程的信息模型、評(píng)價(jià)模型和在線平臺(tái)運(yùn)營(yíng)的基本要求，用于指導(dǎo)在線課程的設(shè)計(jì)、建設(shè)和評(píng)價(jià)。2015年教育部印發(fā)《關(guān)于加強(qiáng)高等學(xué)校在線開(kāi)放課程建設(shè)應(yīng)用與管理的意見(jiàn)》，從建設(shè)、認(rèn)定、應(yīng)用和推廣等七個(gè)方面，明確在線開(kāi)放課程的建設(shè)任務(wù)和要求［ 3 ］。這些標(biāo)準(zhǔn)或規(guī)范為本文的研究提供了一定的理論借鑒和參考，但由于其主要圍繞在線課程的設(shè)計(jì)、開(kāi)發(fā)和實(shí)施，對(duì)直播課程缺乏針對(duì)性，且很少?gòu)膶W(xué)習(xí)者體驗(yàn)角度出發(fā)，不能反映學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)。

學(xué)習(xí)者是直播課程教學(xué)的直接參與者和主要體驗(yàn)者，學(xué)習(xí)者體驗(yàn)是衡量教學(xué)質(zhì)量的一個(gè)重要方面［ 4 ］。唐環(huán)環(huán)［ 5 ］基于貝恩特·施密特的五大用戶體驗(yàn)?zāi)Ｐ停瑥母泄袤w驗(yàn)、行為體驗(yàn)、情感體驗(yàn)、內(nèi)容體驗(yàn)和關(guān)聯(lián)體驗(yàn)五個(gè)維度，建立MOOC課程評(píng)價(jià)指標(biāo)體系。安哲鋒等［ 6 ］基于學(xué)習(xí)者體驗(yàn)視角，從學(xué)習(xí)內(nèi)容質(zhì)量、學(xué)習(xí)支持質(zhì)量、學(xué)習(xí)交互質(zhì)量、學(xué)習(xí)期望質(zhì)量和學(xué)習(xí)感知質(zhì)量五個(gè)維度，提出MOOC學(xué)習(xí)質(zhì)量模型。陳志華［ 7 ］認(rèn)為網(wǎng)絡(luò)課程作為一種教育產(chǎn)品，具有產(chǎn)品的特征，由此基于用戶體驗(yàn)角度，從網(wǎng)絡(luò)課程符合學(xué)習(xí)者的需求和對(duì)學(xué)習(xí)的支持等六個(gè)方面，構(gòu)建網(wǎng)絡(luò)課程有用性評(píng)價(jià)指標(biāo)體系。Ding? Gang等［ 8 ］基于模糊綜合評(píng)價(jià)法，從平臺(tái)設(shè)計(jì)合理性、平臺(tái)操作可用性、用戶學(xué)習(xí)滿意度三方面，建立網(wǎng)絡(luò)教學(xué)平臺(tái)用戶體驗(yàn)評(píng)價(jià)體系。這些研究從不同方面、運(yùn)用不同方法關(guān)注學(xué)習(xí)者體驗(yàn)，但多是圍繞錄播課程或針對(duì)網(wǎng)絡(luò)平臺(tái)建立評(píng)價(jià)指標(biāo)，對(duì)于線上直播課程，并不能完全適用。從學(xué)習(xí)者體驗(yàn)出發(fā)，緊密結(jié)合直播課程的特點(diǎn)，構(gòu)建符合直播課程特征的評(píng)價(jià)體系，是本文重點(diǎn)研究的內(nèi)容。

2? ? ? ? 在線直播課程評(píng)價(jià)指標(biāo)體系構(gòu)建

為構(gòu)建科學(xué)有效的評(píng)價(jià)指標(biāo)體系，綜合運(yùn)用文獻(xiàn)研究法、用戶訪談法和網(wǎng)絡(luò)研究法等多種方法，從理論和實(shí)踐兩方面確定指標(biāo)維度和指標(biāo)要素。采用調(diào)查問(wèn)卷和專(zhuān)家咨詢的方式對(duì)指標(biāo)進(jìn)行篩選和優(yōu)化，運(yùn)用層次分析法對(duì)指標(biāo)進(jìn)行定量分析并計(jì)算指標(biāo)權(quán)重。

2.1? ? ? ?構(gòu)建直播課程評(píng)價(jià)維度

學(xué)習(xí)體驗(yàn)是指學(xué)習(xí)者對(duì)學(xué)習(xí)過(guò)程和結(jié)果的感知和體驗(yàn)，包含學(xué)習(xí)認(rèn)知和學(xué)習(xí)情感雙重內(nèi)涵，關(guān)注學(xué)習(xí)者的實(shí)際感受。也有研究者認(rèn)為，教學(xué)交互、學(xué)習(xí)環(huán)境和學(xué)習(xí)支持是學(xué)習(xí)體驗(yàn)的重要組成部分［ 9 ］。

運(yùn)用文獻(xiàn)研究法，以“在線課程”“直播課程”“評(píng)價(jià)”“用戶體驗(yàn)”和“學(xué)習(xí)者體驗(yàn)”等關(guān)鍵詞作為限定條件展開(kāi)高級(jí)檢索，并對(duì)所搜集大量文獻(xiàn)中相關(guān)的指標(biāo)要素進(jìn)行梳理、篩選、分析、比較和匯總。對(duì)直播授課的一線教師和直播學(xué)習(xí)的學(xué)生進(jìn)行有準(zhǔn)備的問(wèn)題訪談，并對(duì)教師的授課體驗(yàn)和學(xué)生的學(xué)習(xí)體驗(yàn)進(jìn)行分析和整理。綜合文獻(xiàn)分析結(jié)果和直播參與者實(shí)際體驗(yàn)，結(jié)合貝恩特·施密特五大用戶體驗(yàn)?zāi)Ｐ停瑥膶W(xué)習(xí)者體驗(yàn)出發(fā)，針對(duì)直播課程在線教學(xué)的特點(diǎn)，初步構(gòu)建直播課程評(píng)價(jià)模型維度和指標(biāo)要素。

2.1.1? ? ? ?直播內(nèi)容體驗(yàn)度

直播內(nèi)容是直播課程的核心和前提，體現(xiàn)在直播教學(xué)內(nèi)容的選取、設(shè)計(jì)以及呈現(xiàn)等方面。在課程定位和目標(biāo)已經(jīng)明確的前提下，合理選取、設(shè)計(jì)和組織教學(xué)內(nèi)容，才能從根本上激發(fā)學(xué)習(xí)者的學(xué)習(xí)愿望和興趣，滿足其學(xué)習(xí)需求，讓學(xué)習(xí)者感受課程學(xué)習(xí)的價(jià)值。參考國(guó)內(nèi)外相關(guān)標(biāo)準(zhǔn)，結(jié)合直播課程特點(diǎn)，提取準(zhǔn)確性、實(shí)用性、遞進(jìn)性、前沿性、多樣性、趣味性和文化性七個(gè)指標(biāo)。

2.1.2? ? ? ?直播課堂體驗(yàn)度

直播課堂顛覆了傳統(tǒng)線下課堂面對(duì)面的互動(dòng)模式，學(xué)生僅以網(wǎng)絡(luò)在線的方式參與教學(xué)活動(dòng)，教師也無(wú)法直觀地感知學(xué)生的課堂反應(yīng)。高質(zhì)量的課堂活動(dòng)可以促進(jìn)學(xué)生主動(dòng)參與和積極表現(xiàn)的愿望，從而激發(fā)學(xué)生的認(rèn)知和情感。課堂交互形式和教師對(duì)課堂活動(dòng)的組織都是影響課堂的關(guān)鍵因素。根據(jù)在線直播課堂的特點(diǎn)，提取清晰性、互動(dòng)性、啟發(fā)性、多元性、及時(shí)性、恰當(dāng)性六個(gè)指標(biāo)。

2.1.3? ? ? ?直播平臺(tái)體驗(yàn)度

直播平臺(tái)是直播課程的載體，為直播提供技術(shù)支持和服務(wù)，是直播課程能否正常開(kāi)展的基本條件和重要保障。直播平臺(tái)的技術(shù)性、功能性和可靠性等都對(duì)用戶是否愿意、持續(xù)使用平臺(tái)軟件產(chǎn)生直接影響。平臺(tái)的用戶體驗(yàn)是直播課程體驗(yàn)的一部分，從直播平臺(tái)的一般性特點(diǎn)和對(duì)課程教學(xué)的支持角度，提取易操作性、穩(wěn)定性、兼容性、合理性、交互性、可訪問(wèn)性、及時(shí)性、美學(xué)性八個(gè)指標(biāo)。

2.1.4? ? ? ?直播情感體驗(yàn)度

直播情感體驗(yàn)度是學(xué)習(xí)者對(duì)直播學(xué)習(xí)的過(guò)程和結(jié)果情感的綜合體驗(yàn)。由線下課程轉(zhuǎn)為直播教學(xué)，學(xué)習(xí)者能否適應(yīng)直播教學(xué)、是否樂(lè)于參與直播課程活動(dòng)以及課程學(xué)習(xí)的成就感和興趣度，都是直播情感體驗(yàn)度的關(guān)鍵指標(biāo)，據(jù)此本維度提取適應(yīng)性、參與性、成就感、興趣度四個(gè)指標(biāo)。

2.2? ? ? ? 評(píng)價(jià)指標(biāo)的篩選和優(yōu)化

指標(biāo)的篩選和優(yōu)化采用調(diào)查問(wèn)卷和專(zhuān)家咨詢相結(jié)合的方式。問(wèn)卷方面，為了既保證指標(biāo)的科學(xué)性和合理性，又能充分反應(yīng)學(xué)習(xí)者對(duì)指標(biāo)的意見(jiàn)，問(wèn)卷對(duì)象分別選取兼具教研水平和直播教學(xué)經(jīng)驗(yàn)的高校教師，以及具有直播學(xué)習(xí)實(shí)際經(jīng)驗(yàn)的高職學(xué)生。針對(duì)初定的4個(gè)一級(jí)指標(biāo)和24個(gè)二級(jí)指標(biāo)，編制“在線直播課程學(xué)習(xí)者體驗(yàn)影響因素”調(diào)查問(wèn)卷，對(duì)每項(xiàng)指標(biāo)進(jìn)行“十分明確”“明確” “不一定”“不明確”和“十分不明確”5個(gè)選項(xiàng)的區(qū)分，對(duì)應(yīng)分?jǐn)?shù)分別為5、4、3、2、1。如對(duì)指標(biāo)“不一定”“不明確”或“十分不明確”，需要給出相應(yīng)的修改意見(jiàn)。問(wèn)卷結(jié)果顯示，一級(jí)指標(biāo)明確度評(píng)分均在4分以上，表示基本認(rèn)同，而對(duì)二級(jí)指標(biāo)，結(jié)合專(zhuān)家咨詢反饋，提出以下修改意見(jiàn)：

一是刪除針對(duì)性不強(qiáng)的指標(biāo)。如“直播內(nèi)容體驗(yàn)度”中的“文化性”指標(biāo)，具有一定的學(xué)科偏向，且屬于不太重要的指標(biāo)，建議刪除。“直播平臺(tái)體驗(yàn)度”中的“流暢性”指標(biāo)，一般多用以描述網(wǎng)絡(luò)傳輸質(zhì)量，對(duì)直播平臺(tái)性能方面表述指代性不強(qiáng)，建議刪除。

二是指標(biāo)概念劃分太細(xì)，需要精簡(jiǎn)合并。如“直播平臺(tái)體驗(yàn)度”中“合理性”“交互性”和“可訪問(wèn)性”均屬于平臺(tái)功能方面的展開(kāi)描述，三者可合并調(diào)整為“完備性”。

三是指標(biāo)描述不當(dāng)，易引起歧義。如“直播課堂體驗(yàn)度”中的“多元性”是指對(duì)學(xué)生進(jìn)行多元評(píng)價(jià)，僅用以闡述評(píng)價(jià)方式多樣性，側(cè)重過(guò)程，不能反映評(píng)價(jià)結(jié)果，應(yīng)改為“客觀性”，強(qiáng)調(diào)評(píng)價(jià)結(jié)果的公正性。“恰當(dāng)性”指代的內(nèi)容范圍太寬泛，語(yǔ)義不明確，改為“調(diào)控性”，特指教學(xué)過(guò)程的有效調(diào)控。“直播平臺(tái)體驗(yàn)度”的“及時(shí)性”表述不當(dāng)，且易混淆，改為“容錯(cuò)性”，表示平臺(tái)對(duì)于學(xué)習(xí)者錯(cuò)誤操作，能及時(shí)給出反饋信息和操作指引。

綜合上述意見(jiàn)，對(duì)原有指標(biāo)體系進(jìn)行修改和優(yōu)化，確立第二輪指標(biāo)體系如表1所示。

由上述數(shù)據(jù)可以看出，在一級(jí)指標(biāo)中，“B1直播內(nèi)容體驗(yàn)度”權(quán)重最大，即直播內(nèi)容在直播課程體驗(yàn)中占據(jù)最重要的位置，其次是“B2直播課堂體驗(yàn)度”。在二級(jí)指標(biāo)中，“B22互動(dòng)性”占據(jù)最重要位置，其次是“B11準(zhǔn)確性”“B12實(shí)用性”“B31易操作性”和“B21清晰性”。

3? ? 評(píng)價(jià)指標(biāo)體系的檢驗(yàn)和應(yīng)用

3.1? ? 評(píng)價(jià)指標(biāo)體系的相關(guān)性分析

Pearson相關(guān)性分析用于衡量元素間是相關(guān)的還是獨(dú)立的［ 11 ］。相關(guān)系數(shù)為0.6～0.8為強(qiáng)相關(guān)，而大于等于0.8，則意味著兩元素存在極強(qiáng)相關(guān)性，一般需要修改或刪除。再次運(yùn)用SPSS對(duì)指標(biāo)數(shù)據(jù)進(jìn)行相關(guān)性分析得出，“清晰性”與“及時(shí)性”（相關(guān)系數(shù)0.717），“啟發(fā)性”與“趣味性”（相關(guān)系數(shù)0.621），“完備性”與“美學(xué)性”（相關(guān)系數(shù)0.625），雖然存在重疊部分，但22個(gè)指標(biāo)的相關(guān)系數(shù)值均小于0.8，說(shuō)明指標(biāo)仍具有較好的獨(dú)立性。

3.2? ? 評(píng)價(jià)指標(biāo)體系的信度和效度檢驗(yàn)

信度和效度校驗(yàn)分別檢測(cè)指標(biāo)的可靠性和合理性。使用Cronbachs α系數(shù)作為可靠性測(cè)試值，值越大，表示指標(biāo)的內(nèi)在一致性越高，即越可靠，如果低于0.6，則表示信度不理想，需要修改問(wèn)題項(xiàng)［ 12 ］。經(jīng)測(cè)試，系數(shù)α為0.827，表示指標(biāo)信度不錯(cuò)，可以使用。采用因子分析方法進(jìn)行效度分析，Kaiser-Meyer-Olkin（KMO）值為0.729，大于0.6，符合因子分析要求。Bartlett球形度檢驗(yàn)顯著值為0.000，小于0.05，22個(gè)指標(biāo)的4個(gè)因子累積方差貢獻(xiàn)率為68.331%，問(wèn)題項(xiàng)與因子的對(duì)應(yīng)關(guān)系沒(méi)有嚴(yán)重偏差，表示指標(biāo)效度符合要求。

3.3? ? 評(píng)價(jià)指標(biāo)體系的應(yīng)用

3.3.1? ? 評(píng)價(jià)指標(biāo)體系的應(yīng)用過(guò)程

為進(jìn)一步驗(yàn)證評(píng)價(jià)指標(biāo)體系的可操作性，應(yīng)用該評(píng)價(jià)指標(biāo)體系制作問(wèn)卷，對(duì)在線直播課程進(jìn)行評(píng)價(jià)。共設(shè)計(jì)問(wèn)卷題目23個(gè)，前面22個(gè)題目運(yùn)用已構(gòu)建的22個(gè)評(píng)價(jià)指標(biāo)，分別從直播內(nèi)容、直播課堂、直播平臺(tái)和直播情感四個(gè)方面對(duì)直播課程進(jìn)行相應(yīng)評(píng)價(jià)。問(wèn)卷題目采用客觀單選題方式，選項(xiàng)采用李克特式五級(jí)量表，從5到1依次表示“非常滿意”到“非常不滿意”五個(gè)等級(jí)。將問(wèn)卷每項(xiàng)指標(biāo)得分Bij與該指標(biāo)總層次權(quán)重Pn相乘，并將各項(xiàng)指標(biāo)評(píng)價(jià)結(jié)果相加，得出單份問(wèn)卷評(píng)價(jià)得分，即：

Σ指標(biāo)分值Bij × 指標(biāo)權(quán)重Pn，n = 1，2，3，…，22

問(wèn)卷最后1題，采用主觀簡(jiǎn)答題的方式，要求學(xué)習(xí)者報(bào)告主觀學(xué)習(xí)體驗(yàn)并闡述理由，以便驗(yàn)證學(xué)習(xí)者的偏好程度與指標(biāo)結(jié)果是否一致，為指標(biāo)的進(jìn)一步完善提供依據(jù)。

選取問(wèn)卷對(duì)象為本校大一下學(xué)期兩個(gè)批次班級(jí)學(xué)生共96名，參與評(píng)價(jià)的這部分學(xué)生該學(xué)期因地方突發(fā)疫情，所有課程隨即轉(zhuǎn)為線上直播，對(duì)直播課程學(xué)習(xí)有直接而深刻的實(shí)際體驗(yàn)。

3.3.2? ? 評(píng)價(jià)指標(biāo)體系的應(yīng)用及分析

首次選取問(wèn)卷對(duì)象為非計(jì)算機(jī)類(lèi)專(zhuān)業(yè)班級(jí)學(xué)習(xí)者52名。選取直播平臺(tái)為“超星課堂”，選取課程為“信息技術(shù)”。向52名學(xué)習(xí)者發(fā)放試卷，回收有效問(wèn)卷52份，計(jì)算“信息技術(shù)”直播課程總體得分為4.012，表示學(xué)生對(duì)該門(mén)直播課程總體是滿意的。由于二級(jí)指標(biāo)的評(píng)分?jǐn)?shù)據(jù)更能直觀反映優(yōu)缺點(diǎn)，分析二級(jí)單項(xiàng)指標(biāo)項(xiàng)得分發(fā)現(xiàn)，B11準(zhǔn)確性、B21清晰性、B33兼容性評(píng)分相對(duì)較高，表明學(xué)習(xí)者對(duì)課程內(nèi)容準(zhǔn)確性、課堂教學(xué)清晰性以及平臺(tái)兼容性方面滿意度較高，而B(niǎo)22互動(dòng)性，B31易操作性和B44興趣度評(píng)分相對(duì)較低，表明該課程直播課堂互動(dòng)性不夠，“超星課堂”平臺(tái)的易操作性方面體驗(yàn)欠佳，學(xué)生的學(xué)習(xí)興趣度有待提高，均一定程度地影響了學(xué)習(xí)者的直播學(xué)習(xí)體驗(yàn)。

為進(jìn)一步驗(yàn)證指標(biāo)在不同專(zhuān)業(yè)和不同課程中的合理性和適用范圍，進(jìn)行第二次問(wèn)卷發(fā)放，發(fā)放對(duì)象為計(jì)算機(jī)類(lèi)專(zhuān)業(yè)班級(jí)44名學(xué)習(xí)者，選取直播平臺(tái)為“超星課堂”，選取課程為專(zhuān)業(yè)課程“網(wǎng)頁(yè)設(shè)計(jì)與制作”。問(wèn)卷結(jié)果顯示，該直播課程總體得分為4.326。分析二級(jí)指標(biāo)發(fā)現(xiàn)，B12實(shí)用性、B22互動(dòng)性、B41適應(yīng)性評(píng)分較高，表明學(xué)生對(duì)課程內(nèi)容實(shí)用性、課堂互動(dòng)性和直播適應(yīng)性體驗(yàn)良好，而B(niǎo)32穩(wěn)定性和B34完備性評(píng)分相對(duì)較低，學(xué)生的主觀體驗(yàn)報(bào)告認(rèn)為直播平臺(tái)有遭遇卡頓、操作不流暢情形，且在資源訪問(wèn)方面不夠便捷。

上述指標(biāo)評(píng)價(jià)結(jié)果與通過(guò)課程訪談、線上調(diào)查以及問(wèn)題報(bào)道等途徑收集的學(xué)習(xí)者關(guān)于直播課程的反饋基本一致，表明該評(píng)價(jià)指標(biāo)具有一定的可行性和適用性。一級(jí)指標(biāo)四個(gè)維度能夠較客觀、全面地反映直播課程不同方面對(duì)學(xué)習(xí)者體驗(yàn)的影響。而在二級(jí)指標(biāo)上，對(duì)于不同的專(zhuān)業(yè)和課程，學(xué)習(xí)者對(duì)于直播課體驗(yàn)的側(cè)重點(diǎn)也會(huì)有所不同，如非計(jì)算機(jī)類(lèi)專(zhuān)業(yè)學(xué)生對(duì)直播平臺(tái)的易操作性比較關(guān)注，而計(jì)算機(jī)類(lèi)專(zhuān)業(yè)學(xué)生對(duì)于直播平臺(tái)資源可訪問(wèn)性要求更高。

4? ? 結(jié)語(yǔ)

在疫情防控常態(tài)化形式下，在線直播課程在高職院校數(shù)字化教學(xué)中得到快速應(yīng)用和推廣。直播課程不同于MOOC和精品課程類(lèi)在線課程，其異地同步教學(xué)的方式，使其既兼具在線課程和線下課堂的部分特征，又與兩者不完全相同，需要建立符合直播課程特點(diǎn)的課程評(píng)價(jià)方式。本文基于學(xué)習(xí)者體驗(yàn)視角，提出從直播內(nèi)容、直播課堂、直播平臺(tái)和直播情感四個(gè)維度，評(píng)價(jià)在線直播課程質(zhì)量，突出學(xué)習(xí)者的主體地位，重視學(xué)習(xí)者的體驗(yàn)和需求，更利于提高教學(xué)滿意度。應(yīng)用本文構(gòu)建的評(píng)價(jià)指標(biāo)體系，可以對(duì)高職院校直播課程教學(xué)進(jìn)行評(píng)價(jià)，其不同維度指標(biāo)能夠直觀體現(xiàn)和描述直播教學(xué)效果的影響因素，從而發(fā)現(xiàn)直播課程教學(xué)的不足，明確改進(jìn)和提升的方向。

本文的研究尚存在不足之處：一方面，由于直播課程學(xué)習(xí)質(zhì)量評(píng)價(jià)的研究尚處于探索階段，相關(guān)的標(biāo)準(zhǔn)仍在不斷完善，后續(xù)還需結(jié)合新的理論和標(biāo)準(zhǔn)進(jìn)一步完善評(píng)價(jià)指標(biāo)。另一方面，在確定權(quán)重時(shí)，雖然運(yùn)用層次分析法盡量做到科學(xué)，但由于調(diào)查范圍和分析方法的有限，指標(biāo)仍帶有一定的主觀性，可通過(guò)擴(kuò)大調(diào)查者范圍并采用德?tīng)柗品ê蛯哟畏治龇ㄏ嘟Y(jié)合的方式，增加指標(biāo)的科學(xué)性。另外，后期可以根據(jù)直播課程內(nèi)容所屬的專(zhuān)業(yè)領(lǐng)域特征進(jìn)一步完善指標(biāo)體系，以提高課程評(píng)價(jià)的針對(duì)性。隨著直播課程的普及和推廣，相應(yīng)的實(shí)踐和理論都將更加科學(xué)化、規(guī)范化、深入化，學(xué)習(xí)者的直播課程體驗(yàn)也將不斷提升。

參考文獻(xiàn)：

［1］ 劉紹英.廣西開(kāi)放大學(xué)教學(xué)質(zhì)量標(biāo)準(zhǔn)構(gòu)建研究［J］.廣西廣播電視大學(xué)學(xué)報(bào)，2020，31（4）：5-12.

［2］ 潘曉彥，蔣家瓊，莫蘭，等.美國(guó)“QM質(zhì)量標(biāo)準(zhǔn)”與我國(guó)“精品在線開(kāi)放課程”評(píng)價(jià)指標(biāo)體系比較研究［J］.湖南師范大學(xué)教育科學(xué)學(xué)報(bào)，2019，18（3）：105-110.

［3］ 聶建峰，蔡佳林，徐娜.我國(guó)高校在線開(kāi)放課程建設(shè)與應(yīng)用的問(wèn)題分析和改進(jìn)策略［J］.國(guó)家教育行政學(xué)院學(xué)報(bào)，2020（4）：60-65.

［4］ 劉斌，張文蘭.在線課程學(xué)習(xí)體驗(yàn)的影響因素及其結(jié)構(gòu)研究［J］.現(xiàn)代教育技術(shù)，2017，27（9）：107-113.

［5］ 唐環(huán)環(huán).基于用戶體驗(yàn)的大規(guī)模開(kāi)放在線課程評(píng)價(jià)研究［D］.杭州：寧波大學(xué)，2017.

［6］ 安哲鋒，張峰峰.MOOC學(xué)習(xí)質(zhì)量立體模型的構(gòu)建研究——基于學(xué)習(xí)者體驗(yàn)視角的研究［J］.成人教育，2018，38（6）：18-23.

［7］ 陳志華.基于用戶體驗(yàn)的網(wǎng)絡(luò)課程有用性評(píng)價(jià)指標(biāo)體系設(shè)計(jì)與應(yīng)用［D］.北京：首都師范大學(xué)，2014.

［8］ Ding Gang，Wei Lihong，Cao Danyang，et al. User experience evaluation of service platform for online courses based on fuzzy comprehensive evaluation method——the user experience of “machine principles” as an example［J］. Science Innovation， 2018， 6（2）：97-97.

［9］ 劉妍，張?zhí)扃?設(shè)計(jì)思維視角下的學(xué)習(xí)體驗(yàn)設(shè)計(jì)［J］.上海教育，2022（6）：12-14.

［10］ 成先娟.不確定型層次分析法排序方法的研究［D］.南寧：廣西大學(xué)，2006.

［11］ 程娟娟.高校科研與教學(xué)關(guān)系實(shí)證研究——基于皮爾遜相關(guān)系數(shù)的分析［J］.中國(guó)高校科技，2022（10）：46-52.

［12］ 王淑華.漢字應(yīng)用水平測(cè)試信度和效度研究——以上海市2012和2015年測(cè)試為例［J］.鹽城工學(xué)院學(xué)報(bào)（社會(huì)科學(xué)版），2022，35（4）：71-76.

［責(zé)任編輯：許立群］

On the Evaluation System of Online Live Courses

Based on Learner Experience

YE? Genmei

（Department of Software Engineering， Ma'anshan Teacher's College， Ma'anshan 243041， China）

Abstract：Practicing the concept of "learner centered"， the evaluation system of live course is constructed based on learner experience. The preliminary evaluation dimensions and indicators are constructed by using literature research， user interviews and network research. Indicators are further screened and optimized through questionnaire investigations. Then the weight of indicators is calculated by using the analytic hierarchy process， and the rationality of indicators is verified by combining correlation analysis and reliability and validity checks. Finally， the practical application is carried out in combination with specific courses. From the practical application effect， the evaluation results of indicators are basically consistent with the direct feedback from learners. It indicates that the indicators are reasonable and operable. By applying this indicator system to evaluate live courses， we can find the shortages of the live courses， improve the learners live learning experience and enhance the teaching effect.

Key words：learner experience；online live course；evaluation indicator；analytic hierarchy process

收稿日期：2022-11-12

基金項(xiàng)目：安徽省高校優(yōu)秀青年人才支持計(jì)劃項(xiàng)目（gxyq2021264）；安徽省質(zhì)量工程項(xiàng)目（2020kfkc541）

作者簡(jiǎn)介：葉根梅（1982-），女，安徽桐城人，馬鞍山師范高等專(zhuān)科學(xué)校副教授，碩士，主要研究方向：軟件技術(shù)及教學(xué)研究。