劉邦奇 喻彥琨 袁婷婷
智能技術(shù)賦能過程評價(jià):目標(biāo)、路徑與典型場景
劉邦奇1,2喻彥琨2袁婷婷2
(1.西北師范大學(xué) 教育技術(shù)學(xué)院,甘肅蘭州 730071;2.訊飛教育技術(shù)研究院,安徽合肥 230088)
強(qiáng)化過程評價(jià),是深化新時(shí)代教育評價(jià)改革的重要舉措。而利用智能技術(shù)進(jìn)行過程評價(jià)數(shù)據(jù)采集、挖掘教育數(shù)據(jù)價(jià)值、加強(qiáng)反饋與調(diào)控,已成為新時(shí)代強(qiáng)化過程評價(jià)的重要驅(qū)動力。基于此,文章在闡述新時(shí)代過程評價(jià)內(nèi)涵、特點(diǎn)及存在問題的基礎(chǔ)上,首先對智能技術(shù)賦能過程評價(jià)的作用進(jìn)行了分析。隨后,文章提出智能技術(shù)賦能過程評價(jià)的目標(biāo)定位主要包括智能化評價(jià)數(shù)據(jù)獲取、智能化評價(jià)數(shù)據(jù)處理、智能化評價(jià)反饋調(diào)控,并從基礎(chǔ)支撐層、平臺服務(wù)層、場景應(yīng)用層三個(gè)層面闡釋了其實(shí)踐路徑。最后,文章從場景應(yīng)用層的全過程伴隨式數(shù)據(jù)采集、多模態(tài)數(shù)據(jù)診斷分析、實(shí)時(shí)反饋與調(diào)控等三個(gè)環(huán)節(jié),結(jié)合相關(guān)典型案例展開了實(shí)踐探討。文章的研究可為廣大一線教師和研究者理解智能技術(shù)賦能過程評價(jià)的特點(diǎn)與規(guī)律,并運(yùn)用智能技術(shù)強(qiáng)化過程評價(jià)、促進(jìn)教育評價(jià)改革與創(chuàng)新發(fā)展提供參考。
智能技術(shù);過程評價(jià);技術(shù)賦能;評價(jià)反饋

2020年,中共中央、國務(wù)院在《深化新時(shí)代教育評價(jià)改革總體方案》中明確提出要“堅(jiān)持科學(xué)有效,改進(jìn)結(jié)果評價(jià),強(qiáng)化過程評價(jià),探索增值評價(jià),健全綜合評價(jià),充分利用信息技術(shù),提高教育評價(jià)的科學(xué)性、專業(yè)性、客觀性”[1]。2021年,教育部在《義務(wù)教育質(zhì)量評價(jià)指南》《普通高中學(xué)校辦學(xué)質(zhì)量評價(jià)指南》中也進(jìn)一步指出要“強(qiáng)化過程性評價(jià)和發(fā)展性評價(jià)”[2][3]。可見,過程評價(jià)作為教育評價(jià)體系的重要組成部分,已成為智能時(shí)代評價(jià)改革創(chuàng)新的重要突破口。邁入智能時(shí)代,大數(shù)據(jù)、人工智能等智能技術(shù)開始延伸至教育教學(xué)評價(jià)領(lǐng)域,這為更好地實(shí)施過程評價(jià)、提升評價(jià)效果提供了有力支撐。但如何真正發(fā)揮智能技術(shù)的特點(diǎn)和優(yōu)勢以改進(jìn)、強(qiáng)化過程評價(jià),依然是當(dāng)前學(xué)界討論的重點(diǎn)。為此,本研究從過程評價(jià)的特點(diǎn)及其存在的問題出發(fā),系統(tǒng)探討智能技術(shù)賦能過程評價(jià)的作用、目標(biāo)定位與實(shí)踐路徑,并對過程評價(jià)典型場景中的技術(shù)應(yīng)用進(jìn)行梳理分析,以期為推進(jìn)有中國特色的評價(jià)改革與創(chuàng)新發(fā)展提供參考。
過程評價(jià)是對評價(jià)對象在向終極目標(biāo)邁進(jìn)的過程中所處狀態(tài)進(jìn)行的價(jià)值判斷[4],通過強(qiáng)調(diào)過程的價(jià)值,關(guān)注被評價(jià)對象習(xí)得過程的評估與測量,并使評價(jià)診斷和即時(shí)反饋貫穿于教學(xué)全過程,從而實(shí)現(xiàn)以評促學(xué)、以評促教的目的。過程評價(jià)具有動態(tài)性、診斷性、即時(shí)性的特點(diǎn):動態(tài)性是指過程評價(jià)是與教學(xué)過程同時(shí)進(jìn)行的共時(shí)性評價(jià),要求隨著事物發(fā)展的變化與評價(jià)目標(biāo)的調(diào)整,對評價(jià)指標(biāo)、內(nèi)容進(jìn)行動態(tài)調(diào)整;診斷性是指利用內(nèi)容分析、預(yù)測分析、系統(tǒng)建模等智能技術(shù),對師生在教學(xué)過程中產(chǎn)生的各項(xiàng)實(shí)時(shí)數(shù)據(jù)進(jìn)行客觀、科學(xué)的診斷分析;即時(shí)性是指在教學(xué)活動過程中,強(qiáng)調(diào)通過即時(shí)的評價(jià)反饋,使評價(jià)對象能夠及時(shí)了解評價(jià)結(jié)果,促進(jìn)自我反思和總結(jié),并能根據(jù)發(fā)現(xiàn)的問題加以改進(jìn)和調(diào)控。
針對傳統(tǒng)評價(jià)僅關(guān)注靜態(tài)、可量化和淺層次學(xué)習(xí)效果的弊端,過程評價(jià)提倡將師生在教學(xué)活動過程中產(chǎn)生的全部信息一并納入評價(jià)范圍。但在實(shí)施過程中,依然存在不少問題阻礙過程評價(jià)的效果達(dá)成,主要體現(xiàn)為:①過程數(shù)據(jù)采集較為單一、分散且粗放。片段式的單一記錄,難以精準(zhǔn)把握教學(xué)活動的整體情況。即使是通過課堂觀察量表采集數(shù)據(jù),也會由于過程數(shù)據(jù)片段、零散,最終導(dǎo)致課堂中的特性問題被模糊,使得教師難以達(dá)到整體感知課堂教學(xué)的目的[5]。②過程評價(jià)實(shí)踐操作難度較大。當(dāng)前,過程評價(jià)多通過制定相關(guān)觀察量表與標(biāo)準(zhǔn),或借鑒已有的課堂互動分析系統(tǒng),對教師課堂評價(jià)行為及其效果進(jìn)行量化分析[6],而多模態(tài)數(shù)據(jù)類型龐雜、評價(jià)衡量指標(biāo)不一、即時(shí)評價(jià)缺失等問題依然是當(dāng)前過程評價(jià)實(shí)施中面臨的難題。③過程評價(jià)與教學(xué)過程融合要求較高。實(shí)時(shí)評價(jià)反饋既是過程評價(jià)的重要環(huán)節(jié),也是教學(xué)與評價(jià)融合的必然要求。但是,當(dāng)前的過程評價(jià)不能長周期地收集并記錄課程作業(yè)、單元練習(xí)、課堂活動等多方面的過程數(shù)據(jù),并對評價(jià)與教學(xué)進(jìn)行統(tǒng)整[7],難以有效地發(fā)揮過程評價(jià)對教學(xué)活動的診斷、調(diào)節(jié)作用。
綜上所述,如何確保評價(jià)數(shù)據(jù)采集完整、采取有效手段降低實(shí)踐操作難度、及時(shí)反饋評價(jià)結(jié)果和調(diào)整教學(xué)策略,以最大程度地發(fā)揮過程評價(jià)的作用,成為了教育工作者實(shí)施過程評價(jià)亟待解決的問題。而新興技術(shù)在促進(jìn)教育教學(xué)評價(jià)方式創(chuàng)新上發(fā)揮了重要作用[8],物聯(lián)網(wǎng)、大數(shù)據(jù)和人工智能等智能技術(shù)的發(fā)展為強(qiáng)化過程評價(jià)、提升評價(jià)效能帶來了更多可能,完整的過程數(shù)據(jù)采集方法、即時(shí)的反饋分析工具等可為評價(jià)者實(shí)施過程評價(jià)提升技術(shù)支撐能力,為解決上述問題提供了切實(shí)可行的解決方案。
充分發(fā)揮智能技術(shù)優(yōu)勢,可以有效挖掘教學(xué)活動中的潛在數(shù)據(jù)價(jià)值,為教學(xué)過程數(shù)據(jù)采集、師生行為可視化分析、教學(xué)結(jié)果的個(gè)性化反饋等提供支撐,解決過程評價(jià)實(shí)施中的難題。本研究結(jié)合智能技術(shù)在過程評價(jià)中的優(yōu)勢與實(shí)際應(yīng)用效果,發(fā)現(xiàn)智能技術(shù)賦能過程評價(jià)的主要作用如下:
在智能技術(shù)的支持下,過程評價(jià)的實(shí)施可以通過充分獲取教育主體在教學(xué)活動全過程中的多維度信息,建立相關(guān)數(shù)據(jù)分析模型,以便評價(jià)者基于多維證據(jù)實(shí)施評價(jià)活動,從而輔助得出相關(guān)結(jié)論,擺脫因人的參與而受到的主觀經(jīng)驗(yàn)影響。同時(shí),數(shù)據(jù)決策在智能技術(shù)的支持下還可由機(jī)器擅長的數(shù)據(jù)驅(qū)動決策和人類擅長的數(shù)據(jù)啟發(fā)決策相互協(xié)同完成[9],通過將個(gè)人經(jīng)驗(yàn)判斷置于現(xiàn)有的最佳證據(jù)范圍內(nèi),便可依據(jù)數(shù)據(jù)“智慧”,同時(shí)結(jié)合專業(yè)人員的智慧和價(jià)值觀做出正確的決定[10]。在此基礎(chǔ)上,教師對學(xué)生的主觀感知印象也將轉(zhuǎn)變?yōu)榛谡鎸?shí)數(shù)據(jù)的客觀評價(jià),從而有效提升教學(xué)評價(jià)與決策的科學(xué)性和客觀性。
應(yīng)用數(shù)據(jù)監(jiān)測分析技術(shù)和智能設(shè)備,能夠有效實(shí)現(xiàn)從學(xué)校招生、培養(yǎng)規(guī)劃、課程實(shí)施、畢業(yè)就業(yè),到教、學(xué)、考、評、管各環(huán)節(jié)及課前、課中、課后全過程的海量數(shù)據(jù)伴隨式采集,覆蓋教育教學(xué)的各個(gè)階段和環(huán)節(jié)[11]。通過建立基于教學(xué)全過程的數(shù)據(jù)采集系統(tǒng),多源、異構(gòu)的動態(tài)生成性數(shù)據(jù)將被智能地獲取與分析。隨著產(chǎn)生的行為數(shù)據(jù)越來越多,數(shù)據(jù)分析結(jié)果的可靠性也會越來越高[12],將有效助力評價(jià)者打破以往數(shù)據(jù)分析僅停留在學(xué)習(xí)行為屬性本身而缺乏全過程關(guān)聯(lián)性分析的局面,從而最大限度地挖掘數(shù)據(jù)價(jià)值[13],提高評價(jià)的準(zhǔn)確性和有效性。
當(dāng)前,對教學(xué)過程中產(chǎn)生的多模態(tài)數(shù)據(jù)分析多依賴于專家的人工統(tǒng)計(jì)標(biāo)注或基于機(jī)器學(xué)習(xí)迭代完善的算法訓(xùn)練,存在融合深度低、數(shù)據(jù)間內(nèi)在關(guān)聯(lián)性不強(qiáng)、難以挖掘內(nèi)隱性特征等問題,不能準(zhǔn)確、全面地評價(jià)學(xué)習(xí)的程度與效果。但在正式學(xué)習(xí)情境中產(chǎn)生的學(xué)習(xí)行為數(shù)據(jù),大多具有多源異構(gòu)性、多層關(guān)聯(lián)性、多維互補(bǔ)性等特征[14]。智能技術(shù)的應(yīng)用,能使教學(xué)情境中產(chǎn)生的多模態(tài)學(xué)習(xí)行為數(shù)據(jù)被高效地整合、關(guān)聯(lián),并通過建模分析后得到表征、融合及反饋,以強(qiáng)化對學(xué)習(xí)者學(xué)習(xí)過程和結(jié)果的解釋與預(yù)測,有效解決了過程評價(jià)與教學(xué)活動融合不足、效果難以發(fā)揮等問題。
隨著智能技術(shù)在教育教學(xué)中的廣泛應(yīng)用,過程評價(jià)數(shù)據(jù)的實(shí)時(shí)傳送讓即時(shí)評價(jià)反饋成為必然選擇。評價(jià)反饋是過程評價(jià)的重要組成部分,反饋是否及時(shí)將直接影響過程評價(jià)的應(yīng)用成效。傳統(tǒng)課堂反饋機(jī)制缺乏對師生互動、學(xué)生學(xué)習(xí)思維過程的記錄,且反饋時(shí)間滯后,并不能為師生的教與學(xué)提供精準(zhǔn)、高效的即時(shí)反饋建議。而即時(shí)評價(jià)反饋可以及時(shí)、有效地促進(jìn)學(xué)習(xí)者建構(gòu)知識體系、改進(jìn)認(rèn)知策略、優(yōu)化目標(biāo)設(shè)置、調(diào)整學(xué)習(xí)策略,進(jìn)而提高學(xué)習(xí)效果和效率[15]。
大數(shù)據(jù)、人工智能等技術(shù)的發(fā)展,為智能化的數(shù)據(jù)采集、數(shù)據(jù)建模、可視化分析、個(gè)性化反饋等提供了有力支撐[16],但如何真正貫徹《深化新時(shí)代教育評價(jià)改革總體方案》要求,充分利用智能技術(shù)探索過程評價(jià)實(shí)踐,還需要深入具體的應(yīng)用場景來分析。智能技術(shù)賦能在過程評價(jià)數(shù)據(jù)的數(shù)智化決策、全過程采集、多模態(tài)分析和即時(shí)化反饋方面,形成了前所未有的優(yōu)勢,結(jié)合過程評價(jià)改革在全面獲取數(shù)據(jù)、深度挖掘價(jià)值、有效反饋調(diào)控的要求,本研究提出了智能技術(shù)賦能過程評價(jià)的目標(biāo)定位與實(shí)踐路徑。
智能技術(shù)賦能過程評價(jià)的本質(zhì)是對傳統(tǒng)過程評價(jià)的突破和創(chuàng)新,它是通過解構(gòu)、重構(gòu)形成有別于傳統(tǒng)的過程評價(jià)新模式[17]。通過智能技術(shù)對教學(xué)過程中產(chǎn)生的多維數(shù)據(jù)進(jìn)行分析與處理,可以為評價(jià)應(yīng)用提供智能化數(shù)據(jù)采集、分析、診斷、反饋、改進(jìn)等支撐,其目標(biāo)定位主要包括:①智能化評價(jià)數(shù)據(jù)獲取。過程評價(jià)的實(shí)施需要過程性數(shù)據(jù)的支撐,通過綜合運(yùn)用智能傳感器、信號處理技術(shù)、物聯(lián)網(wǎng)技術(shù)等可搭建過程數(shù)據(jù)采集所需的物理環(huán)境,以實(shí)現(xiàn)對教學(xué)過程數(shù)據(jù)的全過程實(shí)時(shí)采集與匯聚,使過程數(shù)據(jù)具有連續(xù)性、真實(shí)性、動態(tài)性的特點(diǎn)。②智能化評價(jià)數(shù)據(jù)處理。基于具體的評價(jià)問題,評價(jià)者可以通過對教學(xué)過程中產(chǎn)生的認(rèn)知、行為、情緒、動機(jī)等數(shù)據(jù)進(jìn)行多維度的診斷分析,了解學(xué)生的學(xué)習(xí)狀況和教師教學(xué)過程中存在的問題,并實(shí)現(xiàn)對教學(xué)活動更全面、系統(tǒng)的剖析與理解[18]。③智能化評價(jià)反饋調(diào)控。借助智能技術(shù),可對診斷分析后的數(shù)據(jù)進(jìn)行可視化結(jié)果呈現(xiàn)和實(shí)時(shí)反饋,教師依據(jù)反饋信息來改進(jìn)教學(xué),最終達(dá)到提升課堂教學(xué)效果的目的。
在過程評價(jià)實(shí)踐中,基于軟硬件智能基礎(chǔ)設(shè)施的支撐,可構(gòu)建智能化過程評價(jià)服務(wù)平臺,通過全過程伴隨式數(shù)據(jù)采集、多模態(tài)數(shù)據(jù)診斷分析、實(shí)時(shí)反饋與調(diào)控等技術(shù)應(yīng)用服務(wù),為智能技術(shù)賦能過程評價(jià)提供更為有效的實(shí)踐路徑,具體涉及三個(gè)層面(如圖1所示):①基礎(chǔ)支撐層。基礎(chǔ)支撐層是過程評價(jià)實(shí)施的重要基礎(chǔ),由硬件基礎(chǔ)設(shè)施和軟件基礎(chǔ)設(shè)施構(gòu)成。其中,硬件基礎(chǔ)設(shè)施提供過程評價(jià)實(shí)施的硬件支撐環(huán)境,如智能芯片、計(jì)算集群、智能傳感器可提供基礎(chǔ)數(shù)據(jù)收集、處理、分析等功能服務(wù);而軟件基礎(chǔ)設(shè)施提供實(shí)施過程評價(jià)的軟件支撐環(huán)境,如計(jì)算框架可提供基礎(chǔ)算力、算法模型等功能服務(wù),存儲系統(tǒng)可提供數(shù)據(jù)存儲、管理等數(shù)據(jù)服務(wù)等。②平臺服務(wù)層。平臺服務(wù)層是智能技術(shù)賦能過程評價(jià)實(shí)施的關(guān)鍵,為場景應(yīng)用提供智能化評價(jià)標(biāo)準(zhǔn)制定、數(shù)據(jù)獲取、數(shù)據(jù)處理、反饋調(diào)控等服務(wù)。③場景應(yīng)用層。場景應(yīng)用層為過程評價(jià)的實(shí)施提供基礎(chǔ)性、通用性、關(guān)鍵性的技術(shù)應(yīng)用服務(wù)——在全過程伴隨式數(shù)據(jù)采集環(huán)節(jié),通過原始數(shù)據(jù)的伴隨式采集和實(shí)時(shí)數(shù)據(jù)匯聚,可以實(shí)現(xiàn)教學(xué)數(shù)據(jù)智能采集、學(xué)習(xí)行為精準(zhǔn)記錄、管理數(shù)據(jù)集中存儲等功能,從而為學(xué)校的管理決策、教師的教學(xué)、學(xué)生的學(xué)習(xí)等提供數(shù)據(jù)支撐服務(wù);在多模態(tài)數(shù)據(jù)診斷分析環(huán)節(jié),借助智能技術(shù)對多模態(tài)數(shù)據(jù)進(jìn)行數(shù)據(jù)融合與數(shù)據(jù)分析,能夠衡量、診斷學(xué)生或教師的能力發(fā)展情況,進(jìn)而輔助評價(jià)者解釋評價(jià)數(shù)據(jù)并做出相應(yīng)的結(jié)果判斷或預(yù)測;在實(shí)時(shí)反饋與調(diào)控環(huán)節(jié),通過實(shí)時(shí)傳送、實(shí)時(shí)反饋、實(shí)時(shí)干預(yù)等智能技術(shù)應(yīng)用,能夠?qū)?shù)據(jù)分析結(jié)果以可視化的形式即時(shí)反饋、呈現(xiàn),并實(shí)現(xiàn)由單一文本的事后反饋向融合文本、語音、圖片、視頻等方式的多樣化實(shí)時(shí)反饋轉(zhuǎn)變,進(jìn)而提供精準(zhǔn)化的診斷反饋信息。

圖1 智能技術(shù)賦能過程評價(jià)的實(shí)踐路徑
智能技術(shù)賦能過程評價(jià)需在實(shí)踐中解決關(guān)鍵問題并找到合適的技術(shù)應(yīng)用點(diǎn),才能真正體現(xiàn)其價(jià)值與意義。基于此,本研究從場景應(yīng)用層的全過程伴隨式數(shù)據(jù)采集、多模態(tài)數(shù)據(jù)診斷分析、實(shí)時(shí)反饋與調(diào)控三個(gè)環(huán)節(jié),結(jié)合相關(guān)典型案例,對智能技術(shù)賦能過程評價(jià)的具體實(shí)踐展開探討。
基于智能技術(shù)進(jìn)行伴隨式數(shù)據(jù)采集可追蹤師生教與學(xué)的全過程,并給予診斷與反饋,主要涉及以下兩大關(guān)鍵場景:①原始數(shù)據(jù)的伴隨式采集。將數(shù)據(jù)從各個(gè)數(shù)據(jù)源采集后匯聚到數(shù)據(jù)存儲和處理平臺,為數(shù)據(jù)的存儲和預(yù)處理提供了基本的數(shù)據(jù)來源,采集的數(shù)據(jù)主要包括可以表征評價(jià)對象心理、行為、生理等多模態(tài)的數(shù)據(jù)。通過平臺自主生成、物聯(lián)感知、智能穿戴等智能手段采集的生理數(shù)據(jù)與體征數(shù)據(jù),可以有效表征評價(jià)對象的學(xué)習(xí)情感、生理和認(rèn)知[19]。②實(shí)時(shí)數(shù)據(jù)匯聚。對采集的原始數(shù)據(jù)進(jìn)行必要的規(guī)范化處理和實(shí)時(shí)性傳輸,包括進(jìn)行數(shù)據(jù)清洗、數(shù)據(jù)變換等一系列處理工作,以提高數(shù)據(jù)質(zhì)量,并使之符合數(shù)據(jù)分析規(guī)范要求;之后,按照既定流程,通過數(shù)據(jù)鏈,將數(shù)據(jù)從數(shù)據(jù)源實(shí)時(shí)傳輸?shù)綌?shù)據(jù)中心。全過程伴隨式數(shù)據(jù)采集環(huán)節(jié)的技術(shù)應(yīng)用舉例如表1所示。

表1 全過程伴隨式數(shù)據(jù)采集環(huán)節(jié)的技術(shù)應(yīng)用舉例
智能技術(shù)的發(fā)展為全過程伴隨式數(shù)據(jù)采集的兩大應(yīng)用場景提供了重要支撐,為解決課堂教學(xué)中數(shù)據(jù)的伴隨式采集提供了高效的方法。例如,安徽省合肥市某高級中學(xué)利用采集的學(xué)生在體育鍛煉過程中產(chǎn)生的數(shù)據(jù)輔助體育教師精準(zhǔn)教學(xué),促進(jìn)了傳統(tǒng)體育教學(xué)向新型智慧體育教學(xué)模式的轉(zhuǎn)變。圖2展示了該校高二年級二班某學(xué)生完成立定跳遠(yuǎn)測試后,依托智能技術(shù)實(shí)時(shí)記錄的測試成績、擺臂幅度、屈膝角、關(guān)鍵動作截圖、完整測試視頻等,可以看出:該學(xué)生的立定跳遠(yuǎn)測試成績?yōu)?25.2厘米,測試成績?yōu)榧案瘢珨[臂幅度較小,影響了跳遠(yuǎn)水平的發(fā)揮。系統(tǒng)對學(xué)生的立定跳遠(yuǎn)動作進(jìn)行分析后,給出了擺臂幅度較小的點(diǎn)評,建議該學(xué)生多練習(xí)下蹲擺臂動作,調(diào)整擺臂幅度接近110°為止;適當(dāng)減小屈膝角度至90°左右,增加起跳時(shí)的爆發(fā)力。學(xué)生可依據(jù)分析點(diǎn)評,在教師的科學(xué)指導(dǎo)下及時(shí)調(diào)整動作,以達(dá)到提高立定跳遠(yuǎn)成績的目的。

圖2 高二年級二班某學(xué)生的立定跳遠(yuǎn)測試結(jié)果分析
基于人工智能、數(shù)據(jù)挖掘、學(xué)習(xí)分析等智能技術(shù),通過數(shù)據(jù)挖掘算法、內(nèi)容分析、預(yù)測性分析、系統(tǒng)建模等技術(shù)可對采集的多模態(tài)數(shù)據(jù)進(jìn)行數(shù)據(jù)融合與數(shù)據(jù)分析,充分挖掘教學(xué)數(shù)據(jù)間的相關(guān)性與因果性,主要涉及以下兩大關(guān)鍵場景:①多模態(tài)數(shù)據(jù)融合。在挖掘海量多模態(tài)數(shù)據(jù)的基礎(chǔ)上,融合不同的模態(tài)數(shù)據(jù)進(jìn)行分析,旨在通過多模態(tài)數(shù)據(jù)間的互補(bǔ)學(xué)習(xí)來增強(qiáng)模型、提取復(fù)雜數(shù)據(jù)中的有用特征,為決策者提供更多的信息,從而提升決策結(jié)果的準(zhǔn)確率。②多模態(tài)數(shù)據(jù)分析。充分發(fā)揮智能技術(shù)優(yōu)勢,使用機(jī)器學(xué)習(xí)算法,對文本、語音、圖像、視頻等不同數(shù)據(jù)進(jìn)行分析,實(shí)現(xiàn)對學(xué)習(xí)者特征要素的準(zhǔn)確表征。多模態(tài)數(shù)據(jù)診斷分析環(huán)節(jié)的技術(shù)應(yīng)用舉例如表2所示。

表2 多模態(tài)數(shù)據(jù)診斷分析環(huán)節(jié)的技術(shù)應(yīng)用舉例
當(dāng)前,智能技術(shù)支持的多模態(tài)數(shù)據(jù)診斷分析在過程評價(jià)實(shí)踐中得到了越來越廣泛的應(yīng)用。通過多模態(tài)數(shù)據(jù)的記錄和生成,教師在課堂教學(xué)中可以開展更科學(xué)、有效的評價(jià)。以丹麥奧爾堡大學(xué)的Jacob博士及其研究團(tuán)隊(duì)利用多模態(tài)數(shù)據(jù)診斷分析技術(shù)對學(xué)生協(xié)作學(xué)習(xí)活動開展的研究分析為例[20]:該研究團(tuán)隊(duì)通過視頻片段、圖像、線上學(xué)習(xí)活動時(shí)間軸等多渠道進(jìn)行學(xué)生協(xié)作學(xué)習(xí)的伴隨式數(shù)據(jù)采集,創(chuàng)建了豐富的縱向數(shù)據(jù)集,并通過匹配轉(zhuǎn)錄后的視頻文本層級與標(biāo)準(zhǔn)語料庫中的數(shù)據(jù)詞典,實(shí)現(xiàn)了學(xué)習(xí)者特征的分類。教師觀察視頻轉(zhuǎn)錄后的話語內(nèi)容與語音語調(diào),可有效分析學(xué)生協(xié)作學(xué)習(xí)的情感表征;而聚焦于學(xué)生在協(xié)作學(xué)習(xí)過程中與觸摸屏的互動,可以輕松得出學(xué)生行為數(shù)據(jù)背后的原因。通過利用多模態(tài)數(shù)據(jù)實(shí)施診斷分析,不僅有效提升了評價(jià)效果,而且能助力教師分析問題、原因并及時(shí)調(diào)整教學(xué)策略。
智能技術(shù)的引入,為評價(jià)的實(shí)時(shí)反饋、精準(zhǔn)呈現(xiàn)和調(diào)整改進(jìn)等提供了關(guān)鍵的技術(shù)支撐。而通過實(shí)時(shí)反饋與調(diào)控的技術(shù)應(yīng)用,能為學(xué)校提供教學(xué)質(zhì)量結(jié)果反饋、為教師提供學(xué)生學(xué)習(xí)評價(jià)結(jié)果反饋、為學(xué)生提供學(xué)習(xí)結(jié)果建議報(bào)告,主要涉及以下三大關(guān)鍵場景:①實(shí)時(shí)傳送。實(shí)時(shí)傳送以網(wǎng)絡(luò)傳輸協(xié)議為基礎(chǔ),借助高速局域網(wǎng)和移動通信等技術(shù)實(shí)現(xiàn)各種設(shè)備間的無線通信,能夠打破時(shí)空界限,實(shí)時(shí)接收評價(jià)反饋的信息。②實(shí)時(shí)反饋。智能可視化技術(shù)可將抽象數(shù)據(jù)圖示化,以快速獲取直觀反饋,既為教學(xué)過程中的反饋數(shù)據(jù)提供了良好的呈現(xiàn)形式,也可指導(dǎo)和拓展學(xué)生的系統(tǒng)化思維水平,讓教學(xué)雙方都能得到有效反饋,是進(jìn)行教學(xué)決策時(shí)必不可少的輔助手段。③實(shí)時(shí)干預(yù)。通過學(xué)習(xí)者自身的行為數(shù)據(jù)分析,利用知識節(jié)點(diǎn)路徑規(guī)劃、知識圖譜等技術(shù),可自定義學(xué)習(xí)內(nèi)容和學(xué)習(xí)路徑,并將最優(yōu)學(xué)習(xí)方案推薦給學(xué)習(xí)者;學(xué)習(xí)推薦技術(shù)能依據(jù)學(xué)習(xí)者的學(xué)習(xí)情況自動調(diào)整學(xué)習(xí)內(nèi)容,并對其進(jìn)行干預(yù)、指導(dǎo);而基于知識圖譜的關(guān)聯(lián)技術(shù)能夠?qū)崿F(xiàn)領(lǐng)域模型的知識表達(dá),讓學(xué)習(xí)系統(tǒng)具有認(rèn)知和邏輯能力,從而實(shí)現(xiàn)對學(xué)習(xí)者的個(gè)性化學(xué)習(xí)推薦。實(shí)時(shí)反饋與調(diào)控環(huán)節(jié)的技術(shù)應(yīng)用舉例如表3所示。

表3 實(shí)時(shí)反饋與調(diào)控環(huán)節(jié)的技術(shù)應(yīng)用舉例

圖3 “探索三角形全等的條件”學(xué)習(xí)前知識圖譜
在過程評價(jià)中應(yīng)用實(shí)時(shí)反饋與調(diào)控,可幫助教師及時(shí)調(diào)整教學(xué)節(jié)奏、學(xué)生及時(shí)調(diào)整學(xué)習(xí)計(jì)劃。例如,江蘇省連云港市某外國語學(xué)校在使用訊飛AI學(xué)習(xí)機(jī)“AI同步精準(zhǔn)學(xué)系統(tǒng)”的過程中,通過過程評價(jià)結(jié)果反饋生成個(gè)性化知識圖譜,幫助學(xué)生查漏補(bǔ)缺。以蘇科版《數(shù)學(xué)(八年級)》中“探索三角形全等的條件”一節(jié)的學(xué)習(xí)為例,學(xué)生完成推薦試題后,系統(tǒng)會基于大數(shù)據(jù)、學(xué)科知識圖譜構(gòu)建技術(shù),實(shí)時(shí)反饋學(xué)生的知識圖譜畫像,知識節(jié)點(diǎn)規(guī)劃引擎也會同時(shí)引入知識圖譜節(jié)點(diǎn)之間的拓?fù)潢P(guān)系,并用不同顏色呈現(xiàn)學(xué)習(xí)評價(jià)結(jié)果。學(xué)習(xí)前知識譜圖如圖3所示,其中的嘴角向上的表情符號意為“較好”,表示該生較好地掌握了相關(guān)知識點(diǎn);嘴角向下的表情符號意為“較差”,表示該生對相關(guān)知識點(diǎn)的掌握情況較差;嘴角持平的表情符號意為“一般”,表示該生對相關(guān)知識點(diǎn)的掌握不夠深入。系統(tǒng)會結(jié)合高頻知識點(diǎn)的考察情況,推薦學(xué)生首先要攻克的知識點(diǎn),并按照知識點(diǎn)學(xué)習(xí)的先后順序有針對性地推送相關(guān)微課視頻,同時(shí)還可利用預(yù)訓(xùn)練過程中形成的含有融合試題難度、特征詞、知識點(diǎn)等標(biāo)簽信息的試題表征庫,為學(xué)生實(shí)時(shí)推送最優(yōu)鞏固習(xí)題。學(xué)生完成推薦的學(xué)習(xí)后,系統(tǒng)會再次生成學(xué)情知識圖譜,并根據(jù)學(xué)生的學(xué)習(xí)情況,為學(xué)生重新推薦最佳學(xué)習(xí)路徑;教師也可根據(jù)該生的學(xué)情知識圖譜,針對其薄弱知識點(diǎn)調(diào)整教學(xué)任務(wù)和作業(yè)布置,為該生推送合適的習(xí)題進(jìn)行知識鞏固。學(xué)生完成一輪“AI同步精準(zhǔn)學(xué)系統(tǒng)”提供的鞏固練習(xí)和教師精心安排的練習(xí)任務(wù)后,知識圖譜就會發(fā)生相應(yīng)的變化,形成的學(xué)習(xí)后知識圖譜如圖4所示,可以看出:學(xué)習(xí)前學(xué)生有6個(gè)弱項(xiàng)未解決,學(xué)習(xí)后該生還有4個(gè)弱項(xiàng)未解決,但整體上學(xué)生掌握知識點(diǎn)“較好”的情況增加。通過實(shí)時(shí)反饋與調(diào)控,不僅在一定程度上滿足了學(xué)生個(gè)性化學(xué)習(xí)的需求,也為教師實(shí)施精準(zhǔn)干預(yù)與指導(dǎo)提供了技術(shù)支持。

圖4 “探索三角形全等的條件”學(xué)習(xí)后知識圖譜
當(dāng)前,在智能技術(shù)的支持下,多維度、多層次的教學(xué)過程信息能夠被整合處理,有效解決了過程評價(jià)診斷功能發(fā)揮不佳、評價(jià)數(shù)據(jù)不全等問題。過程評價(jià)與智能技術(shù)的融合應(yīng)用,正逐漸成為一種新常態(tài)[21]。本研究對智能技術(shù)賦能過程評價(jià)的作用進(jìn)行了探討,在明確智能技術(shù)賦能過程評價(jià)的目標(biāo)定位與實(shí)踐路徑的同時(shí),詳細(xì)描述了場景應(yīng)用層全過程伴隨式數(shù)據(jù)采集、多模態(tài)數(shù)據(jù)診斷分析、實(shí)時(shí)反饋調(diào)控的技術(shù)應(yīng)用,可為未來教育評價(jià)場景中實(shí)施智能技術(shù)支持下的過程評價(jià)提供實(shí)踐參考。
未來,要想使新時(shí)代的教育與評價(jià)相互呼應(yīng)[22],還需進(jìn)一步挖掘智能技術(shù)的應(yīng)用優(yōu)勢、探討評價(jià)場景的多樣化真實(shí)需求,不斷增強(qiáng)評價(jià)思維和方式的選擇性、靈活性,并提升其對評價(jià)改革的適應(yīng)性,具體可從以下兩個(gè)方向努力:①借助智能技術(shù)持續(xù)探索過程評價(jià)的多元應(yīng)用場景,強(qiáng)化過程評價(jià)與增值評價(jià)的協(xié)同應(yīng)用,讓評價(jià)既能考慮過程需要也能追蹤成就變化,以不斷改進(jìn)評價(jià)反饋效果。②以過程評價(jià)的探索為牽引,不斷推動多元評價(jià)的創(chuàng)新應(yīng)用。新時(shí)代教育評價(jià)改革的創(chuàng)新途徑主要有結(jié)果評價(jià)、過程評價(jià)、增值評價(jià)和綜合評價(jià),這“四個(gè)評價(jià)”是一個(gè)整體的教育評價(jià)體系,是互相聯(lián)系、互相配合的[23]。因此,需要借助智能技術(shù)推動“四個(gè)評價(jià)”改革創(chuàng)新,加強(qiáng)“四個(gè)評價(jià)”在不同評價(jià)實(shí)踐場景中的相互配合、有機(jī)結(jié)合,以不斷提升教育評價(jià)改革的系統(tǒng)性,打造新型教育評價(jià)體系,最終服務(wù)于新時(shí)代教育高質(zhì)量內(nèi)涵式發(fā)展。
[1]新華社.中共中央國務(wù)院印發(fā)《深化新時(shí)代教育評價(jià)改革總體方案》[OL].
[2]教育部.教育部等六部門關(guān)于印發(fā)《義務(wù)教育質(zhì)量評價(jià)指南》的通知[OL].
[3]教育部.教育部關(guān)于印發(fā)《普通高中學(xué)校辦學(xué)質(zhì)量評價(jià)指南》的通知[OL].
[4]陶西平.教育評價(jià)辭典[M].北京:北京師范大學(xué)出版社,1998:100.
[5]李營.課堂觀察量表設(shè)計(jì)中的偏失及改進(jìn)策略[J].中國教育學(xué)刊,2013,(5):64-67.
[6]林洛穎.小學(xué)數(shù)學(xué)教師課堂形成性評價(jià)的個(gè)案研究[D].上海:華東師范大學(xué),2020:16.
[7]丁瓊.形成性評價(jià)在小班化教學(xué)中的應(yīng)用[D].上海:華東師范大學(xué),2010:24-25.
[8]楊宗凱.利用信息技術(shù)促進(jìn)教育教學(xué)評價(jià)改革創(chuàng)新[J].人民教育,2020,(21):30-32.
[9]祝智庭,彭紅超,雷云鶴.智能教育:智慧教育的實(shí)踐路徑[J].開放教育研究,2018,(4):13-24、42.
[10]Davies P. What is evidence-based education?[J]. British Journal of Educational Studies, 1999,(2):108-121.
[11]劉邦奇.智能教育的發(fā)展形態(tài)與實(shí)踐路徑——兼談智能教育與智慧教育的關(guān)系[J].現(xiàn)代教育技術(shù),2019,(10):20-27.
[12]徐舜平,趙慶剛,許健,等.基于數(shù)據(jù)挖掘的MOOC學(xué)習(xí)過程監(jiān)測指標(biāo)分析——以“電路原理”課程為例[J].現(xiàn)代教育技術(shù),2017,(3):118-125.
[13]王冬青,韓后,邱美玲,等.基于智慧課堂動態(tài)生成性數(shù)據(jù)的交互可視化分析機(jī)制研究[J].電化教育研究,2019,(5):90-97.
[14]穆肅,崔萌,黃曉地.全景透視多模態(tài)學(xué)習(xí)分析的數(shù)據(jù)整合方法[J].現(xiàn)代遠(yuǎn)程教育研究,2021,(1):26-37、48.
[15]韓后,王冬青.促進(jìn)有效學(xué)習(xí)的評價(jià)反饋系統(tǒng)及其應(yīng)用[J].現(xiàn)代教育技術(shù),2015,(2):100-106.
[16]余勝泉.數(shù)據(jù)賦能的未來教育評價(jià)[J].中小學(xué)數(shù)字化教學(xué),2021,(7):5-10.
[17]劉邦奇,袁婷婷,紀(jì)玉超,等.智能技術(shù)賦能教育評價(jià):內(nèi)涵、總體框架與實(shí)踐路徑[J].中國電化教育,2021,(8):16-24.
[18]鐘薇,李若晨,馬曉玲,等.學(xué)習(xí)分析技術(shù)發(fā)展趨向——多模態(tài)數(shù)據(jù)環(huán)境下的研究與探索[J].中國遠(yuǎn)程教育,2018,(11):41-49、79-80.
[19]吳永和,郭勝男,朱麗娟,等.多模態(tài)學(xué)習(xí)融合分析(MLFA)研究:學(xué)理闡述、模型樣態(tài)及與應(yīng)用路徑[J].遠(yuǎn)程教育雜志,2021,(3):32-41.
[20]Davidsen J, Vanderlinde R. Researchers and teachers learning together and from each other using video‐based multimodal analysis[J]. British Journal of Educational Technology, 2014,(3):451-460.
[21]熊思東.數(shù)智時(shí)代高等教育新形態(tài)[J].教育研究,2020,(5):19-22.
[22]張琪,王丹.智能時(shí)代教育評價(jià)的意蘊(yùn)、作用點(diǎn)與實(shí)現(xiàn)路徑[J].中國遠(yuǎn)程教育,2021,(2):9-16、76.
[23]顧明遠(yuǎn).對深化新時(shí)代教育評價(jià)改革的幾點(diǎn)認(rèn)識[J].教育測量與評價(jià),2020,(8):3-5、18.
Process Evaluation Empowered by Intelligent Technology: Goals, Paths and Typical Scenarios
LIU Bang-qi1,2YU Yan-kun2YUAN Ting-ting2
Strengthening process evaluation is an important initiative to deepen education evaluation reform in the new era. However, usinintelligent technology to collect process evaluation data, mine the educational data value, and strengthen feedback and regulation has become an important driving force for strengthening process evaluation in the new era. Accordingly, on the basis of expounding the connotation, characteristics and problems of process evaluation in the new era, this paper firstly analyzed the role of process evaluation empowered by intelligent technology. Then, the paper proposed that the target orientation of process evaluation empowered by intelligent technology mainly included intelligent evaluation data acquisition, intelligent evaluation data processing, and intelligent evaluation feedback regulation, and explained its practice path from three levels of basic support layer, platform service layer, and scenario application layer. Finally, combined with the relevant typical cases, a practical discussion was carried out from the three links of the concomitant data acquisition in the whole process, multimodal data diagnosis and analysis, and real-time feedback and regulation in the scenario application layer. The research in this paper could provide the reference basis for front-line teachers and researchers to understand the characteristics and laws of process evaluation empowered by intelligent technology, and to strengthen process evaluation and promote educational evaluation reform and innovative development using intelligent technology.
intelligence technology; process evaluation; technology empowerment; evaluation feedback
G40-057
A
1009—8097(2022)05—0014—10
10.3969/j.issn.1009-8097.2022.05.002
劉邦奇,教授,碩士,研究方向?yàn)锳I教育應(yīng)用、智慧校園、智慧課堂、區(qū)域智慧教育規(guī)劃等,郵箱為lbq-nj@163.com。
2022年2月15日
編輯:小時(shí)