摘? ? 要:作為一種數(shù)據(jù)密集性評估,研究生教育質(zhì)量監(jiān)測評估理念、內(nèi)容與方法的演進(jìn),不只是從“控制問責(zé)”到“質(zhì)量改進(jìn)”、從“終結(jié)性”到“過程性”的簡單替代。在“動態(tài)”范式驅(qū)動下,既要關(guān)注目的、內(nèi)容、主體、要素、方式等的顯性多元化,也應(yīng)重視各維度、要素之間關(guān)聯(lián)的多元化。為此,必須認(rèn)清數(shù)據(jù)采集的目的,把握動態(tài)數(shù)據(jù)采集原則,建立健全結(jié)論反饋機(jī)制。
關(guān)鍵詞:“動態(tài)”范式;監(jiān)測評估;數(shù)據(jù)采集;反饋機(jī)制
中圖分類號:G642? ? ? ? ? 文獻(xiàn)標(biāo)識碼:A? ? ? ? ? 文章編號:1002-4107(2022)01-0013-04
隨著大數(shù)據(jù)時代的到來,以“周期性、終結(jié)性、靜態(tài)性、專家判斷”為主的研究生教育質(zhì)量監(jiān)測評估范式,因其理念、時效和精準(zhǔn)度等方面的欠缺,已不能“滿足時代發(fā)展的需求”,需要建構(gòu)適應(yīng)時代發(fā)展特點(diǎn)和需求的監(jiān)測評估范式,許多學(xué)者就此展開了較廣泛和深入的研究。比如,王戰(zhàn)軍倡導(dǎo)的“動態(tài)”研究范式就建立在研究生教育大數(shù)據(jù)之上,通過運(yùn)用現(xiàn)代信息技術(shù)的思想、思維、理念和方法,對研究生教育現(xiàn)象和問題進(jìn)行全樣本、全過程、全景式研究,揭示教育規(guī)律,動態(tài)呈現(xiàn)教育現(xiàn)狀,持續(xù)提高教育教學(xué)質(zhì)量,以適應(yīng)社會發(fā)展和人類發(fā)展。而作為動態(tài)研究范式的具體延伸,其評估評價層面對應(yīng)產(chǎn)生的“監(jiān)測評估”等新型評估模式也迅速走入學(xué)界視野,并成為今后研究生教育評估的重要趨勢之一。這就對每一位具體從事研究生教育的研究者和管理者提出了新的要求。在實(shí)際操作中,“動態(tài)”如何涵蓋新形勢下教育質(zhì)量監(jiān)測評估的特點(diǎn);如何滿足不同目的、主體等的評估需求;不同院校在數(shù)據(jù)采集上怎樣把握動態(tài)二字;其單位值怎樣界定;作為執(zhí)行者,應(yīng)遵循怎樣的原則,通過何種組織結(jié)構(gòu)方式完成數(shù)據(jù)采集。基于上述問題,本文嘗試探討“動態(tài)”監(jiān)測評估范式驅(qū)動下的數(shù)據(jù)采集和反饋機(jī)制問題。
一、監(jiān)測評估“動態(tài)”范式的多元性特征
在《高等教育監(jiān)測評估理論與方法》一書中,王戰(zhàn)軍對評估數(shù)據(jù)范疇與分類、數(shù)據(jù)采集方法、數(shù)據(jù)清洗集成和約簡以及數(shù)據(jù)倉庫和數(shù)據(jù)平臺等數(shù)據(jù)采集處理問題作了詳細(xì)論述,為一線工作人員提供了很好的理論參照。在具體執(zhí)行時,由于不同學(xué)位授權(quán)類別、不同地域、不同性質(zhì)的高校具有各自的特點(diǎn),其數(shù)據(jù)采集流程和數(shù)據(jù)處理方式等也會有所差別。以專業(yè)院校為例,從學(xué)科數(shù)量來看一般為單一學(xué)科或少學(xué)科,從學(xué)位授予類別來看一般為專業(yè)學(xué)位比例高于學(xué)術(shù)學(xué)位比例,從人才培養(yǎng)目標(biāo)來看一般為應(yīng)用型多于研究型。這些問題實(shí)際上關(guān)注了監(jiān)測評估的另一個重心——多元:“高等教育監(jiān)測評估是數(shù)據(jù)密集性評估,具有時間尺度密集、空間尺度多樣、價值尺度多元的特點(diǎn),其目的是為持續(xù)改進(jìn)、科學(xué)決策和多元判斷服務(wù)。”
質(zhì)量監(jiān)測評估中“動態(tài)”特點(diǎn)首先體現(xiàn)在數(shù)據(jù)采集、加工、提取的隨機(jī)性、常態(tài)化,其次體現(xiàn)在數(shù)據(jù)采集加工、挖掘提取、匯總分析、報告反饋、改進(jìn)優(yōu)化等各環(huán)節(jié)的流程化與規(guī)范化。質(zhì)量監(jiān)測評估的“多元”,可能不只限于時間、空間、價值尺度的多元,它既包含目的(如原由、理念、價值、診斷、評優(yōu)、選拔、宣傳等)、內(nèi)容(如生源、導(dǎo)師隊(duì)伍、選修課程、學(xué)業(yè)成績、圖書館文獻(xiàn)借閱、學(xué)術(shù)報告、科研活動、專業(yè)實(shí)習(xí)、論文發(fā)表、獎學(xué)金評定、應(yīng)用研究開發(fā)成果轉(zhuǎn)化、就業(yè),修業(yè)年限、品德發(fā)展、社交活動等各類數(shù)據(jù),以及文字、數(shù)字、圖片、音頻、視頻等不同形態(tài)的數(shù)據(jù))、主體(比如中央政府、省級政府、培養(yǎng)單位、用人單位、社會組織、專業(yè)機(jī)構(gòu)、大眾傳媒等機(jī)構(gòu),導(dǎo)師、研究生、工作人員、管理人員、校外專家等個體,以及博士、碩士研究生和本科生、畢業(yè)生等)、方式方法(如系統(tǒng)—整體評估與主題—單向評估,定量與定性,問卷、訪談、實(shí)地考察等)的顯性多元化,也包含各維度、要素之間關(guān)聯(lián)的多元化,而這個關(guān)聯(lián)的多元化是對數(shù)據(jù)挖掘、分析和運(yùn)用的關(guān)鍵所在。因此,質(zhì)量監(jiān)測不只是簡單的從行政控制與問責(zé)到持續(xù)改進(jìn)教育質(zhì)量,從單純倚重專家經(jīng)驗(yàn)到兼顧信息技術(shù)和專家經(jīng)驗(yàn),從周期性評估向常態(tài)化監(jiān)測,從終結(jié)性結(jié)論到多元主體根據(jù)需求自我進(jìn)行價值判斷的替代性變革;而是要強(qiáng)調(diào)理念、內(nèi)容、方法等質(zhì)量監(jiān)測相關(guān)方面的多元化、動態(tài)化,比如,可以為“問責(zé)”而進(jìn)行“即時性”的監(jiān)測評估,也可以為“診斷”而進(jìn)行“周期性”的監(jiān)測評估,這取決于監(jiān)測評估目的的多元化。我們既可以倚重專家經(jīng)驗(yàn),也可以借助信息技術(shù),或者同時展開“終結(jié)性評估”,這取決于監(jiān)測評估的目的、性質(zhì)、規(guī)模和成本調(diào)控等因素。認(rèn)識到“動態(tài)”范式中的多元性特征,出于不同監(jiān)測評估目的,可以進(jìn)行個性化的指標(biāo)體系和評估模型的建構(gòu),對同一因素、指標(biāo),也可能會被賦予不同的權(quán)重。為此,就可以兼顧大數(shù)據(jù)與小數(shù)據(jù)、宏觀群體狀態(tài)與微觀個體狀態(tài),以滿足不同層次、不同主體、不同目的的監(jiān)測評估需求。
二、數(shù)據(jù)采集效能的影響因素:目的、方式與反饋機(jī)制
通觀數(shù)據(jù)采集至反饋的整個鏈條,結(jié)合實(shí)際工作經(jīng)驗(yàn),筆者認(rèn)為,決定數(shù)據(jù)采集成果效能的關(guān)鍵在于三個方面:數(shù)據(jù)采集的目的、方式和動態(tài)反饋機(jī)制的建立。
(一)明確采集目的是監(jiān)測評估的重要前提
“采集”從直觀上解釋有采摘和收集之意,與“統(tǒng)計(jì)”一詞不同,采集更加注重在基礎(chǔ)數(shù)據(jù)上,根據(jù)需要進(jìn)行數(shù)據(jù)選擇。有學(xué)者指出,在監(jiān)測評估中,“一方面需要根據(jù)評價目標(biāo)構(gòu)建合理的評價指標(biāo)體系,另一方面則需要能將各種評估指標(biāo)加以有效整合的統(tǒng)計(jì)方法的支撐”。不同的需求、不同的目的和不同的思路將直接影響到數(shù)據(jù)采集的方向,進(jìn)而影響最終分析結(jié)論。因此,在開展數(shù)據(jù)采集工作之前,必須要對此項(xiàng)工作的目的有一個清晰的認(rèn)識。
1.不能將數(shù)據(jù)采集目的窄化為“迎評”。對于工作在一線的高校基層管理人員來說,收到上級下發(fā)的采集數(shù)據(jù)任務(wù)時,通常都伴隨著一個背景——評估。近年來,隨著國家對教育評估重視程度的提高,各級評估的頻次越來越高,種類也越來越多。按級別有國家級、省部級、地市級、區(qū)縣級的評估,按種類有綜合性的學(xué)科評估、專業(yè)學(xué)位水平評估和專項(xiàng)性的課程建設(shè)評估、培養(yǎng)方案評估等。每次評估都不可避免地需要基層部門提供相關(guān)數(shù)據(jù),久而久之部分教師和工作人員形成了一種“數(shù)據(jù)采集的目的是迎接評估”的固化印象。筆者認(rèn)為,這種潛意識是對數(shù)據(jù)采集的一種誤解,不利于持續(xù)性高質(zhì)量地開展教育管理工作。每一種評估指標(biāo)體系和考察方向都有其自身的局限性,且共性多于個性,無法充分體現(xiàn)本校特色的情況也時有發(fā)生。如果數(shù)據(jù)采集工作每每都跟隨評估體系的變化而變化,那必將形成疲于應(yīng)付、目標(biāo)散亂的局面。評估的存在并非數(shù)據(jù)采集的必要條件,無論有沒有評估,數(shù)據(jù)采集都要做,而且應(yīng)該系統(tǒng)地有結(jié)構(gòu)地做。
2.區(qū)分?jǐn)?shù)據(jù)采集的原初和延伸目的。筆者認(rèn)為,數(shù)據(jù)采集的目的有三個方面:一是為學(xué)校發(fā)展留下可資借鑒和查考的歷史檔案。采集形成的數(shù)據(jù)庫不同于各高校每年進(jìn)行的年鑒匯總和部門工作報告匯編,它既反映著學(xué)校建設(shè)的方方面面,又有重點(diǎn)、成體系,可以客觀地反映一定歷史時期學(xué)校建設(shè)的成績及不足。二是為學(xué)校建設(shè)決策提供依據(jù)。學(xué)校師資引進(jìn)與維護(hù)、學(xué)科方向的建設(shè)與調(diào)整、科研投入的力度與方向、課程體系的搭建與優(yōu)化,都必須有章可循、有據(jù)可依。這種依據(jù)不能只限于評估成績和排名,還必須考查到?jīng)]有納入評估指標(biāo)體系但對本校來說體現(xiàn)出長遠(yuǎn)建設(shè)意義的數(shù)據(jù)。正因如此,高校各部門主動意識(而非應(yīng)對評估任務(wù)的被動意識)支配下的數(shù)據(jù)采集工作就顯得尤為重要。三是為迎接各類評估做好準(zhǔn)備。正如上文所述,近年來各類評估接踵而至,評估已經(jīng)成為高校教育監(jiān)督的常態(tài)化工作,數(shù)據(jù)庫也理所當(dāng)然地肩負(fù)起被各種評估體系擇選的重任。隨著信息技術(shù)的飛躍性發(fā)展,評估時涉及的數(shù)據(jù)有很多已經(jīng)無需受評單位提供(例如期刊發(fā)表、國家級獎項(xiàng)等可以直接調(diào)用公共數(shù)據(jù)庫),但相當(dāng)多的擇優(yōu)型代表性數(shù)據(jù)(例如骨干教師、代表性學(xué)術(shù)成果、代表性創(chuàng)作展演等)等,依然需要人工采集和整合。只有平時注重?cái)?shù)據(jù)采集,才會在迎接評估時有充裕的時間和清晰的思路來篩選數(shù)據(jù)。由此,迎評不是數(shù)據(jù)采集的原初目的,但確實(shí)是一項(xiàng)重要的延伸目的。
3.增進(jìn)相關(guān)主體的數(shù)據(jù)采集意識。高校數(shù)據(jù)采集任務(wù)具有集中下發(fā)、階段性特點(diǎn),部分部門和教師沒有清楚地認(rèn)識到數(shù)據(jù)采集的目的,加之日常辦公非常繁忙,也不清楚下一次數(shù)據(jù)采集要求和格式是怎樣,所以平時沒有花費(fèi)精力去設(shè)計(jì)本部門的數(shù)據(jù)采集思路和流程,還處在“上級要什么就去找什么、不要的就是不重要的”思想狀態(tài)。實(shí)際上,基層部門和一線教師自身的數(shù)據(jù)采集意識決定著整個學(xué)校的數(shù)據(jù)采集質(zhì)量和效果,間接影響著學(xué)校決策和發(fā)展。所以,對數(shù)據(jù)采集目的的認(rèn)識絕不僅僅是院部、學(xué)科辦、規(guī)劃處等部門的事情,而應(yīng)該滲透到每個職能部門和教職員工的工作思路中去。筆者認(rèn)為,教師教學(xué)發(fā)展中心是貫徹高校教師數(shù)據(jù)采集意識的有效途徑,應(yīng)充分加以使用。早在2012年7月,教育部就頒布了《關(guān)于啟動國家級教師教學(xué)發(fā)展示范中心建設(shè)工作的通知》,許多高校高度重視,近年來建立和完善了相關(guān)機(jī)構(gòu)和機(jī)制。在《教育部高等教育司2021年工作要點(diǎn)》中更是指出,要“推動各地各高校建設(shè)教師教學(xué)發(fā)展中心,完善國家、省、高校三級立體化網(wǎng)絡(luò)體系,完善培訓(xùn)平臺和運(yùn)行機(jī)制”。這一平臺由校級層面主動運(yùn)行和監(jiān)管,可以在各類培訓(xùn)、研討活動中置入有關(guān)評估數(shù)據(jù)采集的內(nèi)容,從而有效推進(jìn)一線教師樹立和強(qiáng)化科學(xué)的數(shù)據(jù)采集意識。
(二)把握動態(tài)采集方式是監(jiān)測評估的關(guān)鍵環(huán)節(jié)
在動態(tài)研究范式驅(qū)動下,數(shù)據(jù)采集也必須相應(yīng)地呈持續(xù)化和動態(tài)化進(jìn)行。所謂動態(tài),指運(yùn)動中的狀態(tài),雖然字面意思很容易理解,但具體到實(shí)際操作過程中,就需要給動態(tài)圈定一個計(jì)時單位或形成一個實(shí)時更新的數(shù)據(jù)采集平臺才能開展工作。此外,動態(tài)采集不但是各部門自身數(shù)據(jù)的采集方式,更需要全校各部門數(shù)據(jù)形成聯(lián)動,否則,信息孤島式動態(tài)數(shù)據(jù)的參照意義將大打折扣。
1.計(jì)時單位式動態(tài)采集。所謂計(jì)時單位式動態(tài)采
集是指以天、周或月等時間單位為數(shù)據(jù)采集周期,規(guī)律化采集數(shù)據(jù)的方式。從操作主體來看,這種方式更加適用于行政管理職能部門。原因在于,這些部門對教育目標(biāo)、教育形勢、政策精神的把握和領(lǐng)會較一般教師更為深入,工作時間規(guī)律,組織紀(jì)律性較強(qiáng),善于系統(tǒng)規(guī)律地采集數(shù)據(jù)。例如,教務(wù)部門以天為單位的出勤情況收集和以學(xué)期為單位的課程信息收集;宣傳部門以周為單位的學(xué)術(shù)活動信息收集;研究生培養(yǎng)辦以月為單位的學(xué)生實(shí)踐情況收集等。從操作路徑來看,這種數(shù)據(jù)采集方式是從上到下的,特點(diǎn)是目標(biāo)性強(qiáng),采集規(guī)律易于把握,貫徹執(zhí)行力度較大,執(zhí)行情況較好。但是,如果計(jì)時單位是天或周,數(shù)據(jù)采集種類較多、頻次較為密集,則需要充足的人手和順暢的由上至下的工作任務(wù)傳導(dǎo)機(jī)制。
2.實(shí)時更新式動態(tài)采集。所謂實(shí)時更新式動態(tài)采
集是指當(dāng)數(shù)據(jù)發(fā)生變化時,同時或以最快的速度被操作主體采集數(shù)據(jù)的方式,主要分為兩類:一是已經(jīng)實(shí)現(xiàn)自動捕捉信息的平臺,例如財(cái)務(wù)系統(tǒng),每一筆經(jīng)費(fèi)的投入和使用都會明確記錄在賬,經(jīng)費(fèi)總量自動得出增減值數(shù)據(jù);二是半自動的信息填報平臺,例如科研信息系統(tǒng),必須先經(jīng)過教師或?qū)W生的手動數(shù)據(jù)輸入(雖然期刊發(fā)表情況可以通過中國知網(wǎng)等學(xué)術(shù)成果集成平臺直接獲取,但通常情況下無法自動區(qū)分教師或?qū)W生身份,更無法自動識別年齡、性別、學(xué)科歸屬等),才能實(shí)時匯總產(chǎn)生總值變化。從操作主體來看,這種動態(tài)數(shù)據(jù)采集方式更加適合于一線教師和學(xué)生,數(shù)據(jù)類別更適合于科研成果、獲獎和展演信息等。原因在于,這類數(shù)據(jù)直接發(fā)生于師生本人,數(shù)據(jù)的支撐材料也最先到達(dá)本人手中,由其主動、盡快填報是最理想的動態(tài)采集方式。從操作路徑來看,這種數(shù)據(jù)采集方式是從下到上的,特點(diǎn)是準(zhǔn)確度高,數(shù)據(jù)來源分布廣,不容易出現(xiàn)盲區(qū)。當(dāng)然,這種采集方式要以工作平臺的便捷操作及師生的主動配合為前提,且字段規(guī)格等限定應(yīng)當(dāng)規(guī)范和易懂,否則收集來的數(shù)據(jù)將無法避免五花八門、文不對題的窘?jīng)r,給后期的數(shù)據(jù)清洗和整理帶來巨大困難。
3.聯(lián)動式動態(tài)采集。所謂聯(lián)動式動態(tài)采集,強(qiáng)調(diào)的是各部門的數(shù)據(jù)動態(tài)關(guān)聯(lián)。無論采集路徑是從上到下還是從下到上,每類數(shù)據(jù)都一定有其歸口部門統(tǒng)合,統(tǒng)合后最重要的操作就是聯(lián)合觀測。如果說每個獨(dú)立數(shù)據(jù)都是一顆石子,那既有的數(shù)據(jù)背景就像涌動著的湖面,不同的石子投入湖中產(chǎn)生出不同的漣漪,它們交織在一起,疊加于湖面原有的樣貌,形成新的波形。這個最終產(chǎn)生的波形才是我們需要的結(jié)果。例如國際交流處的動態(tài)數(shù)據(jù)與研究生部的師生信息數(shù)據(jù)聯(lián)動觀測,才能得出某個時間區(qū)間內(nèi),去某地開展某種交流的學(xué)生年級/專業(yè)/所屬導(dǎo)師分布,出訪某地的教師年齡/職稱/專業(yè)/海外經(jīng)歷/出訪時間等是否具有集中性和規(guī)律性。繼而延展開來,再與財(cái)務(wù)處的賬務(wù)數(shù)據(jù)動態(tài)關(guān)聯(lián),可以匡算出出訪某地的經(jīng)費(fèi)投入與成果產(chǎn)出比,還可以得出以月為單位或以季度為單位的同比增減情況,為經(jīng)費(fèi)使用提供前瞻性參考。可以說,聯(lián)動式動態(tài)采集方式是動態(tài)數(shù)據(jù)采集的成效顯現(xiàn)環(huán)節(jié),雖然這對數(shù)據(jù)庫的貫通共享提出了較高的要求,但只要經(jīng)過合理統(tǒng)籌設(shè)計(jì),在當(dāng)今的技術(shù)手段條件下是可以實(shí)現(xiàn)的。
需要注意的是,聯(lián)動式動態(tài)采集必須根據(jù)數(shù)據(jù)產(chǎn)生所需時長進(jìn)行靈活取值,例如,某月的經(jīng)費(fèi)投入與該月的成果產(chǎn)出并不構(gòu)成因果關(guān)系,某屆研究生獲獎激增也不能完全歸功于當(dāng)年的課程設(shè)置。數(shù)據(jù)采集和使用者要在操作過程中根據(jù)實(shí)際情況制定聯(lián)動取值方案,多源觀測,避免發(fā)生低級錯誤。
(三)建立結(jié)論反饋機(jī)制是監(jiān)測評估的有效保障
要想達(dá)成動態(tài)數(shù)據(jù)采集為學(xué)校建設(shè)發(fā)展提供決策依據(jù)的目的,則數(shù)據(jù)采集形成結(jié)論之后,最為重要的一環(huán)就是結(jié)論的反饋。雖然這很容易被理解,但是在現(xiàn)實(shí)操作過程中,原始數(shù)據(jù)提供方得不到最終數(shù)據(jù)分析結(jié)論的情況很常見,這樣非常不利于基層工作人員和一線教師掌握學(xué)校發(fā)展動態(tài),也無法對其今后的數(shù)據(jù)采集工作形成指導(dǎo)。所以,建立科學(xué)的數(shù)據(jù)結(jié)論反饋機(jī)制是必要和必須的,其運(yùn)行成效也需要及時被評價,以適應(yīng)不斷變化的教育發(fā)展環(huán)境和要求。
1.結(jié)論反饋的途徑。數(shù)據(jù)結(jié)論的反饋并非是開一個教職工大會,播放幾張PPT,看一看各色圖表就能完成的。它需要科學(xué)而恰當(dāng)?shù)姆答佂緩剑瑢⒃紨?shù)據(jù)來源、數(shù)據(jù)采集方式、數(shù)據(jù)分析模型和最終結(jié)論詳實(shí)地報告給每位教職員工。具體來看,結(jié)論的反饋可以根據(jù)被反饋主體區(qū)分為職能部門路徑和個體師生路徑。第一,對于職能部門,可以通過校內(nèi)OA系統(tǒng)流轉(zhuǎn)或收文的形式,確認(rèn)抵達(dá)各個部門負(fù)責(zé)人的手中,如果條件允許,應(yīng)開放動態(tài)數(shù)據(jù)采集平臺的相應(yīng)權(quán)限,使職能部門能夠更為直觀地結(jié)合動態(tài)數(shù)據(jù)挖掘結(jié)論深度;第二,對于個體師生,應(yīng)至少將與其本職工作/本學(xué)科方向相關(guān)的數(shù)據(jù)結(jié)論及時予以反饋,或編制質(zhì)量報告及時推送。由于師生數(shù)量較多,可通過廣泛告知和集中研讀相結(jié)合的反饋途徑,定期將數(shù)據(jù)結(jié)論通過系部下發(fā)到個人,同時在黨政聯(lián)席會和學(xué)生干部會議上進(jìn)行學(xué)習(xí)和討論,繼而再通過這些核心成員將會議精神傳遞給周邊師生,收集意見建議,通過系部上報給職能部門。由此,能夠讓每一個數(shù)據(jù)的創(chuàng)造者擁有集體榮譽(yù)感和決策參與感,同時為其學(xué)術(shù)道路的走向提供指導(dǎo),為學(xué)術(shù)成果的產(chǎn)出提供動力。
2.反饋機(jī)制的成效評價。反饋機(jī)制是否真正發(fā)揮作用,要看反饋后的改進(jìn)措施是否到位,這就需要對其進(jìn)行成效評價。筆者認(rèn)為,由于這一評價主要針對的是學(xué)校的決策部門和相關(guān)職能部門,故應(yīng)當(dāng)由學(xué)校的上級分管部門進(jìn)行監(jiān)督評價。對于根據(jù)數(shù)據(jù)分析結(jié)論及時調(diào)整了工作方向、完善了工作細(xì)節(jié)、產(chǎn)生了明顯進(jìn)步的相關(guān)部門和人員應(yīng)進(jìn)行鼓勵;對于將動態(tài)數(shù)據(jù)分析結(jié)論束之高閣、不予理睬,從而導(dǎo)致學(xué)科發(fā)展遲緩或產(chǎn)生重大隱患的責(zé)任人應(yīng)進(jìn)行問責(zé)。
反饋機(jī)制的建立健全將大大改善學(xué)校基層教職員工只知曉大型評估排名、不了解當(dāng)下存在問題的普遍情況,推動達(dá)成數(shù)據(jù)采集的根本目的。
三、動態(tài)數(shù)據(jù)采集和反饋中的困難與挑戰(zhàn):數(shù)據(jù)與人
數(shù)據(jù)本身并沒有意義,數(shù)據(jù)的意義是源自主體并依靠主體來發(fā)掘和實(shí)現(xiàn)的。我們既要關(guān)注到客觀、冰冷的數(shù)據(jù)背后那一個個活生生的人,也要關(guān)注到數(shù)據(jù)采集、加工過程中的每一個活生生的人。實(shí)際上,即使在嚴(yán)重依賴各種模型、技術(shù)、工具的今天,人的因素在質(zhì)量監(jiān)測評估中仍然起著及其重要甚至是決定性的作用。筆者從事研究生教育數(shù)據(jù)采集整理工作已近四年,關(guān)注動態(tài)研究范式及其驅(qū)動下的數(shù)據(jù)采集策略也已有相當(dāng)長的時間。通過實(shí)踐,筆者認(rèn)為,高校動態(tài)數(shù)據(jù)采集和反饋主要面臨三大困難,而這三大困難都與數(shù)據(jù)采集和加工的主體相關(guān)。
(一)信息孤島林立,無法貫通對接
雖然目前技術(shù)手段可以實(shí)現(xiàn)整體化的動態(tài)數(shù)據(jù)采集系統(tǒng)搭建,但是由于在此之前,部分高校不同部門為了便于自身數(shù)據(jù)的收集整理,開發(fā)了僅針對某項(xiàng)工作或某個部門工作的獨(dú)立系統(tǒng),形成了一個個信息孤島。這些系統(tǒng)之間有的并不兼容,有的即便可以兼容也需要耗費(fèi)大量的人力完成數(shù)據(jù)遷移,使得處于繁忙工作中的操作主體無法下定決心放棄原系統(tǒng)。此外,設(shè)計(jì)一個既可供數(shù)據(jù)聯(lián)動并按照數(shù)據(jù)模型導(dǎo)出分析結(jié)論,又能充分體現(xiàn)本校特色的系統(tǒng),不但需要各個部門的通力配合,還要求設(shè)計(jì)者熟稔研究生教育規(guī)律,并對該校的特色學(xué)科、特色指標(biāo)有所體悟,著實(shí)不易。
(二)師生在數(shù)據(jù)采集工作上的主動意識不強(qiáng)
部分教師和研究生忙于學(xué)術(shù),對填報系統(tǒng)、填寫表格等事宜不夠重視,甚至“談表色變”,即便發(fā)表了文章、獲得了獎項(xiàng),也未必做到盡快填報上傳。這就導(dǎo)致數(shù)據(jù)采集不全,無法及時反映學(xué)校成果產(chǎn)出的全貌。要想解決這一難題,建議結(jié)合工作考核、成績發(fā)布等與其學(xué)術(shù)生活息息相關(guān)的措施,鼓勵師生主動填報,按規(guī)填報。
(三)支撐材料收集不足,規(guī)格難以統(tǒng)一
這里所謂的支撐材料,主要指非結(jié)構(gòu)化數(shù)據(jù),例如活動海報、宣傳手冊、音視頻等。這些數(shù)據(jù)來源廣,規(guī)格多,制式常有不同,而且很多材料在提交時沒有標(biāo)明作者/獲獎?wù)叩暮喴畔ⅲ率购笃谝咳肆χ鹨缓藢?shù)據(jù),為動態(tài)數(shù)據(jù)的采集帶來困難。
綜上,監(jiān)測評估“動態(tài)”范式因符合時代特點(diǎn)和需求,越來越成為研究生教育管理從業(yè)者優(yōu)選的研究范式。在其驅(qū)動下,數(shù)據(jù)采集呈現(xiàn)動態(tài)優(yōu)于靜態(tài)的發(fā)展態(tài)勢,而且在評估層面也相應(yīng)產(chǎn)生了監(jiān)測評估的理論與方法。無論是從事研究生教育的行政工作人員還是專任教師,必須跟上時代步伐,深入認(rèn)識數(shù)據(jù)采集的目的,運(yùn)用多種動態(tài)數(shù)據(jù)采集辦法,注重反饋機(jī)制的親身促建,以幫助學(xué)校搭建動態(tài)數(shù)據(jù)從采集到反饋的完整閉環(huán),為我國的“雙一流”建設(shè)增磚加瓦。
參考文獻(xiàn):
[1]王銘,王戰(zhàn)軍.質(zhì)量樹:高等教育監(jiān)測評估新方法[J].清華大學(xué)教育研究,2015(3).
[2]王戰(zhàn)軍,喬剛.大數(shù)據(jù)驅(qū)動的教育研究新范式[J].北京大學(xué)教育評論,2018(1).
[3]李芬,王戰(zhàn)軍.基于大數(shù)據(jù)的研究生教育監(jiān)測評估研究[J].學(xué)位與研究生教育,2016(7).
[4]馮成志.多重因素分析在大學(xué)評估指標(biāo)整合中的應(yīng)用[J].中國人民大學(xué)教育學(xué)刊,2013(1).
[5]裴小琴,夏春明,范圣法.教學(xué)質(zhì)量監(jiān)控與評估體系的內(nèi)涵建設(shè)探究[J].黑龍江教育(高教研究與評估),2015(10).
[責(zé)任編輯? 宋? ? 宇]
收稿日期:2021-04-26
作者簡介:孫寧寧(1981—),女,山東青島人,上海音樂學(xué)院黨委組織部副研究員,博士,主要從事高等教育和音樂學(xué)研究。
基金項(xiàng)目:上海音樂學(xué)院“音才輩出”項(xiàng)目“雙一流建設(shè)背景黨委下的監(jiān)測評估與對應(yīng)策略研究”(2018013)