吳學會 祁建松 李佳恒
(天津中醫藥大學現代教育技術中心,天津 300193)
學生對教師和教學的評價是高校教學質量評價的重要組成部分,但在實踐中發現,由于學生對專業知識的認知限制和自身的成長差異性必然導致部分評價缺乏客觀性,而學生在就業后通過工作實踐會對教師的教學方法、專業課程的設置等有新的認識,這時做出的評價會更具有客觀性。同時學生的職業發展和就業單位對學生的評價數據對學校的專業設置和課程設置評價也有重要意義。通過運用大數據對相關歷史數據進行挖掘分析,更有利于發現學科與課程設置對學生影響的規律,有益于從供給側優化專業與課程的設置,達到培養高質量人才的目的[1]。
廣大中醫高校充分認識到本科教學評價中畢業生的就業質量是教學評價的重要組成,也積極開展了相關的探索實踐。
中醫高校在畢業生跟蹤反饋上有先天的優勢,即畢業生就業相對集中,并且學校與用人單位保持長期聯系,便于以如下方式開展反饋:
(1)發放問卷
發放問卷主要適用于向畢業生集中的單位開展調研,尤其是大學的附屬教學醫院,通過教學科、人事科能夠高效開展。調研的內容主要是畢業生對學校學科設置及教學的建議,畢業生的發展路徑[2]。
(2)開展畢業生和用人單位座談
座談是了解畢業生和用人單位反饋的重要形式,通過該方式可以進一步收集畢業生和用人單位對專業與課程設置的建議。
在畢業生與用人單位調研方面,由于畢業生畢業年限跨度大、分布比較廣,目前的反饋方式存在以下問題:
(1)調研片面、覆蓋范圍小
現有調研方式受到調研渠道的限制,主要集中在學院附屬醫院及各個區縣的二級以上中醫院,對于一級醫院覆蓋較少。對于在非中醫院和基層醫院工作的畢業生覆蓋較少。
(2)效率低、連續性差
傳統的調研和座談過程受到人員組織,時間和空間的影響,調研及座談的準備時間較長,投入較大,座談的規模有限,因而獲得的效果不太理想。受到人事調動安排等影響,跟蹤反饋的連續性容易受到影響[3]。
(3)傾向于就業反饋,缺乏教學反饋
中醫高校一般有就業管理部門牽頭開展畢業生就業的反饋工作,工作的重心傾向于就業渠道的開拓,因此調研的內容與教學改革偏離較大。同時就業部門對教學信息的掌握較少,也限制了進一步開展對教學的反饋收集與分析。
基于數據倉庫、數據挖掘技術的畢業生與用人單位反饋系統在傳統的數據收集的基礎上實現了對反饋數據的智能分析,因此具備如下優勢:
反饋系統集成來自于教務系統和就業部門的基礎數據,系統的數據更加完善,尤其是教務數據的集成,實現了對教學數據的多維度分析,如分析課程設置與畢業生發展、教師教學與學生發展之間的關聯關系,對完善了本科教學質量評價有重要意義。
反饋系統的用戶數據收集采用Web模式,該模式不受時間和空間的約束,極大提高了調研的效率,規范了調研數據的格式,降低了傳統調研的成本。
基于智能技術的分析系統可以分析的內容豐富,如對畢業生個體的成長趨勢分析,對各個專業畢業生對課程評價的關聯度分析,畢業生對教師的教學評價分析等。
系統提供多樣的數據分析結果展示,除傳統的表格展示外,系統提供圖形化展示,如趨勢圖、柱形圖、餅圖和散點圖等。通過圖形化的展示,有利于發現其中的趨勢、規律。
利用信息技術建設畢業生跟蹤系統可以有效彌補傳統方式的不足,同時利用大數據分析可以高效、量化分析的分析,為人才培養提供決策依據。
畢業生跟蹤與反饋系統的研究需要重視系統的頂層設計,保證工作的穩步開展,因此在研究過程中需要重視以下原則:
(1)全面性原則
畢業生跟蹤反饋系統的全面性包括:參與角色的全面性,即畢業生、用人單位、二級學院、就業部門全面參與對畢業生反饋數據的分析工作;反饋指標的全面性,即反饋指標包括畢業生的發展指標、畢業生對專業教學的評價指標、用人單位對畢業生發展的評價指標。
(2)動態性原則
動態性原則主要體現在:畢業生數據的動態性,畢業生畢業后其相關就業信息實時進入系統;畢業生發展情況的動態性,即系統實時收集畢業生的崗位、職稱、職務等動態信息;畢業生對學校教學的評價動態性,即畢業生可以隨時對教學計劃、教師教學做出評價;用人單位反饋信息的動態性,實時收集用人單位對畢業生的評價信息。
(3)集成性原則
在系統的建設中需要重視系統的集成性,充分利用現有信息,盡可能的減少用戶信息的錄入量。如充分利用學工系統、校友系統和教務系統中的信息,減少學生基本信息的錄入。
(4)先進性原則
系統的建設必須采納先進的主流技術,實現系統開發與運行的高效性,最大程度的發揮現有資源的性能優勢,為廣大用戶提供良好的使用體驗。
(5)自主性原則
目前畢業生國內軟件廠商關于畢業生就業跟蹤、用人單位反饋的系統研究較少,缺乏相關研究的案例。因此在系統的建設過程中主要依據天津中醫藥大學自身的軟件團隊開發建設完善系統,具備完整自主的知識產權,為系統的后期維護升級提供便利。
(1)畢業生發展指標設計
畢業生的發展指標主要包括:職稱、職務、學歷、收入等,填報的信息包括姓名、年度、職稱、職務、學歷、從事專業、崗位等。
(2)畢業生評教指標設計
畢業生評教的內容包括年度、專業、課程和評價年度,其中評價年度記錄畢業生對教師的評價時間,隨著畢業生工作學習經歷的不斷完善,在不同時期畢業生會對同一教師的評價發生改變。與在學學生的評價相比,該評價的年度曲線對教師的授課方式改進有重要的參考意義。
(3)畢業生對課程設置評價的指標設計
畢業生對課程的設置評價指標主要包括課程的設置內容、課時數、前導課程與后記課程設置、建議新增的課程及內容、建議取消的課程及內容。畢業生個人每隔3-5年對該課程再次評價,系統通過對比分析畢業生對該課程設置的必要性的認識過程規律;或通過該年度對不同年度畢業的學生調研分析不同工作年齡段的畢業生對該課程設置的評價。
(4)單位對畢業生評價
單位對畢業生的評價主要分為工作能力、工作態度、個人發展等方面進行評價。分析的維度包括專業、學歷、性別和畢業年度。通過用人單位的逐年評價形成畢業生的成長檔案,為分析專業設置和培養計劃的修訂提供數據支持。
畢業生的跟蹤反饋工作實施需要根據各個中醫高校的機構設置、調研范圍和主題情況選擇適合的模式,主要模式如下:
(1)實時填報模式
實時填報的模式即將系統常年開放,接受畢業生及用人單位的隨時填報。該填報模式的優點是沒有對用戶的填報時間約束,可能收集更多的相關信息,尤其是基層醫療單位的反饋信息;缺點是時間的開放性導致填報率過低,無法確立好的時間節點[4]。
(2)集中填報模式
集中填報模式即學校通過校友會、招辦、校辦等方式通知相關附屬醫院、協作醫院集中開展填報工作,該方式的優點在于集中時間開展填報,工作效率較高;缺點在于工作量大,容易對相關單位工作產生干擾,尤其是附屬醫院等畢業生比較集中的單位。
(3)實時與集中填報模式相結合模式
實時與集中填報模式相結合模式結合了兩種方式的優點,即系統實時開放,并在重要時間節點結合集中填報模式的渠道開展工作,盡可能的提高填報的質量與效率。
(1)基礎信息收集實現
系統的設計需要考慮易用性原則,即系統的用戶較多,包括大量歷年畢業的畢業生,因此需要盡可能的簡化注冊信息,對于畢業生相對集中的校附屬醫院采取數據導入的模式。從就業系統導入畢業生的基本數據方便畢業生選擇注冊。
(2)問卷實現
為了便于用戶的填寫,在問卷設計過程中主要采取選擇的方式,對個別項目設置文本填寫的方式完成。系統的指標評價分為5個級別(好、較好、一般、較差、差)便于數據的分析與處理。評價項目包括基礎課教學質量、專業課教學質量、實踐性教學環節、實驗設備滿足教學情況等14項。
畢業生跟蹤與反饋系統的建設目的是通過收集畢業生的發展數據、畢業生對學校教學評價數據、用人單位對畢業生評價數據,通過利用數據挖掘技術與分析技術對數據分析,為學校學科建設、學生就業等決策提供依據。因此系統內容包括以下方面:
(1)整體評價分析
數據的整體分析主要實現對各個評價的統計分析,通過選擇評價分析結果查看該指標的具體分析結果。在指標分析中主要按照畢業年度維度分析指標的評價分析情況,以對參加調查的432名畢業生對指標1(基礎課教學質量)的評價結果分析為例,如圖1所示。

圖1 對基礎課教學質量的整體分析
(2)指標細化分析
指標的細化分析主要是對指標開展不同維度的分析,如用人單位對畢業生評價可以細化為按照年度分析、按照專業分析和按照學歷等具體維度開展分析。以對工作態度指標按專業分析為例,如圖2所示。

圖2 對工作態度指標按專業查看分析
畢業生及用人單位的反饋信息對就業、教師評價和學科建設有重要意義,分析的結果應用于以下方向:
畢業生的專業評價和用人單位的反饋情況為學校設置新的專業和專業方向提供重要的參考,尤其是畢業生與單位反饋的建議設置的專業結合用人單位反饋的年度專業需求數量及要求為專業設置提供了決策依據。
畢業生反饋當中對課程設置的必要性和課程內容設置的合理性反饋意見對專業的課程設置、課程內容和學時安排有重要的參考作用。而用人單位對畢業生的專業技能評價也能反應出課程設置的科學合理性。
通過系統逐年收集畢業生對任課教師的評價信息,通過對信息的分析掌握畢業生對教師授課評價的變化過程,包括相同學生不同階段的評價變化規律和不同學生相同階段的評價分析。通過以上的分析數據對改進現有的教師教學評價體系中的評價指標權重有重要意義。
畢業生的就業發展數據和用人單位的評價數據對開展畢業生的就業指導有重要的指導意義。可以將相關數據納入就業指導課程,使畢業班學生了解本專業的就業崗位變化規律。也可將數據用于就業辦在舉辦招聘會中有針對性的邀請參會單位[5]。
畢業生跟蹤系統收集到的畢業生就業與發展數據為學校校友會開展校友活動提供了相關的信息。同時通過校友會的揮動又進一步推動畢業生跟蹤與反饋活動的開展。
建設基于大數據的畢業生與用人單位反饋數據分析系統實現了收集畢業生對教學、就業等評價反饋數據,實現了對用人單位對畢業生的發展評價收集。在數據收集的基礎上進一步實現了對相關數據的分析和挖掘,尤其是對專業建設、學科建設、教學質量評價等相關的分析,有效彌補了現有教學質量評價的不足。通過數據分析發現專業設置、課程設置、教學方法與學生就業與成長之間的內在規律。通過分析畢業生和就業單位的視角提出的學科建設、教學評價數據,有利于從供給側優化中醫人才的培養方案。對相關數據的挖掘進一步為教學改革提供數據支持,使決策更加科學。