勞林捷 羅海元
摘 要:公共管理類專業是管理學學科體系的重要組成部分,目前我校共設置了5個公共管理學科碩士授權點和公共管理碩士(MPA)專業學位授權點,雖然在教學評價方面已取得了一定的經驗,但是在教學效果評價的價值導向、具體做法和實際成效等方面仍存在一些問題或誤區。文章在借鑒科學管理理論方法和總結已有成功經驗的基礎上,采用問卷調查的方法,圍繞如何提高公共管理專業研究生教學效果評價工作科學化水平的問題展開研究,為完善我校課程教學評價體系和制度提供參考。
關鍵詞:公共管理類研究生;教學效果;評價體系
中圖分類號:G642 文獻標志碼:A 文章編號:2096-000X(2018)14-0144-03
Abstract: Public Management is an important part of the discipline system of Management. At present, there are 5 authorized Master's Degree progamme of Public Administration and authorized MPA professional degree programme. Although some experience has been gained in teaching evaluation, there are still some problems or misunderstandings in the value orientation, concrete practice and actual effect of teaching effect evaluation. Based on the theory of scientific management methods and successful experiences, the article adopts questionnaire survey method to study how to improve the scientific level of the evaluation of teaching effectiveness among postgraduates majoring in public management, so as to improve the evaluation system of the course teaching.
Keywords: postgraduate student in public management; teaching effect; evaluation system
一、研究背景與問題提出
公共管理類專業是管理學學科體系的重要組成部分,主要包括行政管理、公共事業管理、教育經濟與管理、城市規劃與管理、公共部門人力資源管理、土地資源管理、社會醫學與衛生事業管理等二級學科門類。教學效果評價是根據一定的教育目標,運用定量或定性的科學手段,對教育活動的成效進行分析并做出價值判斷,為教育決策提供依據的過程。它是教育活動不可或缺的一個重要環節,對于提升教育工作質量和調動教學雙方的積極性具有重要意義。為順應我國政府改革的歷史潮流以及經濟社會發展對公共管理人才的需求,中央財經大學于2006年7月組建了政府管理學院,在全國公共管理學科領域的競爭中贏得了先機,目前該校共設置了5個公共管理學科碩士授權點和公共管理碩士(MPA)專業學位授權點,在研究生教學科研工作中堅持理論教育和案例教學相結合,突出公共戰略和公共政策特色。雖然我校通過本科教學實踐和教學管理制度建設已積累了一定的經驗。但是,在教學效果評價的價值導向、具體做法和實際成效等方面仍存在一些問題或誤區。例如,學生在評價教師教學效果時普遍存在寬大化、集中化等傾向,對不同教師的評價結果基本一致;學生在評價過程中容易受個人偏見、動機、喜好等主觀因素的影響,使評價結果失準;教師有意無意的漏題行為能夠幫助其獲得學生的積極評價等。
目前我校公共管理碩士教學評價制度文本主要是《任課教師遴選與考核制度》和《課堂教學評估表》,在教學評價內容上主要評價課堂教學的教學態度(關注學生需求,備課充分;遵守教學紀律,按時上下課,不無故調、停課)、教學內容(架構清晰,案例使用得當;內容充實,授課條理清晰,重點、難點突出;理論聯系實際,能啟發思維;對提高研究生的學習能力、研究能力和創新能力有幫助)和教學方法(教學節奏控制有序;方法靈活、互動性強,有利課程內容掌握),設置了8個評估指標;在教學評價主體上主要采取學生網絡匿名評教(占測評總分的60%)和教學督導評教(占測評總分的40%)相結合的方式;在教學評價周期上學生評價采用隨堂評價,教學督導評價采用隨機評價;在教學評價方法上主要采用行為觀察量表法,根據單項評分合成評價結果;評價結果劃分為優秀、良好、一般、差共四個等級,是下學年取得任課資格的重要依據。
雖然目前我校公共管理碩士教學評價方案目的明確、內容簡約、操作方便,但科學性仍有待加強。評價內容還較為粗放且一些影響教學效果的重要因素未能納入其中;評價主體來源較少,可適當擴展;評價周期單一,未能將平時考核和周期性考核結合起來,存在評價結果受隨機因素干擾的可能;評價方法較為簡單,尤其是行為類指標在評價標準上未能細化,可能導致評價主體受主觀因素影響出現評價誤差;評價結果的應用范圍較小,反饋和激勵機制不完善。因此,本文在借鑒科學管理理論方法和總結已有成功經驗的基礎上,圍繞如何提高公共管理專業研究生教學效果評價工作科學化水平的問題展開研究,為完善我校課程教學評價體系和制度提供參考。
二、教學評價研究現狀
教學評價是高等教育學的重要研究領域之一,相關研究主要涉及教學評價的兩個方面,即對教師教的評價和對學生學的評價。目前,學術界相關研究主要集中在以下三個方面:(1)對高校教師教學效果評價的研究,這類研究不區分本科教學和研究生教學的層次性,也不針對特定課程或教學方法,僅就教師教學質量和教學水平進行分析。通常涉及教學效果評價的作用、問題、改進對策和建議,或評價內容、維度、標準、方法等。(2)教學效果評價方法的創新性研究,主要是運用統計手段將定量方法運用于教學效果評價的實證研究,多用于評價指標體系的設計。常見的方法包括層次分析法(孫玉榮,2010[1])、灰色關聯評價法、模糊綜合評價法、位置度量法(宋雅杰,2009[2])、質量圈循環管理等。(3)針對特定課程或教學方法的教學效果評價研究,主要是根據某些類型課程或教學方法的獨特性設計與之相匹配的教學效果評價體系,但目前的研究較少考慮教學層次和對象的差異性。如劉彥文等(2008)通過結合主成分分析和AHP法,進行聚類和降維,構建針對工商管理教學(MBA)的案例教學效果評價指標體系[3]。
但是從研究文獻來看,針對公共管理類專業研究生教學效果評價方面的專題性研究基本處于空白狀態,但也有一些學者已將研究視角投向公共管理專業或課程的教學研究上,目前主要是探討以案例教學為主的教學方法、影響教學質量的因素等方面。區晶瑩等(2013[4])以華南農業大學公共管理學院“辦公自動化應用”實驗課程為例,運用因子分析法對公共管理類實驗教學效果的影響因素進行實證分析。文華(2014)則是從學生評價視角對公共管理類專業課堂教學質量評價進行系統性實證研究。[5]以研究生教學層次為對象的研究在近年也不斷涌現,主要聚焦于研究生教學模式、研究生教學質量等方面的問題。李紅顏等(2007)研制了研究生用教學質量評估量表(GSEEQ),并初步評價量表的技術性能。[6]鄭冬梅(2009)根據研究生課程教學目標培養研究生知識創新能力這一總體指導思想,建立了教師評學、學生網上評教和教學督導組與專家評教相結合的評估方法。[7]
三、公共管理類專業研究生教學效果評價現狀分析與評價體系設計
(一)公共管理類專業研究生教學效果評價現狀分析
為掌握我校公共管理類專業研究生教學效果評價現狀和設計教學效果評價體系,針對相關情況和制度文本,本文采用問卷調查的方法進行研究。
1. 被試。以我院教師、2012級和2013級學術型碩士研究生和公共管理碩士(MPA)為調查對象,共發放問卷200份,回收有效問卷145份,回收率為72.5%。根據問卷回收情況,教師占樣本量的6.9%,學術型研究生占27.6%,公共管理碩士(MPA)占65.5%。2. 研究工具。基于文獻研究和對公共管理專業類專業研究生教學特點和影響要素分析,開發了《公共管理類研究生教學效果評價調查問卷》。問卷共4個部分:教學效果評價現狀、教學效果評價內容、教學效果評價過程和個人基本資料。其中教學效果評價現狀的條目為18個,教學效果評價內容的條目為34個,條目順序按隨機方法排列,均采用5級Likert標度法。3. 調查與統計方法。采用現場調查和郵件調查相結合的方法,調查對象以不記名、自行填表方式填寫問卷。采用Combach'α系數評價問卷的內部一致性信度;對人口統計學變量、教學效果評價現狀和評價過程進行頻次分析或統計描述性變量;對教學效果評價內容進行探索性因子分析。數據分析用SPSS20.0軟件處理。4. 調查結果。教學效果評價現狀14個題項的Combach'α信度系數為0.962,屬于高水平信度,調查數據反映的內容具有很高的一致性和可靠性。根據描述性統計,調查對象對現行教學效果評價工作的認可度均值區間為[3.61,3.94],處于認可度一般和比較認可之間,為中等水平。
(二)公共管理類專業研究生教學效果評價體系設計
根據教育測量與評估原理,建立公共管理類專業研究生教學效果評價體系的關鍵任務是設計評價指標、選擇評價主體、確定評價周期和選擇評價方法。在此,結合數據分析結果,分別闡述相應內容。
1. 評價指標設計
(1)指標的選擇。通過對大量文獻的查閱、對MPA學員的調查、對MPA中心工作人員的咨詢及MPA任課教師的咨詢, 本研究初步選擇了34個適合對公共管理類專業研究生教學效果進行評價的指標,并根據這34個指標進行探索性因子分析。
(2)因子分析。
Step1:指標數據標準化。本研究問卷采用5級Likert標度法,指標數據的標準化處理由SPSS 統計軟件自動完成。
Step2:因子分析適用性檢驗。通過SPSS軟件統計分析,可得到本研究KMO值為0.921,符合使用因子分析的標準。同時,Bartlett的球形度檢驗統計量的近似卡方值為4342.862,相應的概率P值接近于0,達到顯著水平,變量總體的相關矩陣間有共同因子存在,適合進行因子分析。
Step3:確定因子個數。進行因子分析,提取出各個變量之間的共同因子后,對重復載荷和載荷值低于0.6的因子進行刪除。
Step4:因子命名。采用正交旋轉最大變異法提取因子,得出方差最大旋轉矩陣,從旋轉后各因子結構及因子負荷值找出各個主因子包含的變量。對提取出的5 個因子分別進行內部一致性檢驗,5個因子的Combach'α信度系數均比較高,信度水平較高,內部一致性較好,基本反映了同一內容,可以對每個因子進行獨立命名。主因子1包括6個變量,主要反映的是教師在教學紀律、衣著舉止、完成任務和教學考核方面的專業形象和行為,故命名為“教師自我管理”;主因子2包括5個變量,主要反映的是教師對教學內容的安排和教學方法的選用,故命名為“教學內容與方法”;主因子3包括6個變量,主要反映的是教師對學生的支持和輔導以及教學資源和環境方面的支持,故命名為“教學指導與支持”;主因子4包括2個變量,主要反映的是最終體現出來的教學成果,故命名為“教學成果”;主因子5包括2個變量,主要反映的是教學內容與教學目的匹配性,故命名為“教學目的”。因此,通過主成分分析的公共管理類專業研究生教學效果評價指標體系包括5個維度和21個評價指標。
2. 評價主體選擇
恰當的評價主體應該是熟悉被評價者的職位職責且能夠觀察和了解被評價者工作狀況的人員。根據評價主體的人員類型不同,評價主體通常包括領導評價、學生評價、同事評價、校際同行評價和自我評價。本研究結果表明,按照評價主體重要性程度排序,對于學術型研究生教學效果評價而言,排序情況是“學生評價>自我評價>同事評價>校際同行評價>領導評價”;對于MPA教學效果評價而言,排序情況是“學生評價>校際同行評價>同事評價>領導評價>自我評價”。
3. 評價周期決策
評價周期決策主要是確定多長時間開展一次教學效果評價。目前,我院針對學術型研究生教學效果評價主要是以學期為單位由學生通過網絡評教,MPA教學效果評價主要是由學生隨堂通過紙質評估表進行評價。調查表明,在以月度、季度、學期、學年為周期的評價周期選項中,54.5%的被調查者認為以學期為單位開展公共管理類專業研究生教學效果評價是最佳決策。
4. 評價方法選用
評價方法是指評價主體按照一定的評價指標和標準對被評價者的實際工作表現作出價值判斷的方式。主要包括量表評價法、訪談評價法、委員會集體評議、學生署名書面評價和隨機課堂觀察評價。目前我院主要采用行為觀察量表法,通過書面評價和網絡評價相結合的方式進行教學效果評價。調查表明:無論是針對學術型研究生還是MPA的教學效果評價,在評價方法選擇上被調查對象都傾向于隨機課堂觀察評價、量表評價法和訪談評價,而委員會集體評價(即通常的小組評議)最不受歡迎的評價方式。
四、公共管理類專業研究生教學效果評價體系的應用方案探討
有關現行教學評價制度實施狀況調查結果表明,以下五個方面的工作應該著重加以改善:
(一)明確教學效果評價目的和評價原則
開展教學效果評價工作的目的不僅是教師選聘和獎懲,更要充分發揮教育評價的調節、激勵、改進功能,確立衡量教師的合理標準。通過評價過程的反饋作用,調動廣大教師的工作積極性,促使每個教師不斷總結、提高自己的教學水平和業務能力,同時也促進校院兩級不斷加強對教師整體隊伍的管理和建設,達到全面提高學校教育教學質量的目的。以此為目的開展教學效果評價就應當遵循客觀準確和公平公正的評價原則,確保教學評價結果能夠客觀反映一線教學工作的真實情況,準確衡量教師的教學成績和不足,公平對待每一位接受評價的教師,公正地開展每一次教學評估工作。
(二)完善教學效果評價標準和工作程序
調查顯示,49.6%的被試認為評價過程和評價結果應該公開、公平、公正。保證教學效果評價過程和結果客觀公正性的關鍵控制點在于完善教學效果評價的標準體系和建立規范透明的評價工作程序。在后續的研究或者應用方案開發中,可將公共管理類專業研究生教學效果評價指標進行行為等級劃分和等級描述,形成可操作的評價標準。在總結經驗基礎上,針對不同職稱層次的教師建立起分級評價標準體系,以提高評價的針對性和保證評價的公平性。在應用方案開發過程中,要加強對教學效果評價流程分析,明確全流程的控制節點及其銜接方式,確保評價工作運作順暢、落到實處。
(三)加強教學效果評價的組織工作
調查顯示,52.0%的被試認為評價內容(指標、標準)和程序規則的制訂應該廣泛征求師生意見。這說明程序公平相對于內容公平一點也不遜色,是提高師生對教學效果評價體系認可度和支持度的基本要求。從這個角度來看,教學管理部門應當加強教學效果評價的組織工作,深入分析每一個方案和流程以提高其科學性,仔細籌劃每一個目標和任務以提高其實效性。在組織實施過程中,應當建立起明確的工作責任機制,避免將教學效果評估的領導權和評估權混為一談。
(四)健全教學效果評價結果反饋機制
調查顯示,53.8%的被試認為教學效果改進應該落到實處。而教學效果改進的關鍵在于通過評價結果分析和診斷,找尋教學過程中存在的問題及原因,并制定切實有效的改進行動計劃。如果教學評價結果不能及時準確地得到反饋,教師的教學能力就難以得到提升,教學過程中存在的問題也會被忽視或掩蓋。因此要強化教學效果評價的溝通和反饋機制,明確結果反饋的主體、時間、內容、方式和具體責任,使其成為改進教學效果的長效機制。
(五)強化教學效果評價結果的應用
評價工作的受重視程度和對教學工作的推動力,取決于評價結果如何運用。通常,評價結果可以應用于教師選聘、崗位津貼、晉職晉級、派出進修、申報課題等方面。調查表明,73.8%的被試主張將教學效果評價結果運用于優化教學方案和改進教學質量。由此可見,在公共管理類專業研究生教學效果評價中,應該降低獎懲性評價的主導地位,而應該以教師的全面發展為主,以提高教師的教學質量為最終目的,從而滿足高等教育培養人才的需要。
參考文獻:
[1]孫玉榮,等.基于AHP的課程教學效果評價指標體系研究[J].湖南工業大學學報,2010(5):86-88.
[2]宋雅杰.基于位置度量法的高校教學效果評價模型[J].中國電力教育,2009(6):43-44.
[3]劉彥文,等.案例教學效果評價指標體系的實證研究[J].管理案例研究與評論,2008(4):69-75.
[4]區晶瑩,等.公共管理類實驗教學效果影響因素實證分析[J].實驗室研究與探索,2013(8):403-406.
[5]文華.新建本科院校公共管理類專業課堂教學質量評價實證研究——學生本位視角[J].職業技術教育,2014(17):38-42.
[6]李紅顏,等.《研究生用教學質量評估量表》研制初報[J].南方醫科大學學報,2007(6):853-856.
[7]鄭冬梅,等.研究生課程教學質量評估體系的探索與實踐[J].北京航空航天大學學報(社會科學版),2009(9):13-16.