楊偉杰



[摘要]論述了基于Assessment Portfolios的教師教學質量過程性評價的概念和基本理念,根據其評價過程的特點和實際用戶需求,設計了系統的功能結構,提出了基于AssessmentPortfolios的教師教學質量過程性評價模式,完成了系統軟件的設計和開發,并投入使用,實現了教師教學質量評價活動的信息化管理,提高了評價的科學性和公平性,完善了評價指標體系、評價工作機制和反饋機制。
[關鍵詞]Assessment Portfolios;教學評價檔案;過程性評價;教師教學質量評價:系統設計
[中圖分類號]G40-057 [文獻標識碼]A [論文編號]1009-8097(2013)03-0100-05 [DOI]10.3969/j.issn.1009-8097.2013.03.020
一.引言
隨著我國高等教育的快速發展和改革深入,教師教學質量評價工作日益引起重視。教育部在《關于加強高等學校本科教學工作提高教學質量的若干意見》(教高[2001]4號)和《關于全面提高高職教育教學質量的若干意見》(教高[2006]16號文)中均指出教學工作是學校的中心工作,教學質量是學校的生命線,提高教學質量,關鍵在教師。
教師教學質量評價是教育質量控制的基礎性工作,是溝通教師、課程教學、學生和教學管理者的重要途徑,是教學改革的重要推手,是學校開展教學“質量工程”建設的一個重要的基礎工作。
在教師教學質量評價工作的實踐中,發現存在幾個問題:(1)工作信息化水平不高,采用網上評教加督導紙質聽課表統計的半手工方式,操作效率低下。(2)側重學生和督導為主的“他評”,容易忽視教師參與及自我反思的“自評”。(3)評價反饋滯后,針對性不強。學生網上評教的結果要在期末評價活動結束才反饋給老師,教師難以在教學過程中獲得反饋及時調整教學;督導聽課次數有限,與教師的交流時間不足;網上評教使用正方教務系統中集成的功能,不支持單門課程分析,教師看到總體評價分值,卻無法知道具體某門課程的評價情況。(4)注重對教師的“教”評價而忽視對學生的“學”評價,學生網上評價容易變成對教師印象的情感態度調查,忽視對學生學習情況和教學效果的調查和驗證。
為了解決上述問題,根據學校的實際需求,筆者為所在學校于2007年至2012年期間設計開發并不斷完善了基于Assessment Portfolios,由“學生、督導、系部同行”共同參與的教師教學質量過程性評價系統,在使用過程中完善了評價工作管理機構的工作業務流程,形成了有效的教學質量管理和保障機制,為全校師生接受,并在同類院系中得到推廣使用。
二.Assessment Portfolios與教師教學質量過程性評價
1.教師教學質量過程性評價
教師的教學是一種持續性行為,面對學生、教學內容和教學環境等諸多因素的差異和變化,其教學活動本身也是一種動態變化的過程。教師工作的復雜性決定了教師教學質量的評價過程也應該是一個定性評價和定量評價相結合的過程。為了避免只關注結果,而不重視教學發展和變化的過程,有必要采用過程性評價的方式,將形成性評價和終結性評價有機結合起來對教師的教學質量進行評價,從而使得教師的教學發展變化過程成為評價的組成部分。
2.基于Assessment Portfolios的教師教學質量過程性評價
Assessment Portfolios,可將其譯為評價檔案,是指依據預設的評價標準,例如評分指引、量表、清單和等級比例等系統地收集和評價學習者的工作情況信息(O'Malley&ValdezPierce,1996)。評價檔案的內容均按特定的規則評分,評價檔案的使用也被認為是一種標準參照式的評價。AssessmentPortfolios是教學檔案(Teaching-Portfolio)的一種類型,在本研究中,將其概念界定為針對教師的教學活動基于一定的標準、量表和程序產生的評價結果及相關過程性記錄的檔案文件。
基于Assessment Portfolios的教學質量過程性評價是指在教學實施過程中系統地、有目的地收集教師的教學情況及學生對教學的反饋情況方面的評價信息檔案,這些評價檔案源于包括學生、督導、同行、教師在內的多元評價主體依據一定的評價標準、量表和調查問卷等評價工具在教學實施過程的不同時期對教師的教學情況和學生的反饋信息進行記錄,通過對評價檔案的解讀,綜合地評價教師的教學質量的一種評價方法。
基于Assessment Portfolios的教學質量過程性評價具有如下優勢:(1)在教學的過程中評價,發揮評價的診斷導向作用,通過反饋使教學過程得到不斷優化,結合量化和質性評價意見,對教師的教學價值做出判斷。(2)采用多元主體評價的方式,綜合多方觀點和意見,評價的客體和主體共同參與,提高評價的科學性和公平性。(3)提供及時的評價反饋機制,結合形成性評價和終結性評價的優勢,提供教師在教學過程中發現問題并改進的機會。(4)從僅側重對“教”的評價過渡到對“教”與“學”并重的評價。(5)發揮Assessment Portfolios的教學反思和自我評價的功能,提供了具有時間跨度的持續性成長記錄手段,支持教師專業發展。
在國外,早在1980年加拿大大學教師協會就首次發布了教師檔案評價指南,而目前它仍是一種評價教師的權威資源。在美國,教學檔案在教師教育領域中廣泛使用,在州政府級別上教學檔案是獲得教師執照和換發新證的重要依據,在全國級別上,則用于認證高級教師(Ken Zeichner,Susan Wray,2001)。哈佛大學、哥倫比亞大學等著名學府均使用教學檔案以促進教師的教學績效和記錄教師專業發展;斯坦福大學在其教師評價計劃(Teacher Assessment Proiect)中采用“評價中心”及“教師教學檔案袋評價”的評價模式,研究發現雖然教學檔案有組織復雜、難以評分和不易解讀的不足,但教學檔案為學科教學與教師專業及個人發展的實現提供了一個有效連接,并能隨著時間流逝記錄教學(Wolf,Kenneth,1991)。在國內,受到教育管理體制、教學評估工作體系和發展水平的限制,國內高校的教師教學質量評價在理論研究上處于從獎懲性評價向發展性評價發展和逐步過渡的階段,在實踐和操作層面上仍以獎懲性評價為主。
綜上,開展基于Assessment Portfolios的教學質量過程性評價的研究有助于在適應現有獎懲性評價管理機制和方法的基礎上融入過程性方法和發展性評價理念,使之更為科學合理,也有助于推動它走向更全面的發展性評價。
三.系統需求分析
1.系統要解決的問題
實施教學質量過程性評價需要解決四個問題:一是過程性評價信息的記錄與存儲,即收集哪些可獲得的過程性評價信息是研究的關鍵;二是基于過程性評價信息來判斷教師的教學質量;三是通過多元評價為教師提供及時有效的反饋;四是基于具有一定時間跨度的、連續的評價結果和數據的變化來展示教師教學水平和專業發展的成長過程。
2.Assessment Portfolios的內容架構
從支持教學質量過程性評價的實施,評價結果反饋需要來看,評價檔案應主要收集以下幾個方面的內容,如圖1所示。
(1)課程信息記錄。包括課程名稱、課程編號、學生專業、教學班級、學生人數等信息,為教學調查提供支持。
(2)教學反饋信息。由學生信息員和學生在教學過程中不定期提交的關于教學情況的信息,它是在教學過程中及時改進教學質量的重要信息來源。
(3)多元評價記錄。多元評價記錄包括督導聽課記錄、督導評教結果、學生評教結果、同行評教結果和自我評價反思。督導聽課記錄由督導聽課后錄入系統。學生評教結果由評價管理機構在每學期網上評教結束后導入系統,學生評教結果反映教學手段、教學方法、教學態度、教學效果等基本維度的總體評價分數。同行評教結果由系部領導和本教研室教師現場觀摩聽課,綜合一定比例折算成績和給出質性評價意見。自我評價反思則記錄教師對教學的自我評價和反思。
(4)教學調查數據。教學調查可分為前期調查和后期調查,前期調查可了解學生的學習基礎、學習興趣、學習期望等。后期調查主要了解教學效果,包括對教學條件、教師教學態度、核心知識技能掌握情況、教學設備、教材選用和教學效果的調查。教學調查的結果直接反映了學生的學習績效和教師的教學質量。
(5)評價變化分析。評價變化分析提供橫向比較和縱向比較兩個維度的分析圖表。橫向比較記錄教師所獲分值與系部平均分值比較以及所在系部和學校排名情況。縱向比較記錄不同學期教師所獲分值與系部平均分值比較以及所在系部和學校排名情況的變化情況。
3.不同類型的用戶功能需求
(1)學院領導、系部領導可查看本人及權限范圍內教師的教學質量評價結果和分析報表及教學問卷調查結果。(2)督導可提交聽課記錄和指導建議,查看有關系部的教學質量評價結果。(3)教師可看到教學反饋信息,學生、督導、同行教學評價結果,并開展教學情況調查。(4)學生/教學信息員可在教學過程中對教學提交反饋信息。反饋信息包括:質量、教材使用、教學滿意程度等方面。(5)評價管理工作部門可設置不同類型課程評價指標體系和多元評價分值比例,管理各類型用戶信息,設置督導與教學機構關聯,導入,導出學生、督導和同行評教結果,導入/導出總體評價分值和排名信息,查看各類統計報表及設置系統各種參數。
四.系統設計
根據上述需求分析及實際評價工作中管理和具體實施的要求,形成的系統功能結構如圖2所示。
從軟件開發的角度分析,系統功能由用戶管理、評價檔案管理及系統參數管理三大模塊組成。用戶管理分為用戶類型管理、用戶權限管理和用戶賬戶管理三個模塊。評價檔案管理分為課程信息記錄管理、教學反饋信息管理、多元評價記錄管理、教學調查數據管理和評價分析報表管理五個模塊。系統參數管理則由評價指標體系管理、系部信息管理、督導系部關聯管理及數據庫配置四個模塊組成。
五.基于Assessment Portfolios的教師教學質量過程性評價模式
基于上述評價檔案內容架構的分析和具體評活動過程的分析,筆者將基于Assessment Portfolios的教師教學質量的過程性評價模式分為準備評價工具、執行評價活動和過程性反饋、收集評價數據、處理評價數據、生成評價結果、反饋評價結果共六個步驟。教師教學質量評價活動過程的主體包括學生、教師、督導和同行,此外還涉及學校的評價管理部門和各級領導。基于Assessment Portfolios的教師教學質量過程性評價系統在評價過程中為評價活動的實施提供了環境支持。整個評價活動的過程步驟、評價主體和產生的相關的評價檔案信息如圖3所示。
六.系統實現與應用
基于上述系統功能結構設計和評價模式分析,筆者設計并實現了基于Assessement-Portfolios的教師教學質量過程性評價系統,系統用C#語言開發,采用B/S結構在IIS+.NET+SQLServer2005環境下運行,用戶界面如圖4所示。
教師教學評價分數變化如圖5所示。
1.核心技術
(1)XML支持的評價指標體系指標動態生成技術。為了減少數據庫資源開銷和提高系統性能,評價指標項目和分值比例的設定均在完成數據庫寫入后動態生成對應的XML文件供頁面讀取。(2)基于開源.net控件ZedGraph的動態繪圖技術。涉及評價分數的縱向比較時要基于數據集合使用ZedGraph動態生成折線圖和柱形圖。(3)數據庫存儲過程技術。由于進行評價數據統計分析功能時涉及大量的數據讀寫操作,就要大量使用存儲過程來提高運算性能。(4)數據交換接口與Excel讀寫技術。在管理各類用戶、導入/導出評價結果和教學調查數據時均涉及Excel文件的在線讀寫技術。(5)調查問卷動態組卷技術。可根據需要選擇單選題、多選題、問答題來組成問卷,并在后臺記錄和計算調查結果。(6)系統頁面參數傳遞過程采用DES數據加密/解密技術,在教學反饋信息提交過程中使用了臟字過濾技術。
2.應用情況
經過2007年到2012年共四個版本的持續改進,系統已在廣東外語藝術職業學院和廣東文藝職業學院得到推廣使用。例如,從2007年至今(截止到2012年6月),廣東外語藝術職業學院有8個系部,596名教師,42名督導和近1萬8千名學生參與了教師教學質量評價活動。與以前相比,使用系統后該校的教師教學質量評價工作有以下改進:(1)本系統為教師教學質量評價工作的信息化管理提供了重要的軟件支撐環境,方便了相關數據的記錄和分析。據統計,7個學期總保存了2519條督導聽課記錄,2889條評價結果記錄,教師用戶平均活躍度為83.5%。(2)多元主體評價提高了評價的科學性和公平性,使指標體系和評價機制得到不斷完善。評價管理機構、教師代表和教學督導委員會共同參與了不同類型課程評價指標體系的制定,召開6次工作會議,將原來的單一標準改為包括公共課、理論課、實踐(實訓)課的多種標準,并對期末總分中的多元評價分值折算比例做出合理調整。(3)建立了教學信息員隊伍,暢通了學生反饋教學信息的渠道。在系統使用之初,發現主動使用反饋功能的學生人數不多,在經過宣傳及將反饋任務交由教學信息員來承擔后,反饋信息收集的及時性和質量有了明顯提高。(4)方便學校各級領導、教學管理部門和教師及時了解教學質量情況,形成了師生教學座談會的工作機制。根據反饋信息定期組織和召開有學生代表、教師代表、督導委員和系部領導參加的師生教學座談會可以及時地向系部反映系統中收集到的意見和建議,向學生做好解釋工作,對營造和諧的教學氛圍、促使教師改進教學有明顯的效果。(5)通過系統中評價數據的統計分析,督導聽課的方式由開始時全面鋪開發展到重點幫扶和引導,提高了督導工作的效率和針對性。(6)開展教學調查幫助教師了解學生學習情況,提高了教師改進教學的自覺性。例如,某系在2012年6月底使用問卷功能完成11門公共基礎課和專業核心課程的問卷調查分析,比起使用紙質問卷,工作效率有了很大提高,94.7%的任課教師表示,通過調查他們對任教課程中學生核心知識和技能的掌握情況、自己教學實施過程的不足之處有了更深刻和具體的了解和認識。(7)系領導通過報表的比較,能了解上同一課程的不同教師之間教學水平和教學滿意度的差異,對教學水平相對較差的教師開展有針對性的幫扶與引導,提高教師隊伍的整體教學水平。
七.結束語
本研究論述了基于Assessment Portfolios的教師教學質量過程性評價的概念,根據其評價過程的特點和實際用戶需求,設計了系統的功能結構,提出了基于Assessment Portfolios的教師教學質量過程性評價模式,完成了系統軟件的設計和開發,投入使用后解決了原有評價方式存在的一些問題。
系統經過幾年運行,積累了比較豐富的評價檔案和相關數據。如何結合實際情況對這些數據進行分析和梳理,發掘教師評價中存在的共性問題,深入探討影響教師教學質量的關鍵因素,進一步完善評價指標體系和評價管理機制,完善系統的功能和具體評價操作模式,都將是后續研究中值得關注的重點。
編輯:小西