關于教師網絡研修活動績效評估方法的研究

[摘 要] 文章對教師網絡研修活動的績效評估方法進行了系統的探究，包括教師網絡研修活動績效評估模型的構建、教師網絡研修活動績效評估指標體系構建以及教師網絡研修活動績效評估流程設計。通過教師網絡研修活動績效評估實例對研究成果進行了應用，得出兩點結論：1.教師網絡研修活動的績效評估要關注教師的課堂行為變化；2.針對教師網絡研修活動的績效評估，將內容分析法與知識測試法結合，可以使教師網絡研修活動對教師專業知識的影響的評估更加全面，也可以使兩種評估方法互證，提高績效評估的信度和效度。

[關鍵詞] 教師網絡研修； 績效； 評估

[中圖分類號] G434 [文獻標志碼] A

[作者簡介] 欒學東（1968—），女，北京人。副編審，碩士，主要從事教師教育、職業教育、現代教育技術研究。

一、問題引入

教師網絡研修活動是指來自不同地區的教師為了專業發展，借助網絡學習支持平臺所參與的各種正式的或非正式的專業學習活動，其目的是獲得教師的實踐性知識發展，獲得教師教學行為的改進。近年來，教師網絡研修活動由于其時空分離所帶來的開放性和靈活性，能夠滿足教師隨時隨地進行專業和情感交流需要，得到各國教育部門和教育工作者的重視。[1]然而，教師要實現實踐性知識發展，教師網絡研修活動必須符合教師實踐性知識的基本特征。陳向明教授認為，教師的實踐性知識以隱性知識為主，不能以正規形式加以傳遞，[2]而隱性知識是通過非正式途徑共享的，[3]因此，教師難以通過講授式的正式學習獲得實踐性知識。所謂非正式學習是指在非正式學習時間和場所發生的、通過非教學性質的社會交往來傳遞和滲透知識，由學習者自我發起、自我調控、自我負責的學習。[4]然而，由于工學矛盾，以及網絡學習難以像正式培訓那樣進行統一的管理，對于成人學習者來說，使得非正式學習存在持續性和研修質量等問題。[5]因此，要確保教師參與網絡研修活動的質量，一方面需要專家等在教師網絡研修活動設計和活動過程中的指導等方面給予支持；另一方面，要提供更為有效的教師網絡研修活動的績效評估方法。而后者的重要性體現在研修活動的質量把關作用，同時也起到了引導教師網絡研修活動的發展方向。因此，本研究對于教師網絡研修的發展具有重要意義。

二、國內外相關研究成果及其對本研究的啟示

教師網絡研修活動的目標是發展教師的實踐性知識，改進教師教學行為。[6]由于教師實踐性知識以隱性知識為主，因此，教師網絡研修活動質量評估一方面要采用適合隱性知識的評估方法，另一方面要注重教師知識學習及知識在教學實踐中應用能力的評估。

在隱性知識評價的研究中，研究者針對不同組織內的隱性知識評估方法的研究大多采用以不同角度對隱性知識評價指標體系進行研究。例如，Sternberg等提出管理者隱性知識量表（Tkim，Tacit Knowledge Invertory for Managers）；[6]王前等從知識的廣度和深度、取向比類的能力、運用意向的能力、隱性知識的相對績效和知情意相貫通能力等五個方面來設計個體隱性知識的評價體系；[7]余菲菲等建立了基于不同權重層次的隱性知識量化評估層次模型，從隱性知識可編碼化程度、知識擁有者知識傳授能力、知識需求者學習能力、技術手段等維度將定性和定量方法有機結合，為隱性知識交流和共享活動評價提供了工具。[8]可見教師網絡研修活動效果評估前也需要構建符合活動目標和任務的指標體系和評估標準。

對于知識學習和使用效果評估應用最為廣泛的評估方法是柯氏四級培訓評估法。[9]柯氏評估方法是國際著名學者、威斯康辛大學教授唐納德﹒L.柯克帕特里克于1959年提出的，是世界上最早、應用最廣泛的培訓評估工具之一，簡稱4R評估法。它主要包括四個評估級別，即反應評估、學習評估、行為評估、成果評估。

第一級：反應評估，測定被培訓者對培訓的滿意度；

第二級：學習評估，測定被培訓者知識獲得程度；

第三級：行為評估，考察被培訓者的知識運用程度；

第四級：成果評估，判斷培訓項目對被培訓者所在組織創造的效益。

王陸針對教師在線實踐社區COP這一具體情境，提出了采用波普爾科學知識增長分析模型動態的研究教師實踐性知識的方法與技術，為研究教師實踐性知識的增長提供了一個新視角。[11]

教師網絡研修活動績效是指參與教師在開展活動過程中獲得的知識、技術、技能轉化應用到實際工作中，通過個人績效的提高對團隊績效、學校績效產生的影響。由此可見，柯氏四級評估方法對教師在教師網絡研修活動中的滿意度、實踐性知識獲取、知識應用而獲得教學改進效果以及對參與活動教師所在學校的影響等評估具有實際意義。

三、教師網絡研修活動的績效評估模型

所謂教師網絡研修活動的績效評估，是指憑著對照活動目標和量化的績效指標和評價標準，采用一定的評價方法評價教師參與活動過程、完成活動任務情況以及教師的專業發展情況等，并將上述評估結果反饋給教師和活動設計者，以便改進活動設計和實施方法，提高教師網絡研修活動效果。為了體現教師網絡研修活動核心目標與發展方向，本文設計教師網絡研修活動績效評估模型借鑒柯氏培訓評估方法，分為四個維度，即反應評估、學習評估、行動評估和成果評估。如圖1所示。

從圖1可見，教師網絡研修活動績效評估模型依據柯氏培訓評估方法的四個維度對教師網絡研修活動進行績效評估。“反應評估”從教師對活動滿意度的角度進行評估，其評估目標是考察教師網絡研修活動是否能夠滿足教師的專業發展需要，獲取活動改進的建議；“學習評估”則從教師實踐性知識發展的角度進行評估，其評估目標是評估教師網絡研修活動能否帶來參與活動教師的實踐性知識發展；“行動評估”是從實踐性知識應用的角度進行評估，其評估目標是評估教師網絡研修活動對教師的課堂教學實踐行為的影響；“成果評估”是從參與網絡研修的教師所在學校的教師整體素質的角度進行評估，其評估目標是評估教師網絡研修活動能夠使參與教師回到學校，帶動學校的校本研修的發展，進而促進學校教師整體專業發展。教師網絡研修活動績效評估的四個維度之間的關系是：第一，四個評估維度是有先后順序的，其順序是反應評估→學習評估→行為評估和成果評估，前一個評估階段是后一個階段的基礎。第二，教師網絡研修活動的績效評估又是一個循環往復的過程。績效評估的主要目的是通過評估，改進活動，提升活動效果，即經歷評估—改進—開展活動—再評估的過程。為此，成果評估階段結果又影響反應評估階段，成果評估結果直接導致學校領導對活動的滿意度，提出活動有待改進問題，使績效評估進入新的一輪循環。

圖1 教師網絡研修活動績效評估模型

四、教師網絡研修活動評估指標體系的構建

教師網絡研修活動評估指標體系依據教師網絡研修活動績效評估模型分為四個部分：活動滿意度評價、教師實踐性知識提升效果評價、教師教學實踐改進效果評價以及對教師所在學校的影響效果評價。

1. 構建方法

教師網絡研修活動評估指標體系構建采用德爾斐（Delphi）方法。德爾斐法也稱專家小組法或專家意見征詢法。該方法是一種采用通訊方式分別將所需解決的問題單獨發送到各個專家手中，征詢意見，然后回收匯總全部專家的意見，并整理出綜合意見。德爾斐法的典型特征是：其一，邀請相關領域專家參加，充分利用專家的經驗和學識。其二，采用匿名或背靠背的方式，能使每一位專家獨立自由地作出自己的判斷，確保專家之間不得相互討論。其三，通過多輪次調查專家對問卷所提問題的看法，經過反復征詢、歸納、修改，使專家的意見逐漸趨同，最后匯總成專家基本一致的看法。經過上述過程，對專家的意見進行綜合處理，最終概括出了教師網絡研修活動評估指標體系，分為4個一級指標、20個二級指標、55個三級指標的完整的指標體系。

2. 教師網絡研修活動的質量評估體系

教師網絡實踐共同體研修活動質量評估的內容應從教師網絡研修活動目標出發。其評估內容包括三個大的方面：教師對教師網絡研修活動的滿意度評價、教師網絡研修活動對教師的實踐性知識發展影響的評估，以及教師網絡研修活動對項目學校發展的影響評估。

教師實踐性知識發展的評估是以教師研修行為和教學行為導向的真實性評估，即以教師參與網絡研修活動過程的行為和教師教學實踐過程中的行為為主要評估依據。圖2構建了面向教師實踐性知識發展的兩層教師網絡研修活動質量評估體系。該體系包括四個一級指標，每個一級指標又包括若干個二級指標，每個二級指標又包括若干三級指標。

圖2 教師網絡研修活動質量評估體系

上述四個一級指標分別對應著柯氏的“反應評估”、“學習評估”、“行為評估”和“效果評估”，是這四個方面在教師網絡研修活動評估的具體化，且四個方面從不同角度突出了教師網絡研修活動對教師課堂教學能力發展的影響評估。這是因為教師專業能力的最直接體現是課堂教學，教師在其教學理念、信念和觀念等深層次因素支配下，其課堂教學行為就會發生改進，且課堂教學行為的改進就成為提高課堂教學質量的實質性問題。[10]因此，只有把教與學的過程放在第一位時，評估才會真正成為“具有利害關系”的評估方式，也就是真實性評估。[11]

五、教師網絡研修活動的績效評估流程

根據教師網絡研修活動質量評估體系和評估模型，本研究提出了一種教師網絡研修活動的績效評估的流程。如圖3所示。

圖3 教師網絡研修活動績效評估流程

圖3所示的教師網絡研修活動評估流程是從反應評估—學習評估—行為評估—結果評估的串行評估過程，前面評估環節是后邊的基礎。反應評估結果可以表明活動參與者對活動的滿意度，若獲得負面反應，則學習者對活動就不會有熱情，難以達到活動目標。學習評估能夠反映活動對促進學習者教學態度轉變、知識擴展和技能提升等方面的效果。若學習者在學習評估中未能獲得好的評估結果，就不可能引起課堂教學行為的改進。行為評估結果體現了活動促進學習者教學行為轉變的效果，當教師網絡研修活動成為學校教師群體的研修活動時，教師群體教學行為轉變效果將影響學校的教學質量和專業發展。結果評估則是活動對學校發展的影響效果的評估。在圖3的活動流程中，每個評估環節均依據評估內容設計了不同的數據收集、處理方法和流程。其中，反應評估主要以在線問卷調查為主；學習評估主要以教師提交的反思日志和活動的作業等文字的內容分析為主；行為評估則通過教師自我反思，以及專家、同行等對教師參與活動前后課堂實錄、教學設計的觀察和分析為主；結果評估則通過對學校各級領導、一線教師和學生的訪談等獲得。需要說明的是反應評估和學習評估能夠在短時間內得到評估結果，而教師行為轉變則需要教師在消化吸收的基礎上在適當的教學情境中體現其知識應用過程。同樣，對于項目學校的結果評估也是需要一年乃至更長時間才能有效果顯現，因此往往不能很快得到評估結果。

六、教師網絡研修活動績效評估實例分析

基于教師網絡研修活動評估模型、評估指標體系和評估流程，本研究針對為期一年的廣西初中教師的遠程校本研修活動進行了績效評估。該活動目標是通過網絡研修活動提升教師實踐性知識，改進教師的教學行為。有47所學校五百余名多學科的初中教師參與該項目。本研究對為期一年的教師網絡研修活動進行了反應評估等四個環節的評估。本文主要介紹學習評估過程和結果。

本研究對廣西教師網絡研修活動的學習評估方法主要是內容分析法。所謂內容分析法是一種對文字、圖形、符號等資料，根據研究的目的對其進行系統化、條理化的加工，然后用逐步集中和濃縮的方式將資料的意義反映出來，并最終對資料進行意義解釋的一種研究方法，[12]針對教師網絡研修活動不同階段中教師在論壇的發帖和提交的教學設計、反思日志、數字故事DST等作品內容，根據本研究團隊所建立的教師實踐性知識指標體系進行內容分析，對獲得的量化數據進行統計。按照教師參與網絡研修的時間和子活動交替時間，將教師網絡研修活動分為三個階段，獲得三個階段的教育信念、教學策略知識和反思知識的平均水平，通過比較分析，得出教師參與教師網絡研修活動對教師群體三種實踐性知識的影響。

1. 教育信念

在教育信念評估指標體系中，從兩個維度來描述實踐性知識中的教育信念：教師對教育原則的信奉和教師對待教育工作的信念。教師信奉的教育原則有：科學性和思想性統一的原則、理論聯系實際原則、啟發性原則、因材施教原則等指標維度。教師對教育工作的信念有：發揚積極因素、克服消極因素原則，嚴格要求與相互尊重相結合原則，對教師職業的信念等維度。教師網絡研修活動對教師教育信念發展影響效果的評估結果如圖4所示。

圖4 教師網絡研修活動中教師教育信念發展趨勢

在教師網絡研修活動中，教師及其團隊在不同階段提交了多種文字作品，且論壇成為教師主要交流的場所。通過對這些文字作品及帖子的內容分析，得到教師作品在活動不同階段的教育信念平均水平。圖4體現出教師的作品和帖子都顯示出教育信念呈現明顯上升趨勢，說明教師網絡研修活動對教師教育信念具有正向促進作用。

2. 策略性知識

策略知識是教師在對所教科目及其目標了解和理解的基礎上，整合了學科內容、學科教學法、教育學理論等，將原理知識運用到教學中的具體策略，包括對課程內容和教學方式的選擇和安排，對教學活動的規劃和實施，對教學方法和技術的采用，對特殊案例的處理等。[13]本研究依據教師策略性知識評估指標體系，對教師的策略知識從三個維度進行評估：教學準備策略、教學實施策略及教學監控策略。教學準備策略細化為：教學目標分析策略、教學主題分析策略、教學材料的選擇策略等。教學實施策略包括課堂中教學內容的傳輸與加工策略、認知指導策略、課堂秩序管理策略、信息技術與課程整合策略等。教學監控策略細化為：教學反饋策略、教學評價策略等。教師網絡研修活動對教師策略知識發展影響效果的評估結果如圖5所示。

圖5 教師網絡研修活動中教師策略知識發展趨勢

在教師網絡研修活動中，教師及其團隊在不同階段提交了課堂教學設計、說課和教學反思等文字作品，并且通過論壇發帖對課堂教學問題進行交流。通過對這些文字作品及帖子的內容分析，得到教師在活動不同階段的教學策略知識的平均水平。圖5表示了教師的作品和帖子所含的教學策略知識呈現明顯上升趨勢，說明教師網絡研修活動對教師策略性知識具有正向促進作用。

3. 反思性知識

教師反思性知識指教師的反思是一種實踐取向的反思，表現為“對實踐反思，在實踐中反思，為實踐而反思”[14]。本研究借鑒Parks-Langer 等提出7級教學反思水平，[15]對教師的反思性知識從7個層次進行評估：呈現層、一般描述層、專業描述層、初級解釋層、高級解釋層、綜合分析層和批判性反思層。得到教師網絡研修活動對教師反思性知識發展影響效果的評估結果如圖6所示。

在教師網絡研修活動中，教師及其團隊進行了個人反思和集體反思等多種類型反思活動，教師交了個人反思日志、課堂關鍵事件敘事、教育故事DST、集體反思報告等文字作品，并且通過論壇發帖對自己的教學反思觀點進行交流。通過對這些文字作品及帖子的內容分析，得到教師在活動不同階段的反思性知識的平均水平。圖6表示了教師的作品和帖子所含的教學反思性知識呈現明顯上升趨勢，說明教師網絡研修活動對教師反思性知識具有正向促進作用。

圖6 教師網絡研修活動中教師反思性知識發展趨勢

七、研究結論

文章對教師網絡研修活動的績效評估方法進行了系統的探究，包括教師網絡研修活動績效評估模型的構建、教師網絡研修活動績效評估指標體系構建以及教師網絡研修活動績效評估流程設計，并在廣西教師在線校本研修活動的績效評估中得到應用。研究表明：（1）教師網絡研修活動以發展教師實踐性知識為核心。實踐性知識的情境性則意味著教師網絡研修活動的績效評估要結合課堂情境。如學習評估中對課堂的教學設計、課堂教學反思日志等的內容分析，行為評估中對教師課堂教學的觀察和分析等，都是教師網絡研修活動績效評估的重要方法。（2）針對教師網絡研修活動的學習評估。相對于測試法，采用對教師提交的各種文字作品進行內容分析的方法有利于更加真實反映教師對專業知識的掌握程度。但是作者通過對教師網絡研修活動進行學習評估的實踐發現，采用對文字作品的內容分析法評估教師網絡研修活動對教師的專業知識發展的作用時，評估的教師專業知識很難全面。因此，如果將內容分析法與知識測試法結合，可以使教師網絡研修活動對教師專業知識影響的評估更加全面，也可以使兩種評估方法互證，提高績效評估的信度和效度。