☆藍曦 王凱麗
(沈陽師范大學教育技術學院,遼寧沈陽110034)
中小學教師信息技術應用能力評價量規的設計研究*——以基于案例的情境測評為例
☆藍曦 王凱麗
(沈陽師范大學教育技術學院,遼寧沈陽110034)
根據遼寧省中小學教師信息技術應用能力提升工程要求,開展基于案例的情境測評,設計不同信息化教學環境下中小學教師信息技術應用能力評價量規。采用特爾斐法、層次分析法確定評價量規的指標體系和指標權重,采用專家咨詢法對量規進行效果評價,設計針對四種信息化教學環境的評價量規,以期通過日常教學情境客觀、科學地評價教師信息技術應用能力提升的效果,為中小學教師信息技術培訓評價質量提供有力的保障,進而有效地利用信息技術促進教師專業發展。
教師信息技術應用能力;情境測評;評價量規
教師隊伍建設是教育信息化可持續發展的基本保障,信息技術應用能力是信息化社會教師必備的專業能力之一。為貫徹落實國家教育信息化總體要求,全面提升教師信息技術應用能力,教育部決定實施以全面提高中小學教師隊伍整體素質、促進教育均衡發展為宗旨的全國中小學教師信息技術應用能力提升工程(簡稱“能力提升工程”),并在“關于實施全國中小學教師信息技術應用能力提升工程的意見”中,提出要“開展信息技術應用能力測評,以評促學,激發教師持續學習動力”,“省級教育行政部門組織本地區中小學教師信息技術應用能力全員測評,通過案例開展情境測評,以評促學、以評促用。根據能力測評指南,創新測評方式,探索開發適合本地實際的測評工具,建立網絡測評系統,完善測評體系,為教師提供便捷有效的測評服務。”根據《中小學教師信息技術應用能力測評指南》的要求,教師信息技術應用能力測評內容包含診斷測評、培訓測評和發展測評三個方面。遼寧省結合本地實際,開發中小學教師信息技術應用能力發展測評平臺,將發展測評分為觀摩與點評、錄制與上傳和評定與建議三個階段。情境測評就是在錄制與上傳階段,針對教師上傳的不同的日常教學情境案例進行測評。
(一)教師信息技術應用能力評價內涵
中小學教師信息技術應用能力是指中小學教師運用信息技術改進其工作效能、促進學生學習成效與能力發展,以及支持自身持續發展的專業能力。應用信息技術優化課堂教學的能力主要包括教師利用信息技術進行講解、啟發、示范、指導、評價等教學活動應具備的能力;應用信息技術轉變學習方式的能力是發展性要求,主要針對教師在學生具備網絡學習環境或相應設備的條件下,利用信息技術支持學生開展自主、合作、探究等學習活動應具有的能力。
教師信息技術應用能力測評內容包含診斷測評、培訓測評和發展測評三個方面。遼寧省基于網絡的中小學教師信息技術應用能力發展測評過程,在錄制與上傳階段,每位教師根據特定的信息化教學環境,上傳其信息技術與課程整合的說課視頻及完整的案例視頻。情境測評就是在此階段,由專家對教師上傳的各情境案例進行測評,以幫助教師了解自身信息技術應用能力提升程度,科學評價教師信息技術能力發展水平。測評內容應密切聯系教師一線教學和專業發展實際,且能夠反映教師應用信息技術優化課堂教學、轉變學生學習方式、促進自身專業發展的程度。
本研究針對教師在簡易多媒體環境、交互多媒體環境、網絡教學環境和移動學習環境下應用信息技術的教學案例視頻,為中小學教師信息技術應用能力發展測評平臺分別設計出這四種環境下的案例評價量規,以期通過日常教學情境評價教師信息技術應用能力提升的效果,進而有效促進教師專業發展。
(二)國內教師信息技術應用能力評價的研究現狀
通過中國知網(CNKI)數據庫,搜索主題“教師信息技術應用能力評價”,對《中國電化教育》、《電化教育研究》等核心期刊文章檢索,共檢索出相關論文19篇,且通過這些文獻可以看出,國內學者主要對教師信息技術應用能力培訓中的評價體系(包括過程性評價指標體系與總結性評價指標體系)的構建作了研究。
龍麗嫦、楊琳在研究中提出應用比較研究法等針對教師信息技術應用能力培訓建立評價指標體系,并通過行動研究對評價工具、操作流程、操作方法等進行修正,建立了完整的評價體系,且通過培訓進行了效果驗證。張生、何克抗、韓駿等針對培訓過程性評價進行了以下幾方面的分類:按照評價主體劃分為學員自評、同伴互評和教師評價三類;按照評價的規范程度分為程序式評價與隨機式評價,評價工具包括操作測試、評價量規、問卷調查、課堂記錄觀察和學習檔案袋等。馬玉慧、郭炯等對中小學教師信息技術應用能力培訓總結性評價指標體系進行了研究,基于柯克帕特里克包含反應、學習、行為和結果四個層次的評價模型,提出了評價指標構建過程:目標分解,將體系的指標項分成不同的層級指標,基于模型理論按照不同層次,結合中小學教師教育技術培訓的特點,構建總結性評價指標體系;確定每層指標項間的比較權重,最終初步確定各指標項的權重;采用Delphi法對初始權重進行檢驗和論證。
以上對于教師信息技術應用能力培訓的評價研究為本研究提供了借鑒與參考。在中小學教師信息技術應用能力培訓的起步階段,結合發展測評的目標,通過案例開展情境測評的機制與方法有待從設計的科學性、合理性等方面深入研究,教師信息技術應用能力提升情況的評價方案對于現階段的基礎教育信息化內涵式發展有著重要意義。
(一)量規的評價目的和評價對象
評價的目的:開展信息技術應用能力測評,以評促學,激發教師持續學習的動力,提升教師信息技術應用能力、學科教學能力和專業自主發展能力,推動教師在課堂教學和日常工作中有效應用信息技術,促進信息技術與教育教學深度融合。
評價對象:中小學教師的信息技術應用能力水平。
(二)評價量規指標的確定
1.對初擬指標進行篩選
根據能力提升工程要求來評價教師應用信息技術優化課堂教學的能力、應用信息技術轉變學習方式的能力,劃分水平維度包括總體指標、權重、結構指標、單項指標和等級,垂直維度包括八個結構指標和二十七個單項指標。運用項目分析檢測量規指標的適合或可適程度,刪除沒有區分力、效度不高的指標,對各項指標進行相關性分析及共線性檢驗,將內涵相同的指標加以合并,互相矛盾的指標要去偽存真,有因果關系的正本清源,按照指標體系的設計原則,即與目標的一致性、直接的可測性、體系內指標的相互獨立性、指標的可比性、可接受性、指標體系的整體完備性,共擬定了七個結構指標和二十個單項指標。
2.運用特爾斐法設計評價指標體系
特爾斐法需要反復向專家進行問卷調查,專家之間不見面,專家們就可以自由的發表意見,不會受到上下級關系、職位高低、年齡大小、資歷深淺、語言表達能力等因素的困擾,這樣可最大限度地挖掘專家的潛能,集中專家的經驗和智慧,便于達到最佳效果。本研究選擇了20位專家進行問卷調查,調查本研究設計的量規指標的科學性及可行性,其中,10位是對本領域有深入了解的研究生導師,另外,10位是基礎教育信息化工作中具有豐富經驗的電化教育館的教學研究人員。將第一輪的調查問卷收回后,對專家的意見、看法作以總結,即調整結構指標,重新設計“教學目標”這一指標,增加“個性化教學”指標,補充與細分“教學資源”的單項指標,增加“教學過程”指標的權重等。對這些專家進行第二輪調查,調查時將專家本人第一輪的調查表的意見、看法與第一輪總體調查小結一并帶給專家,專家參考總體調查小結對自己原來的意見、看法進行修改。將第二輪的調查問卷收回后,對專家在第二輪的意見、看法進行歸類整理、分析綜合,再次做出總結,調整結構指標,將個性化教學設定為“教學視頻”,修改并完善“教學過程”和“教學資源”的單項指標。
3.確定評價量規指標
將評價目標分解成六個結構指標(教學設計、教學過程、教學方法、教學資源、教學效果和教學視頻)和二十個單項指標。針對不同的信息化教學環境設計的四個評價量規結構指標相同,單項指標根據不同的教學環境的特點而有所不同。
(三)評價量規權重的分配和確定:層次分析法運用層次分析法,將確定的六個結構指標即教學目標(A)、教學過程(B)、教學方法(C)、教學資源(D)、教學效果(E)、教學視頻(F),兩兩進行比較,確定其等級分別為1、3、5、7、9,結果如表1所示。

表1 結構評價指標等級比較結果
該比較結果可用矩陣表示為:

對矩陣G的每一列進行歸一化處理,并將歸一化處理結果用矩陣表示為:

將矩陣H的每一行相加,得到一列矩陣:

對矩陣I的一列數據進行歸一化處理:0.31+3.23+ 1.76+0.60+0.60+0.31=6.81,0.31/6.81=0.05,3.23/6.81= 0.47,1.76/6.81=0.26,0.60/6.81=0.09,0.60/6.81=0.09,1-(0.05+0.47+0.26+0.09+0.09)=0.04。
可確定A、B、C、D、E、F六個指標的權重:教學目標(5%)、教學過程(47%)、教學方法(26%)、教學資源(9%)、教學效果(9%)和教學視頻(4%)。各結構指標權重的大小代表各指標在本量規中的重要程度,且可作為下一步評價量規分數設定的基礎。
(四)評價量規等級和分數的設定
本研究中評價量規設為五個等級,依次是:優秀、良好、中等、合格和不合格,分別用X1、X2、X3、X4和X5表示。以結構指標“教學過程”為例,其所占權重為47%,也就是說,如整體評價滿分為100分,則“教學過程”指標滿分為100*47%=47分。將該結構指標的分值按照四個等級進行劃分:若滿分為100分,規定90分及以上為優秀,80分及以上至89分為良好,70分及以上至79分為中等,60分及以上至69分為合格,60分以下為不合格。以“教學過程”指標為例,因其滿分為47分,其X1(優)的等級臨界值為90%*47=42.3,取整數,則X1(優)的分值區間為[42,47]。同理,X2(良)分值區間為:[38,42),X3(中)的分值區間為:[33,38),X4(合格)的分值區間為:[28,33),X5(不合格)的分值區間為:[0,28)。依此法可確定其它指標的分值區間。
依據上述過程確定各項評價指標、項目權重和等級劃分,并結合評價內容以及有效評價量規的特點,設計出四個評價量規。以網絡教學環境為例,其教學視頻案例評價量規如表2所示。

表2 網絡教學環境下教學視頻案例評價量規

總體指標權重9 %結構指標良好中等合格不合格得分5分0-4分8-9分3分教學效果教學視頻3分4分等級優秀單項指標1.學生學習興趣濃厚,積極主動,參與度高,課堂氣氛活躍,在學習活動中獲得良好體驗;2.完成既定教學目標,不同層次學生學業水平在原有基礎上都得到提高;3.學生的學科思維和實踐能力得到有效發展,能結合學科特點滲透育人目標。1.視頻畫質清晰、分辨率高;2.錄像方法正確:構圖合理、角度恰當、布光準確;3.錄像技術專業:能夠靈活運用固定或運動鏡頭、變焦鏡頭捕捉近景、中景和全景。3分1分1分2分7分6分4% 3分2分1分0分綜合評價等級總分
采用專家咨詢法對量規的評價效果進行再評價:請之前的20位專家試用評價量規進行一輪測試,分別選取四個環境下的若干視頻案例進行評價,對專家就以下問題進行訪談:
評價量規整體上是否能全面體現評價目標?能否突出四個教學環境的特點?
量規各個指標的權重分配及等級劃分是否合理?
量規的結構是否層次分明、主次得當?有無違背設計原則的地方?
量規的可行性如何?量規是否具有直接可測性?是否能夠直接反映教師信息技術應用能力的實際情況?
量規的效度如何?能否達到評價的預期目的?
通過訪談,半數以上的專家認為本評價量規從整體上來看能夠全面體現評價目標;各個指標的權重分配和等級劃分合理;結構分明,主次得當,無違背設計原則的地方;評價量規具有直接可測性,能夠直接反映教師信息技術應用能力的實際情況;能夠達到評價的預期目的,因此,具有一定的可行性及科學性。但仍存在一些問題需要完善,如:建議在量規中突出四種教學環境的更多特點;單項指標的描述建議更明確、具體、方便辨別等。針對這些不足和建議,在今后的研究中會對量規做進一步的修改和完善。
本研究主要采用特爾斐法、層次分析法,設計了基于四種信息化教學環境下教師信息技術應用能力視頻教學案例評價量規,并運用專家咨詢法,對評價量規的評價效果進行再評價,證明了量規具有一定的科學性及可行性。量規可供信息技術應用能力培訓平臺的專家評價以及同行互評,量規也可為教師信息技術應用能力培訓中個性化活動的推薦提供有力的依據。
[1]教師[2013]13號文件“教育部關于實施全國中小學教師信息技術應用能力提升工程的意見”[EB/OL].http://www.doc88.com/ p-7018897511247.html.
[2]教師司函[2014]55號文件“中小學教師信息技術應用能力測評指南”[EB/OL].http://www.lzjklxx.com/article/8c1c7136-6a36-4dc7-8656-933c00cc9198.shtml.
[3]祝智庭,閆寒冰.《中小學教師信息技術應用能力標準(試行)》解讀[J].電化教育研究,2015,(09):5-10.
[4]教育部“全國中小學教師信息技術應用能力標準(試行)”[EB/OL].http://baike.so.com/doc/7914277-8188372.html.
[5]龍麗嫦.中小學教師ICT技能評價體系的研究[J].中國電化教育,2012,(12):64-68.
[6]楊琳.基于Web2.0的高校教師教育技術能力評價指標體系研究[J].中國電化育,2013,(01):59-62.
[7]張生,何克抗,韓駿.中小學教師教育技術能力培訓中的形成性評價指標體系的構建[J].中國電化教育,2007,(05):11-14.
[8]談成訪.中小學教師教育技術能力培訓中過程性評價研究[D].南京:南京師范大學,2007.
[9]張生,何克抗,齊媛,丁楠.網絡環境下基于學習活動的形成性評價——中小學教師教育技術能力培訓個案研究[J].現代教育技術,2007,(10):82-90.
[10]張生,韓駿,王麗娜,齊媛.中小學教師教育技術能力培訓過程中的評價方式研究[J].中國電化教育,2007,(04):82-90.
[11]馬玉慧,郭炯.我國中小學教師教育技術能力培訓評價指標體系的構建[J].中國電化教育,2011,(12):19-23.
[12]張進寶,楊雪萍,裴純禮.關于中小學教師教育技術能力評價的思考[J].中國電化教育,2007,(4):1-4.
[13]張屹,劉美娟,周平紅,馬靜思.中小學教師信息技術應用能力的現狀評估[J].中國電化教育,2014,(08):2-7.
[14]何克抗,李克東.教育技術學研究方法[M].北京:北京師范大學出版社,2003.
[15]程書肖.教育評價方法技術[M].北京:北京師范大學出版社,2003.
[編輯:鄭方林]
G434
A
1671-7503(2016)19-0013-04
本文系全國教育科學規劃教育部重點課題“教師信息技術應用能力培訓中個性化網絡學習活動推送研究”(課題批準號:DCA150245)的階段性研究成果。