■ 武漢市教育科學研究院 武漢市教育質量評價監測中心
武漢市義務教育學業質量監測體系框架
■ 武漢市教育科學研究院 武漢市教育質量評價監測中心
武漢市義務教育學業質量監測體系是建立在大樣本測試與調查分析基礎上的教育質量評估體系,由四大系統組成:一是監測系統,二是報告系統,三是干預系統,四是支持系統。各個系統相互聯系,相互補充,作為一個整體發揮學業評價體系的作用。
(一)監測系統結構
建構監測系統的主要任務是制訂武漢市義務教育學業質量監測標準、研發監測工具和建立學業數據信息采集系統。監測系統是學業質量監測工作的重心,它的基本結構包括:監測目的、監測依據、監測工作原則、指標體系、監測對象范圍、監測方法及工具、監測實施。如下表:
(二)學業質量監測標準
武漢市義務教育學業質量監測,根據國家義務教育課程方案和學科課程標準,研制各學科的學業質量監測標準,并以此作為監測依據。
武漢市義務教育學業質量評價指標包括六個方面:學生學科認知水平、身心發展、個性特長發展、學習素養、學習負擔、學習環境。
(三)監測工具及方法
武漢市義務教育學業質量監測的主要方法是測量、觀察、訪談調查(包括座談、個別訪談)、影像分析和教育統計。監測工具包括:學科測試卷、心理量表、身體素質量表、學生問卷、教師問卷、校長問卷、課堂錄像、教學記錄等。
紙筆測試:測量抽樣學生的學科知識、技能和思維能力發展水平。測試題根據各學科特點命制,主要題型有單選題、多選題、簡答題、填充題、綜合題或應用題。
問卷調查:調查教學過程中的感受(壓力與負擔)、情感、態度及與學業相關的家庭、學校和社會背景,分為學生問卷、教師問卷和校長問卷。
心理素質測量:監測學生心理素質健康狀況,包括學生的個性品格和學習素養(學習的感受、學習的效能、學習的情感、學習的能力、學習的動力)以及學業期待等方面的內容。
身體素質測量:測量工具是身體素質量表、學生健康量表、學生生理測量設備(如體重計、視力表等),監測內容主要是學生體質狀況、健康水平和運動技能。
課堂觀察與行為測量:監測者通過持續的深入義務教育學段進行課堂觀察,分析教師行為、學生行為,判斷教學模式、課堂教學效能,并對教學中的“情感、態度和價值觀”進行評判。
訪談調查:對與學業相關的學習環境與條件的調查,包括學生對學校的認同感、學習困難、學習感受、學業期待,家長與子女關系、家庭教育方式與效果,也包括教學管理制度、課程設置、教學資源運用、家校互動等方面的信息。
統計分析:運用專門的和自主開發的教育統計分析軟件和數據處理系統,對所有測量數據和調查信息、觀察結果進行系統分析處理,建立相關學業質量數據庫和數據模型。

監測目的獲取學生在義務教育各學科的學業質量狀況和背景信息,對教學過程及結果進行分析診斷,為行政決策咨詢提供幫助,為學校辦學提供幫助,為教師改進教學提供幫助,為學生進步發展提供幫助《國家中長期教育改革和發展規劃綱要(2010~2020)》《基礎教育課程改革綱要》、國家《義務教育課程設置實驗方案》《義務教育課程標準》(2011年版),課程與教學理論、教育心理學理論及教育測量理論工作原則 科學性原則、導向性原則、規范性原則、可操作性原則監測對象 在校小學生、初中生;抽樣學生數為全市該年級學生總數的15%左右監測內容 學生學科認知水平、身心發展、個性發展、學習素養、學習負擔、學習環境等監測方法及工具監測依據監測方法:筆試、調查(訪談、觀察)、影像分析、教育統計分析等監測工具:測試卷、問卷、量表、影像、教學記載和專用軟件等抽樣方法 采用分段隨機抽樣(PPS抽樣)監測實施一是分步驟分階段實施監測,先在部分學段、學科試點,取得經驗后逐步拓展到其他學科、學段;二是相對集中實施監測,在一個相對集中時間段完成統一筆試及調查

(四)數據信息采集系統
數據信息采集系統是一個專業化的學業質量監測操作程序系統,它包括確定監測對象、編制測試題、抽樣及測試、試卷的評閱和數據統計等過程。
1.確定監測對象。結合我市義務教育客觀現實,監測的年級選擇小學三或四、五年級和初中八年級。由市教育局、市教科院根據需要,隨機確定監測的區域、年級、學科,提前1周通知各區、校,小學、初中各抽取1個年級,抽樣學生數為全市該年級學生總數的15%左右。
2.研制監測工具。根據監測標準編制相應年級、學科(項目)的測試卷、問卷、量表、訪談提綱等監測工具。研制監測工具是學業質量監測的重要環節,是把監測標準通過一定技術試題化的過程。其中建設學科測試題庫、編制學科測試卷是重中之重,它包括設定監測內容及比例、信效度指數和確定整卷難度系數、題量題型、分值及檢測時間等。編制測試卷的一般程序:標準解讀、教材分析、雙向細目表制訂、試題設計、題庫建設、組卷和試測等。
3.抽樣測試。我市義務教育學業質量監測采取多層分段抽樣方法(PPS抽樣),抽樣的置信度在95%以上,相對誤差不超過0.1個標準差。抽樣方法是先根據監測科目、年級確定抽樣學生總數及抽樣比例,再分區抽取測試學校,并從測試學校中抽取測試學生,兼顧區域學生分布。所有監測地區相同年級、學科的學生使用相同的測試卷、問卷、量表等監測工具實施檢測。同時,針對測試學生的任課教師、校長進行問卷和個別訪談。
4.試卷評閱。制訂統一評分標準及閱卷細則,確保評分的客觀、公正。采取網上評卷、流水作業方式進行評閱,由計算機記錄學生答卷上的每個檢測點的得分、失分情況,進而分析每個學生或一定區域學生在課程標準規定的知識內容和能力發展上的表現水平。量表、問卷通過專門軟件在計算機上直接統計結果。
報告系統是對我市義務教育學業質量監測采集的全部信息、數據進行整理、分析、綜合并得出結果,以及對結果進行反饋和解釋的全過程。
(一)數據信息處理分析及報告
1.建立專門的武漢市義務教育學業質量數據信息分析系統。通過計算機技術和網絡系統,把監測過程中搜集的所有測量數據和調查信息進行匯總、甄別、分類,運用教育統計分析專業軟件和自主開發的分析軟件對全部監測數據、信息進行深加工,得出科學、全面、可信的監測結果。
2.撰寫監測報告。武漢市義務教育學業質量監測報告的主要內容包括:一是監測結果及分析。客觀、真實、公正地描述區域內全市義務教育學生在知識技能、身心素質、個性特長等方面的學業水平和背景因素狀況。學業水平從達標度、均衡度和高層次思維能力的發展程度這三個角度進行呈現。二是問題診斷。運用標準參照分析方法,將學生的學業成績與學科學業質量監測標準一一加以衡量,對照測試卷的得失分情況和背景因素分析學生、學校和地區的優勢與不足,診斷學校管理、教師教學和學生學習中存在的問題。三是改進工作的建議。將學業水平與背景因素進行相關性分析,結合市、區教研員教學視導情況,提出相應的教育決策咨詢建議和改進學校管理、改進教師教學和學生學習的意見、措施。
(二)學業質量監測結果及其分析解釋
1.監測結果。武漢市義務教育學業質量監測是基于課程標準的學業成就測試,對學生的素質、能力發展水平進行標定。小學生的學業水平劃分為三類:水平A、水平B、水平C。水平C,意味著沒有達到學業質量監測標準(或沒有完成課程標準規定的基本學習目標);水平B為達到學業質量監測標準,完成了課程標準規定的學習目標;水平A為優秀,高質量地完成了相關學科課程標準規定的學習任務。初中生的學業水平劃分為四個水平:水平A(優秀)、水平B(良好)、水平C(合格)和水平D(沒有達到學業質量監測標準或完成課程標準規定的基本學習目標)。武漢市義務教育學業質量監測,測的是一個群體的學業質量標準的達標度,因此,監測結果不排隊,不公布個人信息,不與教師、學校、區教育局的績效考評掛鉤。
2.結果分析與解釋。武漢市義務教育學業質量監測結果的分析與解釋主要從以下幾個方面來進行:一是選擇正確的監測方法(質量評價方法),分析小學生和初中生在本年級、本學科上的學習表現,客觀解讀數據;二是比較不同年份的學業質量情況,關注學生學業質量的縱向發展變化;三是關注學生學業質量的差異(區域、學校、班級、學科、性別等),結合背景信息的相關性分析,診斷教育教學問題并提出建設性意見;四是采用多層線性模型的分析方法,研究影響學生學業質量的不同因素;五是關注學生學業質量及其相關因素的歷史縱向解釋;六是分析背景信息的相關性,從學業和非學業的角度,綜合分析課程、學生、教師、校長、家長、社區等有關因素對學業的影響。
干預系統就是對監測結果進行信息反饋、跟蹤指導、督促檢查和結果再評估。實施義務教育學業質量監測的根本目的在于改進教育教學,提高義務教育質量,促進市域優質均衡發展。因此,武漢市義務教育學業質量監測工作不能止于發布質量監測結果,而是通過評估現狀發現問題、分析問題,提出改進意見、建議,并檢查督促,取得實效。
(一)市教育局(或市教科院)定期發布武漢市義務教育學業質量監測報告,客觀、公正、全面描述域內義務教育階段學生在知識與技能、過程與方法、情感態度價值觀和身心健康等方面的學業質量現狀,用真實的數據讓全社會了解武漢市基礎教育,引導正確的社會輿論,營造人人關心教育、支持教育和愛護教育的良好氛圍。
(二)學業質量監測著眼于學生的學和教師的教,把教育目標、教學過程與學習結果綜合起來評價,改革和完善現行基礎教育質量評價制度,促進廣大教育工作者樹立正確的教育觀、質量觀,指引教育教學改革方向。政府及教育行政部門通過頒發學業質量標準引導學校辦學,促進教育方針的貫徹落實,根據監測結果制訂教育政策和調配教育資源,提高政府決策的科學性和管理的有效性,實現政府職能的轉變。
(三)武漢市義務教育學業質量監測不同于第三方監測,除了提供真實、客觀、公正的學業質量數據、信息和一般性建議外,工作重點放在針對共性問題、突出的個性問題,由市、區教育行政部門會同教科研機構進行專項調研,制訂跟蹤指導計劃,并進行持續干預:組織專家深入區、校,與學校領導、教師共同研究課堂及教學問題,提出改進措施和方案。采取專家蹲點,在一段時間內給予專業支持、幫助,促其盡快改進工作,取得實效;進行再評估,檢查工作改進的效果。
支持系統,是武漢市義務教育學業質量監測的保障系統。支持系統主要體現在法制建設、行政管理、專業支持、經費保障、輿論導向、社會參與等方面。
(一)組織機構
武漢市義務教育學業質量監測在市教育局統一領導下進行,由市教育科學研究院具體組織實施。市教育局成立了全市義務教育學業質量監測工作領導小組,設辦公室于基礎教育處,負責監測工作的科學決策、組織領導、統籌協調、過程督查和結果的報告及輿論宣傳,從總體上把握監測工作的方向性、目的性和公信度。各區和學校成立相應工作機構,各區教育局教研室負責本區學業質量監測的組織、指導、服務及保障,有關學校承擔具體工作。
(二)專業團隊
武漢市教育局發文成立了武漢市教育質量評價監測中心,由武漢市教育科學研究院組織實施,負責全市義務教育學業質量監測工作的研究、規劃、設計、組織、實施。武漢市質量監測中心組建了兩個團隊:一個是研究團隊,包括高校教授、博士、市教科研員和一線骨干教師,主要任務是理論研究、頂層設計、評價標準研制、工具和軟件的開發,建設題庫、命題組卷、數據處理、撰寫監測報告,提出建議、反饋及跟進指導;二是工作專班,包括有關部門負責人、各區教研室主任、市區教科研員、相關學校校長和教導主任及部分教師。主要任務是建立制度、擬定監測工作方案、管理實施、人員培訓及宣傳等工作。
(三)保障機制
學業質量監測是一個全新的領域,武漢市教育局確定武漢市義務教育學業質量監測工作在教學常態下進行,因此,必須建立相應的保障機制。監測工作的保障機制,一是組織保障;二是人員保障;三是經費保障;四是制度保障。在這四個保障中組織保障是關鍵,人員保障、經費保障是基礎,制度保障是前提。
武漢市義務教育規模大、學生多、學校分散,監測工作從研制標準、命題、組卷、印刷到測試、收卷、訪談,到評卷、統計、分析和報告、反饋,需要大量的人員參與,工作浩繁、周期長、成本高。只有充分調動教育行政部門、教科研機構、學校、家長和社會各界的積極性,做到政府主導、專業支持、學校實施、社會參與,才能真正發揮學業質量監測的積極作用。
責任編輯向保秀