周婷婷
(云南師范大學,昆明 650500)
利基公司主要負責提供有關美國各地學校的相關信息,其團隊組成人員包括數據科學家、工程師、學生家長,等等。利基公司能夠在教育領域為消費者提供大量學校的基本情況,以便消費者尋找適合自己的學校。網站上面的信息都來自于消費者的真實評論,每個月都會有數以百萬計的消費者通過瀏覽利基公司網站的報告卡、排名和評論來選擇合適的學校。
利基公司的數據來自美國教育部k-12(美國基礎教育統(tǒng)稱)、國家教育統(tǒng)計中心(NCES)、共同核心數據(CDD)、公民權力數據收集(CRDC)、美國人口普查局、聯邦調查局以及在利基網站上對數百萬學生和家長的調查。
第一,選擇每個排名所依據的參數指標。第二,評估每個參數的數據,保證這些數據可以為排名提供有用價值,不同的數據應采取不同的處理方式。利基用戶提供的數據和對學生以及家長的調查均采用了貝葉斯法來處理這些數據。同時,還要對數據進行檢查,找出數據的異常值和不確定值,并將這些數據刪除。第三,在處理完各項指標的數據之后,應計算學校各項指標得分的標準分數,也就是Z分數。利基公司對數據的處理需要兩次計算標準分數,這是第一次計算標準分數。通過計算標準分數,可將該校某一指標分數與其他指標分數進行比較。第四,根據收集到的各項指標數據為每一項指標分配權重,通過加權可以確保沒有一項指標能夠完全對一所學校的成績產生積極或消極的影響,而且每所學校的最終成績能夠真實反映出學校的各種情況。通過分析能仔細確定每項指標的權重,分析內容包括不同的權重是如何影響學校的排名以及學生、家長等用戶的偏好。第五,在對各項指標進行賦權后,要計算各所學校的總分以及總分的標準分數,這是第二次計算標準分數,所得到的分數為學校的最終得分,可與其他學校進行比較,以確定學校排名。第六,根據最終得分,利基公司會評估各所學校數據的完整性,并根據學校數據擁有的多少來確定哪所學校能夠排名,哪所學校不能夠排名。若學校各項指標的數據缺失超過50%,那么這所學校將會被取消排名資格。若學校各項指標的數據缺失不超過50%,只缺少一個或多個指標數據,那么只對已有的指標數據進行計算,但不計算該校的綜合排名。如果各項數據缺失不超過50%且各項指標完整,那么就可以計算該所學校的綜合排名。
利基公司的評價指標體系包括一級指標和二級指標。一級指標包括學業(yè)成績、校園文化及其多樣化水平、對學生和家長的綜合調查、師資水平、學校社團及活動、健康和安全情況、資源設施情況、體育水平。學業(yè)成績這一一級指標下又分為若干個二級指標,主要包括SAT/ACT分數、州學業(yè)水平測試分數、畢業(yè)率、大學預修課程(AP)學生報名百分比,等等。
關注消費者的需求[2]。利基公司的數據很大程度上來源于學生和家長的反饋,而且評估結果也在較大程度上服務于學生和家長。
數據來源多樣化。利基公司收集的數據不僅包括客觀數據,也包括主觀數據,既會從官方的政府機構收集各種客觀數據,也會通過發(fā)放問卷等形式從學生和家長方面收集數據,并建立網絡平臺收集學生和家長對各所學校的描述與評價。
評估結果透明化。利基公司對學校的評估結果會放到網站上供學生和家長參考,參考內容包括學校的排名和設施狀況等各個方面。學生和家長可根據評估結果來選擇合適的學校,學校也會根據評估結果來不斷完善自己。
評估方式專業(yè)化。利基公司采用多種方式對數據進行分析,先采用貝葉斯法處理這些數據,然后對數據指標進行賦權,兩次計算標準分數。
將質性評價與量化評價相結合。利基公司既會對收集到的數據進行量化分析,同時又會對從學生和家長那里收集到的學校信息進行質性評價,然后將量化評價與質性評價相結合,對學校進行全面評價。
評價指標多樣化。利基公司的評價指標涵蓋了學校的方方面面,既包括軟件情況,也包括硬件情況。利基公司會對這些指標進行賦權,不同的指標具有不同的權重,不同的權重說明了各個指標的重要性程度不同,能夠從各方面有主有次的對學校進行評價,使評價更加專業(yè)化。
我國在20世紀90年代從西方國家引入了第三方教育評價的相關理論。與西方國家較成熟的第三方教育評價相比,我國的第三方教育評價尚處于起步階段。我國教育評價主要集中于第一方教育評價和第二方教育評價,極為注重對學生學業(yè)成績的評價。第三方評價機構大多依附于政府,評價結果的準確性尚待考證。
國家應加大對第三方教育評價機構的支持力度[3],提高信息透明度,建立完備的制度規(guī)范體系。同時,應在政府教育官網公布每年的官方統(tǒng)計數據,進而為第三方教育機構的數據處理提供數據資源。
提高第三方教育評價機構的專業(yè)化水平。第三方教育評價機構要聘請高水平的教育測量與評估專家參與評估,并積極引進專業(yè)化的信息技術人才,不斷學習先進的測量與評價技術。在引進技術專家的同時,也要讓學生、家長、教師等人員參與到教育評價中來。
關注消費者需求,打開市場。第三方教育評價機構要關注消費者的需求,以消費者為導向,使最終的評價結果能夠真正為消費者服務。同時,要加大宣傳力度,讓公眾能夠了解第三方評價的專業(yè)性、客觀性。
實現評價方式與評價指標的多樣化。在評價方式方面,第三方評價機構要將質性評價與量化評價相結合,并對從各渠道收集的信息按照一定標準進行量化分析,同時廣泛收集學生、家長及教師的反饋信息,然后對這些信息進行質性分析,從而得出最終的評價結果。在評價指標方面,我國第三方教育評價過多關注學生的學業(yè)成績。因此,應學習利基第三方評價機構評價指標的多樣化,既關注學生的學業(yè)成績,也關注學生其他方面的發(fā)展。