首都師范大學(xué)教育技術(shù)系北京100037
摘要在提出教育裝備評(píng)價(jià)的必要性和基本問題的基礎(chǔ)上,應(yīng)用系統(tǒng)化的研究方法,提出了基于綜合評(píng)價(jià)理論的教育裝備評(píng)價(jià),并對(duì)教育裝備評(píng)價(jià)的基本過程和方法做了進(jìn)一步的分析和論述。
關(guān)鍵詞 教育裝備;綜合評(píng)價(jià);指標(biāo)體系
中圖分類號(hào):G434文件標(biāo)識(shí)碼:A 文章編號(hào):1671-489X(2007)03-0003-03
Educational Equipment Evaluation based on Comprehensive Evaluation Theory//Zhang Ge, Hu Younong
AbstractOn basis of the necessity and basic problems regarding evaluation of educational equipment, the paper brings forward the evaluation of educational equipment based on the comprehensive estimate, and has a further analysis and discussion on its process.
Key words educational equipment; comprehensive estimate; target system
Author's addressDepartment of Educational Technology, Capital Normal University, Beijing 100037
1引言
2005年的教育信息化市場(chǎng)沒有了驚天動(dòng)地的采購(gòu)浪潮,也沒有了熱火朝天的建網(wǎng)運(yùn)動(dòng),用戶更多地關(guān)注于如何發(fā)揮校園網(wǎng)投入效益和落實(shí)教學(xué)應(yīng)用,更多地關(guān)注信息化的基礎(chǔ)設(shè)施建設(shè)轉(zhuǎn)向關(guān)注實(shí)際應(yīng)用的效益和效能。
面對(duì)大量的教育裝備硬、軟件設(shè)施,如何更好地發(fā)揮現(xiàn)有裝備的使用效益,使其更好地為教育和教學(xué)服務(wù),已經(jīng)成為目前信息化教育中亟待解決的問題。例如,現(xiàn)有的多媒體教室和網(wǎng)絡(luò)機(jī)房應(yīng)該如何管理和使用才能夠發(fā)揮更大的作用?應(yīng)該購(gòu)置多少計(jì)算機(jī)才能在滿足使用需求的情況下,又同時(shí)省錢和便于管理?購(gòu)進(jìn)怎樣的設(shè)備能夠既省錢又好用?如何建設(shè)校園網(wǎng)絡(luò)才能夠在價(jià)格——效能中實(shí)現(xiàn)最優(yōu)化?網(wǎng)絡(luò)系統(tǒng)建立后到底發(fā)揮了怎樣的效用,是否實(shí)現(xiàn)了預(yù)期的目標(biāo),其投資收益比率是否經(jīng)濟(jì)合算?這些問題都是我們?cè)谑褂矛F(xiàn)代化教育裝備時(shí)經(jīng)常遇到的 ,貪大、求全顯然不是問題的最佳解決方案,問題的實(shí)質(zhì)就是如何實(shí)現(xiàn)教育裝備的科學(xué)化、最優(yōu)化建設(shè)和管理的問題。
要解決這些問題,除了要建立一套系統(tǒng)的管理機(jī)制外,對(duì)教育裝備進(jìn)行科學(xué)有效的評(píng)價(jià)也是當(dāng)務(wù)之急。如何對(duì)現(xiàn)有的或即將購(gòu)置的教育裝備進(jìn)行評(píng)價(jià),對(duì)教育裝備管理的方法和諸多問題進(jìn)行評(píng)價(jià),是解決教育裝備科學(xué)建設(shè)和管理、保障的基本問題。
教育裝備評(píng)價(jià),是以教育裝備為評(píng)價(jià)對(duì)象,依據(jù)教育裝備的目標(biāo)和一定的指標(biāo)體系,對(duì)教育裝備的建設(shè)、使用和管理、保障等過程或狀況進(jìn)行綜合評(píng)價(jià)。評(píng)價(jià)的目的,不僅是對(duì)裝備的使用價(jià)值和效果的評(píng)估,更是一種管理方法,是一種定量的管理工具,是決策的重要內(nèi)容。
對(duì)教育裝備評(píng)價(jià)的研究應(yīng)采用系統(tǒng)化的研究方法,以全費(fèi)用全壽命理論和運(yùn)籌決策理論、教育評(píng)價(jià)和綜合評(píng)價(jià)理論為指導(dǎo),著眼于教育裝備實(shí)現(xiàn)其價(jià)值的全過程,以實(shí)現(xiàn)教育裝備投入——效益的最大化。
2綜合評(píng)價(jià)理論的基本原理
根據(jù)綜合評(píng)價(jià)理論,對(duì)一個(gè)對(duì)象進(jìn)行評(píng)價(jià),就是對(duì)其多個(gè)屬性的多種指標(biāo)進(jìn)行分析、計(jì)算或合成,最后得到一個(gè)量化的綜合評(píng)價(jià)數(shù)值,人們可以據(jù)之對(duì)若干個(gè)擁有同樣指標(biāo)體系的對(duì)象進(jìn)行排序(單純排序),也可以據(jù)之對(duì)某一個(gè)對(duì)象進(jìn)行分類(價(jià)值排序)。單純排序評(píng)價(jià)得到的綜合評(píng)價(jià)數(shù)值只是一個(gè)對(duì)象相對(duì)于其它對(duì)象的重要性或者整體規(guī)模的相對(duì)度量,而價(jià)值排序評(píng)價(jià)得到的綜合評(píng)價(jià)數(shù)值則反映了該對(duì)象的內(nèi)在價(jià)值。但是不管怎樣,它們要求得到的評(píng)價(jià)結(jié)果都是一個(gè)數(shù)值y,這樣把指標(biāo)體系x當(dāng)作自變量,綜合評(píng)價(jià)數(shù)值y當(dāng)作因變量,構(gòu)成一個(gè)函數(shù)關(guān)系。綜合評(píng)價(jià)方法就是具體尋求這樣一個(gè)函數(shù)。如何得到這個(gè)函數(shù),就涉及到多種不同的方法和方式,有些是經(jīng)驗(yàn)的,有些是數(shù)學(xué)的,有些是兩者結(jié)合的。
要想對(duì)一個(gè)對(duì)象進(jìn)行評(píng)價(jià),首先要通過一定方式建立一套評(píng)價(jià)指標(biāo)體系x=(x1,x2,x3……,xn),其中的每個(gè)指標(biāo)xi可以是數(shù)值的,也可以是通過一定規(guī)則轉(zhuǎn)換成數(shù)值的。由于各種評(píng)價(jià)指標(biāo)的量綱不同,通常需要消除這種影響,將原始評(píng)價(jià)指標(biāo)進(jìn)行標(biāo)準(zhǔn)化或歸一化處理,將xi變?yōu)閟i(xi),si為第i個(gè)指標(biāo)的標(biāo)準(zhǔn)化函數(shù),或效用函數(shù)。
其次,大部分綜合評(píng)價(jià)方法都是假定函數(shù)的類型,需要確定的只是一些參數(shù),通常是權(quán)數(shù)a=(a1a2a3……an) ,這些參數(shù)的確定也有很多種方法,例如可以由人工確定(如Delphi方法),或者通過一定的數(shù)學(xué)方法得到(如主成分方法),或者結(jié)合定性和定量方法的AHP方法。
最終評(píng)價(jià)函數(shù)的形式通常是一組基函數(shù)Ti的線性組合,或稱為合成函數(shù),即:
通常,標(biāo)準(zhǔn)化函數(shù)Si,基函數(shù)Ti, 以及權(quán)數(shù)αi的確定方法、構(gòu)造形式或合成方式不同,就構(gòu)成不同的綜合評(píng)價(jià)方法。
3基于綜合評(píng)價(jià)理論的教育裝備評(píng)價(jià)方法探究
3.1 教育裝備評(píng)價(jià)的一般實(shí)施過程
結(jié)合系統(tǒng)綜合評(píng)價(jià)理論和教育評(píng)價(jià)理論,教育裝備評(píng)價(jià)中的許多問題都屬于多屬性綜合評(píng)價(jià)的問題,其實(shí)施過程大致可分為以下幾步:
(1)明確評(píng)價(jià)目的、評(píng)價(jià)目標(biāo)和評(píng)價(jià)對(duì)象;
(2)設(shè)計(jì)和確定評(píng)價(jià)指標(biāo)體系;
(3)分配和確定指標(biāo)評(píng)價(jià)值和權(quán)重;
(4)確定綜合指標(biāo)間的合成關(guān)系,求綜合評(píng)價(jià)值;
(5)根據(jù)評(píng)價(jià)中得到的數(shù)值和信息,進(jìn)行系統(tǒng)分析和決策。
其中,最為關(guān)鍵的問題是指標(biāo)體系的建立、指標(biāo)評(píng)價(jià)值和權(quán)系數(shù)的確定以及合成關(guān)系的處理。只有解決好上述問題,才能得到較為科學(xué)有效的評(píng)價(jià)結(jié)果,為下一步的決策提供有利的支持。
3.2建立評(píng)價(jià)指標(biāo)體系的原則
指標(biāo)體系必須科學(xué)地、客觀地、合理地、盡可能全面地反映影響評(píng)價(jià)對(duì)象的所有因素。因此,必須在遵循一定原則的基礎(chǔ)上,運(yùn)用適當(dāng)?shù)姆椒ㄈソ⒁惶准瓤茖W(xué)又合理的評(píng)價(jià)指標(biāo)體系。
建立教育裝備評(píng)價(jià)指標(biāo)體系,應(yīng)遵循以下原則:
(1)目標(biāo)一致性原則:即評(píng)價(jià)指標(biāo)體系應(yīng)該是評(píng)價(jià)目標(biāo)的具體化、行為化,是由評(píng)價(jià)目標(biāo)逐層分解得到的,即實(shí)現(xiàn)評(píng)價(jià)目標(biāo)=評(píng)價(jià)指標(biāo)體系。
(2)系統(tǒng)性原則,包括以下幾點(diǎn):
相關(guān)性要運(yùn)用系統(tǒng)論的相關(guān)性原理不斷分析,而后,組合設(shè)計(jì)評(píng)價(jià)指標(biāo)體系
層次性指標(biāo)體系要形成階層性的功能群,層次之間要相互適應(yīng)并具有一致性
整體性不僅要注意指標(biāo)體系整體的內(nèi)在聯(lián)系,而且要注意整體的功能和目標(biāo)
綜合性指標(biāo)體系的設(shè)計(jì)不僅要反映裝備現(xiàn)存狀況,更要有反映其潛在問題或趨勢(shì)的指標(biāo)
(3)可操作性原則:指標(biāo)的設(shè)計(jì)要求概念明確、定義清楚,能方便地采集數(shù)據(jù)與收集情況,要考慮現(xiàn)行科技水平,并且有利于系統(tǒng)或設(shè)備的改進(jìn)。
(4)一致性和可比性原則:要求指標(biāo)體系中的每一個(gè)指標(biāo),都必須反映對(duì)象的共同屬性。另外,還要求指標(biāo)的尺度和單位上要一致。
(5)可測(cè)性原則:建立指標(biāo)體系時(shí),能夠量化的指標(biāo)要盡量量化,對(duì)于不能量化或者量化難度大的指標(biāo),要具體化、可操作化的語言描述,定量、定性相結(jié)合。
(6)同層次指標(biāo)線性無關(guān)原則:同層次指標(biāo)之間不能存在因果關(guān)系,彼此獨(dú)立。
3.3指標(biāo)體系的篩選和確定方法
建立指標(biāo)體系的方法,可以分為定性、定量以及兩者相結(jié)合的方法,或者說可以分為數(shù)學(xué)方法和經(jīng)驗(yàn)方法兩大類。數(shù)學(xué)方法有主成分分析法、因子分析法、聚類分析法等。經(jīng)驗(yàn)方法是利用多位專家集體智慧進(jìn)行指標(biāo)篩選的方法,統(tǒng)稱為專家判定法,包括Delphi法、頭腦風(fēng)暴法、實(shí)驗(yàn)統(tǒng)計(jì)法等。
(1)Delphi法采用的是反復(fù)向?qū)<疫M(jìn)行問卷調(diào)查,專家之間互不見面。這種方式保證專家可以毫無顧慮的發(fā)表自己的意見,最大限度的挖掘?qū)<业臐撃埽袑<业闹腔邸_@種方法必須保證專家的質(zhì)量和數(shù)量:專家必須有相關(guān)經(jīng)驗(yàn),而且數(shù)量不能太少。
(2)頭腦風(fēng)暴法指召開座談會(huì),請(qǐng)專家們一起討論,發(fā)表意見,集思廣益。\"頭腦風(fēng)暴\"是形容精神病人的胡言亂語,這種方法要確保參與專家的暢所欲言。會(huì)前要有充分的準(zhǔn)備,確保專家明確任務(wù),做好發(fā)言準(zhǔn)備。頭腦風(fēng)暴的參與者控制在10~15人。
(3)實(shí)驗(yàn)統(tǒng)計(jì)法:請(qǐng)一組專家進(jìn)行試驗(yàn),每一人次試驗(yàn)是要在表格中打勾,且對(duì)每個(gè)因素僅打一個(gè)勾(即每行打一個(gè)勾)。最后統(tǒng)計(jì)出各個(gè)格子中打勾的頻率,得到專家組對(duì)于每個(gè)單因素的評(píng)判結(jié)果。例如,請(qǐng)100位專家對(duì)\"系統(tǒng)安全性\"進(jìn)行評(píng)判,分別有50,30,10,5,5人的評(píng)判為\"很好\",\"較好\",\"一般\",\"較差\",\"很差\",則對(duì)\"系統(tǒng)安全性\"這一單因素的評(píng)判為(0.5,0.3,0.1,0.05,0.05)。最后,將各個(gè)單因素評(píng)判結(jié)果綜合成評(píng)判矩陣。R=(rv)mxn其中,m代表因素個(gè)數(shù),n代表評(píng)語等級(jí)數(shù)。
3.4確定指標(biāo)權(quán)重的方法
指標(biāo)體系中各評(píng)價(jià)指標(biāo)對(duì)評(píng)價(jià)對(duì)象的貢獻(xiàn)大小和重要程度不同,對(duì)評(píng)價(jià)指標(biāo)間的這種差異可通過賦以不同權(quán)重的辦法表示。指標(biāo)體系的賦權(quán)方法很多,經(jīng)驗(yàn)的定性的方法有專家會(huì)議法,定量目前主要包括統(tǒng)計(jì)均值法、二項(xiàng)系數(shù)法、兩兩比較法、層次分析法、模糊評(píng)價(jià)法等。其中,層次分析法比較科學(xué)有效而且應(yīng)用廣泛。
層次分析法(Analytic Hierarchy Process, 簡(jiǎn)稱AHP),是由美國(guó)運(yùn)籌學(xué)家薩蒂最早提出的一種定性與定量分析相結(jié)合的多目標(biāo)評(píng)價(jià)決策方法。它將決策者對(duì)復(fù)雜系統(tǒng)的評(píng)價(jià)思維過程數(shù)學(xué)化,其基本思路是決策者通過將復(fù)雜問題分解為若干層次和要素,在各要素之間簡(jiǎn)單地進(jìn)行比較、判斷和計(jì)算,以獲得不同要素和不同待選方案的權(quán)重,從而為選擇最優(yōu)方案提供決策依據(jù)。
一般來說,運(yùn)用AHP法解決實(shí)際問題的基本步驟是:(1)分析問題,建立遞階層次結(jié)構(gòu)(或稱評(píng)價(jià)模型);(2)構(gòu)造比較判斷矩陣;(3)層次單排序及其一致性檢驗(yàn);(4)層次總排序及其一致性檢驗(yàn)。其中有兩個(gè)關(guān)鍵環(huán)節(jié),一是評(píng)價(jià)指標(biāo)的確定,二是各層評(píng)價(jià)指標(biāo)比例權(quán)重的確定。AHP法既可以單獨(dú)應(yīng)用于多目標(biāo)決策、綜合評(píng)價(jià)、選優(yōu)、排序等領(lǐng)域,也可以與其他方法結(jié)合應(yīng)用于上述領(lǐng)域。例如,它與模糊評(píng)判法結(jié)合產(chǎn)生了模糊層次分析法,它與灰色系統(tǒng)理論結(jié)合產(chǎn)生了灰色層次分析法,它與主成分分析法結(jié)合產(chǎn)生了主成分分析——層次分析法,它與模糊數(shù)學(xué)、灰色系統(tǒng)理論結(jié)合產(chǎn)生了灰色模糊層次分析法等等。
3.5 評(píng)價(jià)結(jié)果的合成和分析方法
在確定了指標(biāo)體系基礎(chǔ)指標(biāo)評(píng)價(jià)值及指標(biāo)體系權(quán)數(shù)之后,還要根據(jù)指標(biāo)體系特點(diǎn)確定各級(jí)指標(biāo)的合成方法,亦即將各級(jí)下層指標(biāo)值復(fù)合成上層指標(biāo)值的計(jì)算方法。可用于綜合評(píng)價(jià)的合成方法很多,主要有線性加權(quán)法、綜合評(píng)判法、模糊評(píng)判法等。
3.6 應(yīng)用綜合評(píng)價(jià)方法對(duì)網(wǎng)絡(luò)機(jī)房有效性進(jìn)行評(píng)價(jià)的方法分析
例如,對(duì)5個(gè)采用不同配置和管理方式的多媒體網(wǎng)絡(luò)教室的有效性進(jìn)行評(píng)價(jià),確定最有效的多媒體網(wǎng)絡(luò)教室配置和管理方式。我們首先可以采用個(gè)人主觀分析與Delphi法相結(jié)合的方法,確定評(píng)價(jià)的指標(biāo)體系;接著,運(yùn)用AHP法構(gòu)造比較判斷矩陣并進(jìn)行一致性檢驗(yàn),確定各指標(biāo)的權(quán)重;然后,用模糊評(píng)價(jià)算法構(gòu)造模糊關(guān)系矩陣和模糊評(píng)價(jià)矩陣,求解綜合評(píng)價(jià)結(jié)果。最后,得分最高的網(wǎng)絡(luò)教室是最值得推廣應(yīng)用的。
注:本文中所涉及到的“圖表、注解、公式等內(nèi)容請(qǐng)以PDF格式閱讀原文。”