摘 要: 作者在前人文獻(xiàn)研究的基礎(chǔ)上,綜述分析了建立院校教學(xué)保障評(píng)價(jià)指標(biāo)應(yīng)當(dāng)處理好的幾個(gè)問題,介紹了評(píng)價(jià)指標(biāo)的設(shè)計(jì)和篩選方法,介紹了層次分析法的基本原理,探討院校教學(xué)保障的綜合評(píng)價(jià)問題,為教學(xué)和管理提供參考。
關(guān)鍵詞: 院校教學(xué)保障評(píng)價(jià) 評(píng)價(jià)指標(biāo)體系 層次分析法
建立科學(xué)、客觀、可行的評(píng)價(jià)指標(biāo)體系是院校教學(xué)保障能力評(píng)價(jià)的核心問題,沒有科學(xué)、完整的評(píng)價(jià)指標(biāo)體系就無法進(jìn)行院校教學(xué)保障能力綜合評(píng)價(jià)工作。同時(shí),院校教學(xué)保障系統(tǒng)綜合評(píng)價(jià)的成功在很大程度上還依賴于指標(biāo)體系的科學(xué)性。因此,重視院校教學(xué)保障系統(tǒng)綜合評(píng)價(jià)指標(biāo)體系的研究將為進(jìn)一步完善院校教學(xué)保障系統(tǒng)綜合評(píng)價(jià)奠定良好的基礎(chǔ)。通過對(duì)評(píng)價(jià)指標(biāo)體系構(gòu)建及院校教學(xué)保障研究的現(xiàn)有文獻(xiàn)進(jìn)行分析,我以綜述的方式對(duì)其中的一些理論和思考加以介紹。
一、評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)原則和需要遵循的原則
根據(jù)教學(xué)保障系統(tǒng)的性質(zhì)、特點(diǎn)和評(píng)價(jià)目標(biāo)的分析,院校教學(xué)保障系統(tǒng)綜合評(píng)價(jià)的指標(biāo)體系設(shè)計(jì)必須遵循以下幾個(gè)原則。
1.導(dǎo)向性原則
政策起指揮棒作用,而評(píng)價(jià)指標(biāo)體系的導(dǎo)向作用尤為突出。從總體上看,院校教學(xué)保障系統(tǒng)評(píng)價(jià)指標(biāo)體系要體現(xiàn)新時(shí)期軍事戰(zhàn)略指導(dǎo)思想和院校辦學(xué)和教育改革、發(fā)展和提高的方向。但從某一階段來說,評(píng)價(jià)指標(biāo)體系應(yīng)引導(dǎo)院校在各自層次上不斷提高教學(xué)保障水平和辦學(xué)能力,形成自己的特色。同時(shí)注意克服和防止那些帶有普遍性的不良傾向。由此可見,在設(shè)計(jì)評(píng)價(jià)指標(biāo)體系時(shí)要充分認(rèn)識(shí)導(dǎo)向性這一原則,評(píng)價(jià)什么,大家就重視抓什么,這是不以人們的意志為轉(zhuǎn)移的。在運(yùn)用導(dǎo)向性原則時(shí),要認(rèn)真研究指標(biāo)體系中各指標(biāo)之間是否相容。如果將幾個(gè)相互矛盾的指標(biāo)放在同一指標(biāo)體系中,就勢(shì)必干擾導(dǎo)向性原則的正確運(yùn)用,同時(shí)還會(huì)引起不必要的思想混亂。
2.整體性原則
院校教學(xué)保障系統(tǒng)評(píng)價(jià)指標(biāo)體系作為一個(gè)系統(tǒng),應(yīng)保持自身的整體性,并且毫無遺漏地體現(xiàn)所應(yīng)達(dá)到的目標(biāo)。指標(biāo)是目標(biāo)一個(gè)方面的規(guī)定,指標(biāo)并不就是目標(biāo),目標(biāo)存在于指標(biāo)的總和之中。指標(biāo)的整體性原則本質(zhì)上要求指標(biāo)體系內(nèi)的各條指標(biāo)能在它們的相互配合中,在它們的總和中實(shí)現(xiàn)目標(biāo)。為了能夠把握住影響目標(biāo)的主要因素,有意識(shí)地忽略一些雖有影響,但屬于次要的因素,這是允許的,也并不違反整體性原則。我們強(qiáng)調(diào)指標(biāo)體系的整體性,就是說,任何時(shí)候都不能舍棄那些反映評(píng)價(jià)對(duì)象實(shí)質(zhì)的指標(biāo),因?yàn)檫@些指標(biāo)能夠深刻地、系統(tǒng)地評(píng)價(jià)出實(shí)際的水平。
3.客觀性原則
我們建立的院校教學(xué)保障系統(tǒng)指標(biāo)體系應(yīng)該客觀可信、符合實(shí)際,這樣才能較確切地反映出評(píng)價(jià)的真實(shí)水平。如果從主觀臆想出發(fā),脫離具體實(shí)際,那么這樣建立的指標(biāo)體系就不會(huì)有生命力,人們也無法接受,指標(biāo)體系的設(shè)計(jì)應(yīng)忠實(shí)于評(píng)價(jià)目標(biāo),不僅指標(biāo)體系要體現(xiàn)目標(biāo)的整體,而且每一條指標(biāo)都應(yīng)當(dāng)保持與目標(biāo)的一致性,努力謀求目標(biāo)的整體優(yōu)化,每個(gè)指標(biāo)都能如實(shí)地反映客觀的本質(zhì)。指標(biāo)體系的客觀可信,還應(yīng)表現(xiàn)在不存在相互重疊的指標(biāo),就是要求指標(biāo)體系內(nèi)同一層次的各條指標(biāo)必須是相互獨(dú)立的,不相互包含,不存在因果關(guān)系,或者說指標(biāo)之間是線性無關(guān)的,不能從這一條導(dǎo)出另一條,當(dāng)然亦不能相互矛盾。要求指標(biāo)的獨(dú)立性的原因在于:一是為了簡(jiǎn)化指標(biāo),因?yàn)槿舫霈F(xiàn)兩條以上的指標(biāo)反映同一事物,無疑將增加指標(biāo)的數(shù)目,增加評(píng)價(jià)的工作量,降低評(píng)價(jià)的可行性;二是為了保證評(píng)價(jià)的科學(xué)性,因?yàn)槌霈F(xiàn)兩條指標(biāo)反映同一事物,無疑將提高該事物在評(píng)價(jià)中的地位,這是人為的偏差,必將影響評(píng)價(jià)的科學(xué)性。
4.可測(cè)性原則
評(píng)價(jià)目標(biāo)是通過指標(biāo)體系中各條指標(biāo)對(duì)客體(評(píng)價(jià)對(duì)象)的實(shí)測(cè)來實(shí)現(xiàn)的。這就要求設(shè)計(jì)指標(biāo)時(shí),必須使每一條指標(biāo)所規(guī)定的內(nèi)容都可以實(shí)際測(cè)量或觀察,以獲得明確的結(jié)論。從指標(biāo)的可測(cè)性要求考慮,所有的指標(biāo)大致可分為兩類,一類為可量化的定量指標(biāo),一類為不宜或難以直接量化的定性指標(biāo)。從教育的復(fù)雜性和當(dāng)前技術(shù)條件的限制的實(shí)際情況出發(fā),二者既難以相互取代,又無須強(qiáng)求一律。原則是可以直接量化的指標(biāo),應(yīng)盡可能量化,凡是不宜或難以直接量化的指標(biāo),則采用定性指標(biāo),并應(yīng)有明確結(jié)論,以期進(jìn)行二次量化,力求其價(jià)值判斷的有效性和可靠性。此外,凡是定量指標(biāo)就當(dāng)賦予相應(yīng)的權(quán)值。對(duì)指標(biāo)測(cè)量的結(jié)果要進(jìn)行比較評(píng)價(jià)。因此,每設(shè)計(jì)一項(xiàng)指標(biāo)必須規(guī)定出相應(yīng)的量標(biāo),有了統(tǒng)一的量標(biāo)才好比較。
5.簡(jiǎn)易可行性原則
指標(biāo)的簡(jiǎn)易可行性具有兩個(gè)方面的涵義:一是要簡(jiǎn)易,使進(jìn)行評(píng)價(jià)的實(shí)測(cè)者易于實(shí)施;二是要可行,即指標(biāo)所要求提供的住處可實(shí)地取得,并具有實(shí)際意義。建立的指標(biāo)體系是否簡(jiǎn)易可行,是否在人力、物力、時(shí)間和信息的提供上被人們所接受,這些都是不容忽視的問題。因此,簡(jiǎn)化評(píng)價(jià)指標(biāo)體系是評(píng)價(jià)指標(biāo)體系設(shè)計(jì)中的一個(gè)關(guān)鍵環(huán)節(jié)。
二、評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)原則和需要處理好的關(guān)系
建立院校教學(xué)保障系統(tǒng)指標(biāo)體系時(shí)必須遵循上述這些原則,這是我們?cè)O(shè)計(jì)指標(biāo)體系的基本依據(jù)。從這些依據(jù)出發(fā),才有可能逐步提高院校教學(xué)保障系統(tǒng)指標(biāo)體系的品質(zhì),提高評(píng)價(jià)工作的質(zhì)量。在設(shè)計(jì)指標(biāo)體系時(shí),必須善于抓住那些影響評(píng)價(jià)目標(biāo)達(dá)到的主要因素,而忽略那些雖有影響但屬于較為次要的因素。指標(biāo)體系建立后也不能一成不變,要繼續(xù)做院校教學(xué)保障系統(tǒng)指標(biāo)體系的優(yōu)化工作。通過總結(jié)經(jīng)驗(yàn)與實(shí)驗(yàn)研究,每次都可修正或篩選一部分指標(biāo),使指標(biāo)體系日趨優(yōu)化,盡可能以較少的指標(biāo)滿足評(píng)價(jià)工作的實(shí)際需要。除此之外,還需要處理好以下幾個(gè)關(guān)系。
1.定量和定性的關(guān)系
在院校教學(xué)保障系統(tǒng)指標(biāo)體系中,定量指標(biāo)和定性指標(biāo)并存是正常的。指標(biāo)體系設(shè)計(jì)的指導(dǎo)思想應(yīng)當(dāng)是:凡是指標(biāo)量化具有實(shí)際意義,而且有量化途徑的,應(yīng)盡可能地直接量化,構(gòu)成定量指標(biāo);反之,則采用定性指標(biāo),以期通過其他方法,進(jìn)行二次量化。
2.成果指標(biāo)和過程指標(biāo)的關(guān)系
所謂成果指標(biāo),即該指標(biāo)僅用于評(píng)價(jià)系統(tǒng)輸出的成果,而不問系統(tǒng)產(chǎn)生此成果的內(nèi)部過程。過程指標(biāo),是通過指標(biāo)來評(píng)價(jià)系統(tǒng)輸出成果的內(nèi)部運(yùn)轉(zhuǎn)機(jī)制。前者著重考察系統(tǒng)的外部效益,后者則著重考察系統(tǒng)的內(nèi)部效益,通常成果指標(biāo)和過程指標(biāo)并存于同一指標(biāo)體系之中。不同類型或?qū)哟蔚脑u(píng)價(jià),這兩種表征方式的指標(biāo)可以有所側(cè)重,任一個(gè)指標(biāo)只要能從客體的本質(zhì)中獲取可靠的信息,并充分地、有效地反映目標(biāo)要求,就不應(yīng)該受指標(biāo)類型的約束,而恰當(dāng)?shù)剡x擇其中的某一種形式。
3.指標(biāo)體系的完整性和簡(jiǎn)易可行性的關(guān)系
指標(biāo)體系完整性的要求,是為體現(xiàn)目標(biāo)整體的需要,也是指標(biāo)設(shè)計(jì)者的根本指導(dǎo)思想。簡(jiǎn)化指標(biāo)的要求,是為使評(píng)價(jià)工作易于進(jìn)行以提高評(píng)價(jià)效率。指標(biāo)設(shè)計(jì)者應(yīng)當(dāng)從優(yōu)化指標(biāo)體系入手,謀求指標(biāo)體系完整性與簡(jiǎn)易可行性的統(tǒng)一,應(yīng)當(dāng)在確保指標(biāo)體系完整性的前提下,力求簡(jiǎn)化指標(biāo)體系,以滿足現(xiàn)實(shí)可行性的要求。
三、評(píng)價(jià)指標(biāo)的設(shè)計(jì)和篩選
在指標(biāo)體系設(shè)計(jì)中,指標(biāo)層次數(shù)的確立是需要首先解決的,一般來說,層次越多,對(duì)被評(píng)價(jià)對(duì)象的刻畫的精細(xì)程度也就越高,但操作成本也就越大。層次的多少,取決于評(píng)價(jià)的性質(zhì)和對(duì)評(píng)價(jià)結(jié)果的要求,論斷性評(píng)價(jià)和審計(jì)型評(píng)價(jià)對(duì)評(píng)價(jià)指標(biāo)精細(xì)程度要求較高,因而這類評(píng)價(jià)指標(biāo)體系的指標(biāo)層次也較多。
根據(jù)指標(biāo)體系的設(shè)計(jì)原則,滿足評(píng)價(jià)目標(biāo)要求的院校教學(xué)保障系統(tǒng)指標(biāo)體系結(jié)構(gòu)如圖所示。在教學(xué)保障能力的總目標(biāo)之下,設(shè)一級(jí)指標(biāo),一級(jí)指標(biāo)下設(shè)二級(jí)指標(biāo),即基礎(chǔ)指標(biāo),共分兩層。
1.一級(jí)評(píng)價(jià)指標(biāo)
依據(jù)前面提到的指標(biāo)的設(shè)計(jì)和篩選原則,分析教學(xué)保障系統(tǒng)的主要內(nèi)容,院校教保系統(tǒng)綜合評(píng)價(jià)的一級(jí)評(píng)價(jià)指標(biāo)可分為:經(jīng)費(fèi)、教室、實(shí)驗(yàn)室、訓(xùn)練場(chǎng)地、教材、圖書情報(bào),這六個(gè)一級(jí)指標(biāo)涵蓋了教學(xué)保障系統(tǒng)的全部內(nèi)容,又相互獨(dú)立,能較好地表述教學(xué)保障系統(tǒng)總體目標(biāo)。
2.二級(jí)評(píng)價(jià)指標(biāo)
在一級(jí)評(píng)價(jià)指標(biāo)選定的基礎(chǔ)上,突出主要因素,對(duì)次要因素進(jìn)行忽略,既考慮全面性,又考慮簡(jiǎn)單可操作性,以經(jīng)費(fèi)為例,二級(jí)評(píng)價(jià)指標(biāo)的具體設(shè)計(jì)和篩選可以這樣進(jìn)行。
用于描述經(jīng)費(fèi)的指標(biāo)主要有經(jīng)費(fèi)總額、年增長率、到位率、來源情況、投向情況、投資效益、審計(jì)情況、節(jié)余情況等指標(biāo),以經(jīng)費(fèi)總額指標(biāo)為例說明,該指標(biāo)與院校的基本情況關(guān)系很大,根據(jù)不同院校規(guī)模、院校特點(diǎn)和承擔(dān)任務(wù)等不同,學(xué)員人數(shù)多,經(jīng)費(fèi)總額在經(jīng)費(fèi)總額上會(huì)差別較大,如作為評(píng)價(jià)指標(biāo)考慮,不能客觀反映院校在經(jīng)費(fèi)管理上的水平,因此該指標(biāo)不予考慮。年增長率指標(biāo)涉及往年的數(shù)據(jù),數(shù)據(jù)量大,與簡(jiǎn)單性原則相悖,不予考慮。審計(jì)情況指標(biāo)反映經(jīng)費(fèi)使用的監(jiān)督情況,結(jié)余情況指標(biāo)反映經(jīng)費(fèi)執(zhí)行的過程情況,二者對(duì)一級(jí)指標(biāo)和系統(tǒng)總目標(biāo)來講,是次要因素。經(jīng)費(fèi)到位率是指實(shí)際到位經(jīng)費(fèi)與計(jì)劃經(jīng)費(fèi)的比例,自籌率是指來源渠道,主要通過自籌占經(jīng)費(fèi)總額的比例來描述,投向比例是指建設(shè)性經(jīng)費(fèi)與經(jīng)費(fèi)總額比例關(guān)系,投資效益是指經(jīng)費(fèi)投入與產(chǎn)出效益。為從宏觀反映經(jīng)費(fèi)的運(yùn)行管理,可選擇經(jīng)費(fèi)的到位率、來源情況、投向情況、投資效益四個(gè)指標(biāo)作為經(jīng)費(fèi)一級(jí)指標(biāo)的二級(jí)指標(biāo),四者以定性或定量的指標(biāo)明確地描述了經(jīng)費(fèi)保障管理的幾個(gè)重要目標(biāo),體現(xiàn)了經(jīng)費(fèi)管理的重點(diǎn)。其他一級(jí)指標(biāo),如教室、實(shí)驗(yàn)室、訓(xùn)練場(chǎng)地、教材、圖書情報(bào)資源的二級(jí)指標(biāo)在選取,基本過程與經(jīng)費(fèi)一級(jí)指標(biāo)一樣,就不再贅述。
院校教學(xué)保障的評(píng)價(jià)是一個(gè)多因素、多層次、多準(zhǔn)則的復(fù)雜的問題,其中主要因素是人的主觀判斷,只能用定性表示,很難完全用定量的數(shù)學(xué)模型解決。而層次分析法是一種定量與定性相結(jié)合,將人的主觀判斷用數(shù)量形式表達(dá)和處理的方法。所以,利用層次分析法建立模型對(duì)此評(píng)價(jià)進(jìn)行輔助決策,確定方案的權(quán)重,使評(píng)價(jià)工作變得更科學(xué)、合理、公正。
四、層次分析法的基本思想及運(yùn)用
20世紀(jì)70年代美國著名運(yùn)籌學(xué)家薩蒂提出了一種多目標(biāo)、多準(zhǔn)則的決策方法——層次分析法。它能將一些量化困難的定性問題在嚴(yán)格數(shù)學(xué)運(yùn)算基礎(chǔ)上定量化;將一些定量、定性混雜的問題綜合為統(tǒng)一整體進(jìn)行綜合分析。特別是運(yùn)用這種方法在解決問題時(shí),可對(duì)定性、定量之間轉(zhuǎn)換、綜合計(jì)算等解決問題過程中人們所作判斷的一致性程度等問題進(jìn)行科學(xué)檢驗(yàn)。
層次分析法的基本原理是將一個(gè)評(píng)價(jià)問題分成有序的層次結(jié)構(gòu)后,對(duì)每個(gè)上層元素,考慮與其有邏輯關(guān)系的下層元素,并在它們之間進(jìn)行兩兩比較的判斷,判斷結(jié)果用數(shù)字給出,表示在一個(gè)矩陣中,稱為“判斷矩陣”。由判斷矩陣的最大特征根及其特征向量,確定每一層中各元素的相對(duì)重要性排序的權(quán)值。通過對(duì)各層次的綜合遞進(jìn)而給出對(duì)各目標(biāo)層而言方案的總排序權(quán)重。
院校教學(xué)保障系統(tǒng)權(quán)集確定的層次分析法步驟如下。
1.建立院校教學(xué)保障系統(tǒng)層次結(jié)構(gòu)模型
最高層:教學(xué)保障能力(目標(biāo)層)
中間層:一級(jí)指標(biāo)(準(zhǔn)則層)
最低層:二級(jí)指標(biāo)(方案層)
2.構(gòu)造判斷矩陣
判斷矩陣是本層次有關(guān)元素之間相對(duì)重要性的比較。
3.層次單排序
層次單排序是根據(jù)判斷矩陣計(jì)算本層次各元素重要性次序的權(quán)值。
4.層次總排序
利用同一層次中所有層次單排序的結(jié)果,就可以計(jì)算針對(duì)上一層次而言本層所有元素相對(duì)重要性的權(quán)值,即層次總排序。層次總排序是從上到下逐層進(jìn)行。
5.層次總排序一致性檢驗(yàn)
五、結(jié)語
院校教學(xué)保障評(píng)價(jià)是一項(xiàng)復(fù)雜的工作,需要作大量深入細(xì)致的研究,目前尚沒有特別適合的指標(biāo)體系和評(píng)價(jià)模型可供使用,本文僅僅是在前人的研究基礎(chǔ)上做的綜述,更多的工作有待進(jìn)一步研究。
參考文獻(xiàn):
[1]劉興太,何冰,李宏偉,王奕飛,程洪海,馬勇.軍隊(duì)院校教研人員科研績效評(píng)價(jià)指標(biāo)體系的構(gòu)建[J].天津科技,2009,(04).
[2]楊自文.軍隊(duì)院校本科教學(xué)質(zhì)量保證體系及其應(yīng)用研究[D].國防科學(xué)技術(shù)大學(xué),2006.
[3]楊曉飛.軍隊(duì)院校教學(xué)保障系統(tǒng)資源優(yōu)化研究[M].國防科學(xué)技術(shù)大學(xué),2005.
[4]徐紅.普通高校本科教學(xué)方法之案例研究[D].華南師范大學(xué),2004.
[5]管曉艷.山東省軟件產(chǎn)業(yè)競(jìng)爭(zhēng)力評(píng)價(jià)[D].山東大學(xué),2006.
注:本文中所涉及到的圖表、注解、公式等內(nèi)容請(qǐng)以PDF格式閱讀原文