基于AHP-FCE的外語(yǔ)專業(yè)畢業(yè)論文綜合評(píng)價(jià)系統(tǒng)設(shè)計(jì)與應(yīng)用

李敦東

（常州大學(xué)周有光語(yǔ)言文化學(xué)院，江蘇常州213164）

基于AHP-FCE的外語(yǔ)專業(yè)畢業(yè)論文綜合評(píng)價(jià)系統(tǒng)設(shè)計(jì)與應(yīng)用

李敦東

（常州大學(xué)周有光語(yǔ)言文化學(xué)院，江蘇常州213164）

從我國(guó)高等院校外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)工作現(xiàn)狀出發(fā)，討論了該項(xiàng)工作的基本特征和工作原則，在整合AHP和FCE優(yōu)勢(shì)的基礎(chǔ)上，設(shè)計(jì)了一種具備良好操作性的評(píng)價(jià)體系并進(jìn)行了應(yīng)用演示。該系統(tǒng)能有效解決當(dāng)前外語(yǔ)畢業(yè)論文評(píng)價(jià)工作中的問(wèn)題，不斷提高該項(xiàng)工作的科學(xué)性、標(biāo)準(zhǔn)化和公正性。

評(píng)價(jià)系統(tǒng)；層次分析法；模糊綜合評(píng)價(jià)法

畢業(yè)論文是高等院校學(xué)生為完成學(xué)業(yè)在教師指導(dǎo)下運(yùn)用所學(xué)知識(shí)，就所學(xué)專業(yè)某一現(xiàn)象或問(wèn)題進(jìn)行系統(tǒng)研究后對(duì)成果加以系統(tǒng)表述形成的具備一定理論和實(shí)踐價(jià)值的學(xué)術(shù)文本。它是我國(guó)高等院校教學(xué)計(jì)劃中重要的實(shí)踐環(huán)節(jié)，是培養(yǎng)大學(xué)生基本科研和實(shí)踐工作能力的重要手段。近年來(lái)，隨著教育教學(xué)改革的深入，畢業(yè)論文評(píng)價(jià)工作越來(lái)越受各院校和教育界學(xué)者重視。筆者對(duì)國(guó)內(nèi)研究的檢索表明：1998年至2014年，研究論文數(shù)量呈明顯上升趨勢(shì)。[1]然而，與外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)有關(guān)的論文僅有兩篇，簡(jiǎn)要談及了英語(yǔ)專業(yè)畢業(yè)論文的重要性及評(píng)價(jià)原則。加強(qiáng)畢業(yè)論文評(píng)價(jià)工作的科學(xué)化是我國(guó)《高等學(xué)校英語(yǔ)專業(yè)英語(yǔ)教學(xué)大綱》的要求，也是國(guó)際高教質(zhì)量保障體系的發(fā)展趨勢(shì)。鑒于此，筆者擬從該項(xiàng)工作的現(xiàn)狀出發(fā)，基于其特征設(shè)計(jì)一套科學(xué)的綜合評(píng)價(jià)體系，希望推動(dòng)該項(xiàng)工作的科學(xué)性、標(biāo)準(zhǔn)化和公正性。

一、我國(guó)高等院校外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)工作的現(xiàn)狀與不足

筆者對(duì)國(guó)內(nèi)30所各層次外語(yǔ)專業(yè)院系[2]的畢業(yè)論文評(píng)價(jià)工作進(jìn)行調(diào)查后發(fā)現(xiàn)：

（1）大多數(shù)院系都采用了科學(xué)的工作流程：指導(dǎo)教師評(píng)閱—交叉審閱—答辯評(píng)審—綜合評(píng)分。

（2）大多數(shù)院系都采用百分制量化評(píng)價(jià)方式。

（3）總體上，學(xué)校層次越高，工作過(guò)程也越科學(xué)越嚴(yán)謹(jǐn)。

此外，現(xiàn)代信息技術(shù)在該項(xiàng)工作中得到了良好應(yīng)用，大大提高了工作效率，順應(yīng)了當(dāng)代社會(huì)對(duì)低碳環(huán)保的追求。

（1）忽視評(píng)價(jià)工作的模糊性

標(biāo)準(zhǔn)的籠統(tǒng)性和評(píng)價(jià)的主觀模糊性導(dǎo)致作為主觀決策過(guò)程的畢業(yè)論文評(píng)價(jià)本質(zhì)上不能做到精確量化，但絕大多數(shù)高校均要求參評(píng)教師給出精確分?jǐn)?shù)，這與評(píng)價(jià)工作的模糊性相背。

（2）評(píng)價(jià)維度不全面、指標(biāo)不完善、權(quán)重分配過(guò)于主觀

雖然多數(shù)院系采用了多元評(píng)價(jià)，涉及語(yǔ)言表達(dá)、論證過(guò)程、格式規(guī)范、答辯表現(xiàn)等，但諸如選題價(jià)值、外文資料翻譯、開(kāi)題答辯、工作態(tài)度等與論文質(zhì)量密切相關(guān)的指標(biāo)都未涵蓋。評(píng)價(jià)成績(jī)主要由指導(dǎo)教師、交叉審閱教師和答辯小組評(píng)分等三或兩部分成績(jī)按主觀比例如4:3:3構(gòu)成，甚至僅由指導(dǎo)教師或答辯小組判定論文成績(jī)。

（3）缺乏過(guò)度主觀評(píng)價(jià)防控設(shè)計(jì)

評(píng)價(jià)工作固有的主觀性加上師生之間因種種原因產(chǎn)生的人情關(guān)系容易導(dǎo)致教師對(duì)評(píng)價(jià)對(duì)象作出過(guò)度評(píng)價(jià)，導(dǎo)致評(píng)價(jià)結(jié)果失去公正性。遺憾的是沒(méi)有院系在評(píng)價(jià)步驟中加入針對(duì)此缺陷的防控設(shè)計(jì)。

二、外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)工作的基本特點(diǎn)、原則與方法選擇

（1）主觀模糊性

畢業(yè)論文評(píng)價(jià)工作本質(zhì)上屬于主觀決策過(guò)程，它要求評(píng)價(jià)主體對(duì)評(píng)價(jià)對(duì)象作出盡量客觀公正的評(píng)價(jià)，但評(píng)價(jià)標(biāo)準(zhǔn)及過(guò)程固有的模糊性導(dǎo)致評(píng)價(jià)主體無(wú)法作出精確的量化評(píng)價(jià)。此外，作為群組決策，不同評(píng)價(jià)主體的心理標(biāo)準(zhǔn)難免存在差異，加重了評(píng)價(jià)的主觀模糊性。

（2）系統(tǒng)綜合性、指標(biāo)及權(quán)重差異性

評(píng)價(jià)工作是一項(xiàng)綜合的系統(tǒng)工程，必須盡可能涵蓋各相關(guān)評(píng)價(jià)維度。就某一維度來(lái)講，指標(biāo)設(shè)計(jì)也必須具備科學(xué)性、差異性和明確性，方可讓評(píng)價(jià)主體有章可循。此外，各指標(biāo)貢獻(xiàn)率并不相同，必須盡可能賦予合理權(quán)重。

（3）評(píng)價(jià)結(jié)果量化要求

盡管評(píng)價(jià)工作具有不可避免的模糊性，但為了確定畢業(yè)論文的優(yōu)秀率和合格率，絕大多數(shù)院系均要求為評(píng)價(jià)對(duì)象打出百分制分?jǐn)?shù)。因此，在進(jìn)行系統(tǒng)設(shè)計(jì)時(shí)必須將模糊定性操作轉(zhuǎn)化為精確的定量操作。

（4）嚴(yán)肅性和公正性

畢業(yè)論文評(píng)價(jià)是對(duì)學(xué)生四年學(xué)業(yè)能力的終極評(píng)定，不僅關(guān)乎學(xué)生能否獲得畢業(yè)證和學(xué)位證等切身利益，而且對(duì)我國(guó)高等教育質(zhì)量監(jiān)控與發(fā)展也有重要影響，必須確保嚴(yán)肅性和公正性。

（1）專業(yè)性原則

外語(yǔ)專業(yè)畢業(yè)論文不同于理工科論文，如表達(dá)符號(hào)為外語(yǔ)、更注重邏輯推理與系統(tǒng)建構(gòu)等。其評(píng)價(jià)體系構(gòu)建必須考慮專業(yè)特殊性來(lái)設(shè)計(jì)評(píng)價(jià)指標(biāo)并為其分配合理權(quán)重。

（2）靜態(tài)與動(dòng)態(tài)評(píng)價(jià)相結(jié)合

畢業(yè)論文寫作是一個(gè)階段性動(dòng)態(tài)過(guò)程，評(píng)價(jià)體系既要涉及對(duì)論文的靜態(tài)評(píng)價(jià)還應(yīng)包括對(duì)工作過(guò)程的動(dòng)態(tài)監(jiān)控性評(píng)價(jià)，即做到靜態(tài)與動(dòng)態(tài)評(píng)價(jià)相結(jié)合。

（3）公平公正原則

鑒于評(píng)價(jià)工作的主觀模糊性及評(píng)價(jià)主體可能作出的過(guò)度主觀性評(píng)價(jià)。評(píng)價(jià)步驟設(shè)計(jì)必須想方設(shè)法減少種種主觀隨意性，盡最大努力保證評(píng)價(jià)結(jié)果嚴(yán)肅公正。

（4）可操作性原則

指標(biāo)設(shè)計(jì)必須具備可測(cè)性、精細(xì)性和完整性，避免不必要的要素交叉。同時(shí)，具備經(jīng)濟(jì)可操作性和信息化優(yōu)勢(shì)，以充分發(fā)揮現(xiàn)代信息技術(shù)的效率優(yōu)勢(shì)和綠色環(huán)保等特性。

據(jù)此，筆者整合了層次分析法和模糊綜合評(píng)價(jià)法來(lái)設(shè)計(jì)外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)體系，并加入了過(guò)度主觀評(píng)價(jià)防控設(shè)計(jì)。層次分析法（AHP）是美國(guó)著名運(yùn)籌學(xué)家塞蒂于上世紀(jì)70年代創(chuàng)立的一種定性和定量分析相結(jié)合的決策方法。該方法充分利用專家級(jí)決策人員的豐富經(jīng)驗(yàn)和精準(zhǔn)判斷力根據(jù)問(wèn)題性質(zhì)和決策目標(biāo)將問(wèn)題分解為不同的結(jié)構(gòu)要素，并按照要素間隸屬關(guān)系和相互作用將因素按不同層次聚合為一個(gè)遞階模型，從而將決策問(wèn)題歸結(jié)為指標(biāo)層對(duì)目標(biāo)層的相對(duì)權(quán)重值定量化。模糊綜合評(píng)價(jià)法（FCE）是一種基于模糊數(shù)學(xué)的綜合評(píng)價(jià)方法。該方法根據(jù)模糊數(shù)學(xué)的隸屬度理論，整合主觀邏輯分析與客觀精確運(yùn)算把定性評(píng)價(jià)轉(zhuǎn)化為定量評(píng)價(jià)，從而對(duì)受多種因素制約的現(xiàn)象做出評(píng)價(jià)。前者能有效避免畢業(yè)論文評(píng)價(jià)體系設(shè)計(jì)不夠全面、指標(biāo)權(quán)重分配過(guò)于主觀的缺陷；后者可以將主觀模糊評(píng)價(jià)轉(zhuǎn)化為量化評(píng)價(jià)。整合兩種方法系統(tǒng)性強(qiáng)和結(jié)果明晰等特點(diǎn)可有效解決外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)過(guò)程中存在的問(wèn)題。

為什么斯里蘭卡會(huì)成為寶石故鄉(xiāng)，幾乎全國(guó)各地都發(fā)現(xiàn)過(guò)寶石？這是因?yàn)樗估锾m卡的地質(zhì)基底經(jīng)過(guò)億萬(wàn)年的地殼運(yùn)動(dòng)和火山運(yùn)動(dòng)，山間河川把巖石沖擊到平原，形成了含寶石的底層。

三、外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)系統(tǒng)的步驟設(shè)計(jì)

該模型由目標(biāo)層、準(zhǔn)則層和指標(biāo)層組成。目標(biāo)層是對(duì)評(píng)價(jià)對(duì)象題的概述，準(zhǔn)則層是隸屬于目標(biāo)層的具體描述，指標(biāo)層則是各準(zhǔn)則層下屬的細(xì)化評(píng)價(jià)內(nèi)容。

（1）根據(jù)遞階模型相鄰層次間的隸屬關(guān)系，請(qǐng)K位行業(yè)專家依據(jù)兩兩比較法對(duì)各層指標(biāo)的重要性比較標(biāo)度進(jìn)行打分，構(gòu)造出判斷矩陣。設(shè)矩陣有i個(gè)元素，則判斷矩陣為Pk(1)。

（2）檢驗(yàn)各矩陣的隨機(jī)一致性。由于判斷矩陣易受個(gè)體認(rèn)知模糊性及評(píng)價(jià)系統(tǒng)復(fù)雜性的影響，必須對(duì)各矩陣的隨機(jī)一致性進(jìn)行檢驗(yàn)。計(jì)算過(guò)程如下：首先計(jì)算各矩陣的最大特征值λmax。鑒于該計(jì)算過(guò)程比較繁瑣，此處建議直接在Matlab7.1中輸入各矩陣Pk后，調(diào)用最大特征值計(jì)算函數(shù)max(eig(Pk))即可獲得各矩陣的最大特征值；計(jì)算各矩陣的一致性指標(biāo)CI=(λmax-n)/(n-1)；查詢平均隨機(jī)一致性指標(biāo)對(duì)應(yīng)的RI值，計(jì)算各矩陣的隨機(jī)一致性指標(biāo)CR=CI/RI。當(dāng)n=1或2時(shí)，判斷矩陣具有完全一致性；當(dāng)n〉2時(shí)，若CR〈0.1，則判斷矩陣具有滿意的一致性，否則必須重建判斷矩陣，直至滿足條件。

（3）計(jì)算各指標(biāo)權(quán)重。計(jì)算指標(biāo)權(quán)重的方法有和積法、最小對(duì)數(shù)二乘法等方法。合積法計(jì)算過(guò)程如下：歸一化各矩陣[1]，將歸化矩陣按行相加[2]后再次進(jìn)行歸一化處理[3]，計(jì)算各個(gè)專家的權(quán)重[4]，組成專家權(quán)重矩陣后將之歸一化[5]，然后計(jì)算各指標(biāo)的最終權(quán)重[6]。

設(shè)評(píng)語(yǔ)等級(jí)集E={e1,e2,…,eh},h為評(píng)語(yǔ)等級(jí)子集的個(gè)數(shù)。與E相對(duì)應(yīng)，令評(píng)語(yǔ)分值向量集F=[f1,f2,…,fh]。

請(qǐng)R位評(píng)價(jià)主體按遞階模型為評(píng)價(jià)對(duì)象打分構(gòu)造出各指標(biāo)的模糊評(píng)價(jià)矩陣Ri(2)，由于評(píng)價(jià)結(jié)果可能受評(píng)價(jià)主體特定情感因素的影響，因此必須檢驗(yàn)Ri的離散程度。令E={5,4,3,2,1}。依次計(jì)算R位評(píng)價(jià)主體對(duì)各指標(biāo)評(píng)價(jià)結(jié)果的離散系數(shù)CVi(i=1,2,…,n)[7]及其平均值A(chǔ)VG（CVi）。經(jīng)過(guò)計(jì)算，在評(píng)價(jià)主體少于10人時(shí)，若AVG（CVi）〉0.15，則說(shuō)明各評(píng)價(jià)主體對(duì)該指標(biāo)層的評(píng)價(jià)存在不公正極值。計(jì)算各分值與均值之間的標(biāo)準(zhǔn)差，標(biāo)準(zhǔn)差最大者即為極值，更換該評(píng)價(jià)主體重新評(píng)價(jià)，直至評(píng)價(jià)結(jié)果滿足要求。

綜合各準(zhǔn)則層的評(píng)價(jià)結(jié)果向量Ai，建立針對(duì)目標(biāo)層的模糊評(píng)價(jià)矩陣A(3)，然后利用準(zhǔn)則層的權(quán)重矩陣計(jì)算評(píng)價(jià)對(duì)象的最終模糊評(píng)價(jià)結(jié)果G[9]。結(jié)合不同評(píng)語(yǔ)分值向量集F計(jì)算評(píng)價(jià)對(duì)象的最終精確得分S[10]。本段提到的矩陣和計(jì)算公式如表1所示。

表1 本段提到的矩陣和計(jì)算公式

四、應(yīng)用實(shí)例

根據(jù)層次分析法原理，筆者整合了國(guó)內(nèi)已有畢業(yè)論文評(píng)價(jià)體系研究成果和校內(nèi)外專家和專任教師的意見(jiàn)，構(gòu)建出如下外語(yǔ)專業(yè)畢業(yè)論文綜合評(píng)價(jià)遞階模型，如表2所示。

表2 外語(yǔ)專業(yè)畢業(yè)論文綜合評(píng)價(jià)遞階模型

請(qǐng)校內(nèi)外8位專家和教師對(duì)各層指標(biāo)打分構(gòu)造出判斷矩陣，因篇幅所限，筆者僅對(duì)準(zhǔn)則層U5對(duì)應(yīng)的矩陣Pk=8為例演示計(jì)算過(guò)程，如表3所示。

表3 八位專家的U5判斷矩陣

運(yùn)用Matlab7.1計(jì)算各判斷矩陣的最大特征值，依次為{3.0092,3,3,3.0092,3.0092,3,3.0037,3}。計(jì)算P1的一致性指標(biāo)CI=(3.009200-3)/2=0.0046，各專家矩陣的λmax依次為{0.0046,0,0,0.0046,0.0046,0,0.0019,0}；據(jù)公式CR=CI/RI，各專家判斷矩陣的隨機(jī)一致性指標(biāo)值依次為 {0.0079,0,0,0.0079,0.0079,0,0.0032,0}，均小于0.1，通過(guò)檢驗(yàn)。

本節(jié)以第一位專家的判斷矩陣為例演示計(jì)算過(guò)程。首先歸一化P1；按行相加得M1=[0.2678 1.7608 0.9713]T；再次歸一化得。其他各專家的打分歸化矩陣依次為：計(jì)算第一位專家最終權(quán)重 W1=1/(1+10×CR1)=1/(1+10× 0.007931)=0.9265；其他專家的最終權(quán)重依次為 {1,1, 0.9265,0.9265,1,0.9691}；歸一化各專家權(quán)重組成矩陣0.1291]T；計(jì)算U5各指標(biāo)的權(quán)重值為：[0.126441,0.253472,0.620088]。其他指標(biāo)的計(jì)算結(jié)果請(qǐng)見(jiàn)表2。

下面說(shuō)明運(yùn)用該遞階模型對(duì)某位英語(yǔ)專業(yè)學(xué)生畢業(yè)論文進(jìn)行模糊評(píng)價(jià)的過(guò)程。因篇幅所限，此處以準(zhǔn)則層U1為例演示計(jì)算過(guò)程。

（1）設(shè)定模糊評(píng)語(yǔ)集和對(duì)應(yīng)評(píng)語(yǔ)向量集為：V={e1,e2, e3,e4,e5}={優(yōu)，良，中，合格，差}，F(xiàn)=[f1,f2,f3,f4,f5]=[5,4,3, 2,1]（五分制）或[100,85,70,60,40]（百分制）。

（2）由3位老師對(duì)U1各指標(biāo)按V打分，構(gòu)造出隸屬度矩陣R1；計(jì)算該矩陣離散程度AVG(CVi)=0.0787〈0.15，通過(guò)檢驗(yàn)，說(shuō)明評(píng)價(jià)小組沒(méi)有給出極值。

（3）歸一化矩陣R1，計(jì)算該論文在準(zhǔn)則層U1下的評(píng)價(jià)結(jié)果為：

A1可解讀為：所有評(píng)價(jià)主體認(rèn)為準(zhǔn)則層U1為優(yōu)的概率為28.58%、良為45.63%、中為25.79%、及格和差的概率為0%。其他各層評(píng)價(jià)結(jié)果依次為：A2=[0,0.6667, 0.3333,0,0];A3=[0.1751,0.4075,0.4174,0,0];A4=[0.0327, 0.2925,0.6748,0,0];A5=[0.0845,0.5822,0,0,0]。

（4）構(gòu)造總目標(biāo)下模糊關(guān)系矩陣A，利用準(zhǔn)則層權(quán)重計(jì)算最終模糊評(píng)價(jià)結(jié)果G。

結(jié)合不同評(píng)語(yǔ)分值向量集F計(jì)算評(píng)價(jià)對(duì)象的等級(jí)分或百分制分?jǐn)?shù)：

必須指出，運(yùn)用本法求得的論文最低分為1或40，即本法對(duì)質(zhì)量更差的論文不具備區(qū)分度，但這并不影響其適用性，不達(dá)標(biāo)的論文必須退回修改，對(duì)學(xué)位證發(fā)放不會(huì)產(chǎn)生決定性影響。

五、結(jié)束語(yǔ)

本文從我國(guó)高等院校外語(yǔ)專業(yè)畢業(yè)論文評(píng)價(jià)工作的現(xiàn)狀出發(fā)，討論了該項(xiàng)工作的基本特征和工作原則，在整合AHP和FCE優(yōu)勢(shì)的基礎(chǔ)上，設(shè)計(jì)了一種具備良好操作性的評(píng)價(jià)體系。該體系能有效地解決該項(xiàng)工作中存在的問(wèn)題，調(diào)動(dòng)學(xué)生畢業(yè)論文寫作的積極性，進(jìn)一步提高該項(xiàng)工作的科學(xué)性、標(biāo)準(zhǔn)化和公正性。此外，鑒于本系統(tǒng)計(jì)算過(guò)程的數(shù)學(xué)規(guī)律性極強(qiáng)，可以設(shè)計(jì)基于大型數(shù)據(jù)庫(kù)的網(wǎng)絡(luò)系統(tǒng)，實(shí)現(xiàn)全部計(jì)算過(guò)程的自動(dòng)化，更好地提高工作效率，為創(chuàng)建節(jié)約型社會(huì)貢獻(xiàn)一份力量。

[1]高等學(xué)校外語(yǔ)專業(yè)教學(xué)指導(dǎo)委員會(huì)英語(yǔ)組編.高等學(xué)校英語(yǔ)專業(yè)英語(yǔ)教學(xué)大綱[M].北京：外語(yǔ)教學(xué)與研究出版社,2000.

[2]Saaty T L.Decision making with the analytic hierarchy process[J].Int.J.Services Sciences 2008(1):83-98.

[3]姜鵬遠(yuǎn)等.基于AHP和群體決策的土地定級(jí)因素權(quán)重的確定[J].測(cè)繪科學(xué)技術(shù)學(xué)報(bào),2009(1):72-75.

[4]池源,李升峰.基于改良模糊綜合評(píng)價(jià)法的城市湖泊水環(huán)境質(zhì)量分析[J].華中師范大學(xué)學(xué)報(bào)（自然科學(xué)版）, 2013(1):124-128.

（編輯：楊馥紅）

TP315

：B

：1673-8454（2015）09-0079-04