吳燕萍,張大然,章 曄
(浙江醫學高等專科學校,浙江 杭州 310053)
·教學研究與管理·
應用層次分析法構建高職高專學生綜合學業成績評價指標體系
吳燕萍,張大然,章 曄
(浙江醫學高等專科學校,浙江 杭州 310053)
目的:構建高職高專學生綜合學業成績評價指標體系。方法以浙江醫學高等專科學校教務管理系統中反映學生成績的因素為基礎,應用德爾菲法(Delphi Method)構建高職高專學生綜合學業成績評價指標體系,用層次分析法(Analytic Hierarchy Process, AHP)量化影響因素,在一致性檢驗的基礎上確定各指標的權重向量。結果經一致性檢驗制定評價指標體系。結論該評價指標體系為高職高專院校多元化評價學生學業成績提供參考。
綜合學業;指標體系;層次分析法;德爾菲法
Abstract: [Objective] To establish an index system of student comprehensive performance at higher vocational school. [Method] Delphi method was used to set up the original index system for student comprehensive performance based on the historical student score data in educational administration management system. AHP (Analytic Hierarchy Process) was used for qualifying the quantitative fraction. The assessment system was established through defining the weight of each index at Zhejiang Medical College. [Result] The index system was set up with verification. [Conclusion] The index system can provide new trend for assessing comprehensive performance.
Keywords: comprehensive performance; index system; AHP;Delphi
目前,高職高專院校對學生學業成績的評價通常依靠單一的加權平均績點[1]計算,該方法只涉及到學生專業主修課程,未對學生計算機能力水平、大學英語等級成績、學生的違紀等相關情況給予評價[2]。依據浙江省考試院2012年專升本實施細則[3]和高職高專院校2013年專升本報考學生資格審查工作的要求,學生學業成績評價應從原來單一加權平均績點轉變為多元綜合評價體系,特別是應加入有關考風方面和技能能力的因素。
本文以浙江醫學高等專科學校為研究對象,依據學校教務管理系統中反映學生成績的各項因素,應用德爾菲法和層次分析法[4]確定評價指標和指標權重,建立較完善的學生綜合學業成績評價指標體系,為高職高專院校多元化評價學生學業成績提供參考。
根據學校《學生手冊》中《學生綜合素質測評辦法》、《學生學籍管理辦法》和《關于做好2012年專升本報考資格初次審查的通知》中學業成績相關規定要求,從學校教務管理系統中提取學生成績相關信息,包括學生學習作風(如學風、考風)、專業成績(教學計劃中的學生課程成績)和其他成績(教學計劃以外考試成績,如大學英語等級成績、計算機等級成績等),探索構建學生綜合學業成績的評價指標。
1.1 評價指標體系草案
依據學校教學管理經驗和省考試院專升本新實施細則,分析評價學生各方面學業的關鍵因素,建立能分析學生綜合學業成績的指標體系草案,見圖1。

圖1 學生綜合學業成績指標體系草案
1.2 組織專家咨詢
采用德爾菲法,設計咨詢表,聘請高職高專院校及本科院校一線教學管理人員以無記名形式對學生綜合學業成績評價體系各級指標的合理性和必要性進行評估。調查共發放問卷25份,收回有效問卷25份,調查結果見表1。

表1 一級、二級指標確定的調查結果
第一輪專家咨詢目的是選取經專家評定的指標。在此次咨詢中,專家意見較集中,因此不再作類似的第二輪專家咨詢。在德育成績二級指標中有專家建議加入體現學生品德素質的“學習態度”和“社會實踐”指標,經分析討論,該指標在高職高專院校學生參與人數和次數均較少,無法充分體現區分度,因此未增加該項指標。在智育成績二級指標中,部分專家認為“體能成績”并不是一項需要加入的指標,事實上目前高中生乃至大學生身體素質逐年下降,為更好體現培養全面的高素質人才,保留這一指標。對“課程通過率”這一指標是因為浙江省考試院從2011年開始對專升本學生在校期間學習成績提出該項要求。經過第一輪專家咨詢,確定評價指標體系(同草案圖1)。
由于確定評價體系指標權重所涉及的范圍廣且情況較復雜,設計兩兩比較咨詢表,減少咨詢專家人數。在上一輪教學管理人員所在的院校基礎上,每所院校按比例選請從事教學管理年份最長的10位專家,以無記名形式參與確定各級指標的權重,得到有效問卷10份。
2.1 指標權重計算思路
依據評價體系分層結構和AHP原理,計算指標權重。(1)構造判斷矩陣。采用1-9比較尺度將每位專家的咨詢表反饋結果用于構造當前元素對上一層次每個元素的兩兩比較判斷矩陣;(2)計算矩陣方根法,確定相對權值。確定對于上一層次的每個元素而言,本層次中與其相關元素的重要性的排序;(3)一致性檢驗。在得到每位專家對評價指標給出的權重系數后,檢驗計算所得到的權重是否符合邏輯。通常一致性檢驗指數CI檢驗各指標的相對優先順序有無邏輯混亂,一般認為CI<0.1時,該權重可以接受;平均隨機一致性比率CR值度量判斷矩陣是否具有滿意一致性, CR<0.1時,一般認為該判斷矩陣具有滿意的一致性;(4)計算綜合權重。根據檢驗結果剔除CR>0.1的情況,將各專家對同一指標的權重進行算術平均。
根據指標權重計算思路,運用下述公式對每位專家咨詢結果用于構造和計算判斷矩陣A、最大特征根λmax及其對應的特征向量W,再進行一致性檢驗。



2.2 指標權重計算實現
(1)依據每位專家咨詢結果計算一級指標權重。
①通過咨詢表的結果,建立一級指標的判斷矩陣表,見表2。

表2 矩陣表

(2)依據每位專家咨詢結果計算二級指標權重。
①二級指標層共包含8個因素,根據專家的意見形成二級指標相應的判斷矩陣分別是
用上述計算一級指標權重(1)中的步驟②③分別對二級指標計算,結果如下:

同理得到各二級指標權重,W2=(0.800,0.100,0.100),W3=(0.300,0.300,0.400)且CR均小于0.1,說明各指標權重系數值W1,W2,W3分配均合理,確定該專家咨詢結果的權重。
2.3 指標權重結果
根據每位專家對同一指標權重的算術平均(剔除CR>0.1的情況),得出代表專家群體意見的綜合權重(表3)。同理,得到二級指標體系中各個指標的權重(表4)。

表3 一級指標權重的確定

表4 二級指標權重的確定

表5 學生綜合學業成績評價體系
根據AHP計算結果及高職高專院校現狀,制定學校學生綜合學業成績評價指標體系(表5)。為驗證該指標體系的科學性和可操作性,今后將對該評價指標體系作進一步驗證研究。
[1]王凱成. 基于數據挖掘的大學生學業預警研究[D].上海師范大學. 2012.
[2]文然. 基于大學生綜合測評系統的學生預警機制[D].北京工業大學. 2009.
[3]浙江省考試院. 浙江省2012年選拔優秀高職高專畢業生進入本科學習工作實施細則[Z],2011-10.
[4]Satty T L. A scaling method for priorities in hierarchical structures[J]. Journal of Mathematical Psychology, 1978,1(1):57-68.
TheestablishmentoftheindexsystemofstudentcomprehensiveperformanceevaluationathighervocationalschoolwithAHPmethod
WUYanping,ZHANGDaran,ZHANGYe
(Zhejiang Medical College,Hangzhou 310053,China)
G642.0
A
1672-0024(2014)02-0001-04
吳燕萍(1980-),女,浙江嘉興人,碩士,助理研究員。研究方向:教學管理與研究
浙江省教科規劃2013年度(高校)研究課題(編號:SCG385)