吳才天子
摘 要:本文基于已有孔子學院評估指標體系,運用層次分析法對各指標進行重要性分析,規范評估標準,進一步提升孔子學院評估指標體系的科學性、規范性和可操作性,更準確地評估各國孔子學院的發展情況,以便及時發現問題,全面改進提高。
關鍵詞:孔子學院;評估;指標體系;層次分析法
中圖分類號:F592文獻標志碼:A文章編號:2095-9214(2016)12-0265-03
一、引言
隨著中國綜合國力的不斷增強,作為實現中國文化走出去、提升中國文化軟實力的重要載體,孔子學院近年來成長迅速、成效顯著。從2004年第一所孔子學院在韓國成立以來,截至2015年12月1日,全球134個國家(地區)已經建立了500所孔子學院和1000個孔子課堂①。十幾年的發展中,孔子學院總體向上向好,基本完成了服務國家發展戰略和傳播漢語言文化兩大基本任務,但也部分出現了教學質量不高、運營狀況欠佳等問題。
為量化呈現和評估孔子學院的發展情況,吳應輝②在《孔子學院評估指標體系研究》一文中提出了一個包含10個一級指標、52個二級指標的評估體系[1]。作者運用該指標體系對東南亞孔子學院進行了國別比較研究,發現有較強的前瞻性、全面性和可操作性,但同時也感覺到孔子學院數量眾多,評估工作耗時長、數據繁雜、易產生主觀偏差。因此,本文在該評估指標體系基礎上,運用層次分析法對各指標所占權重進行計算,運用統一評分法、對比評分法兩種方法和定性化、定量化兩種方式精確單指標評分,以期建立標準化的評估體系,達到評分更精準、充分反映各孔子學院的發展情況和節省人力、使孔子學院評估工作形成常態的一舉兩得的效果,促進孔子學院全方位改進工作、提升水平、加速發展。
二、層次分析法基本理論
層次分析法是一種多目標綜合評價和分析方法,其應用領域廣泛,尤其在建立評價體系過程中具有一定的優勢作用。評估孔子學院時,為保證全面性,涉及的指標因素較多。現有的評估體系基本上是直接給出各指標分值,評估人給出各項評分后,累計得出每所孔子學院的最終得分,評分過程易受主觀因素影響。層次分析法則是將眾多的評估指標劃分層次,確定指標之間的相互關系和所占權重,使評估體系更加準確客觀。
圖1 層次分析法基本結構
將現有指標進行分層次處理,分為目的層(A層)、準則層(B層)和方案層(C層),如圖1所示。分析基本步驟如下:
1、建立判斷矩陣。在層次分析法的基本評估體系中,通過同一層元素兩兩比較,分析不同下層元素對上層元素的影響,確定判斷矩陣。以準則B1為例,根據其下一層元素方案C11,C12,…,C1n建立n*n的判斷矩陣S,
S=S11S12…S1n…Sn1Sn2…Snn。
其中,矩陣元素sij表示C1i和C1j兩兩比較的重要性,確定對上一層因素B1的影響權重,影響越大權重值越大,影響越小權重值越小。元素兩兩比較可以采用1-9尺度表示方法,定義如表1所示。
2、通過對判斷矩陣的處理,獲取判斷矩陣的最大特征值λ和其相應的特征向量W,W=[W1,…Wn],則W矩陣元素就是權重系數,即表示各個元素對于上層元素的重要性。在獲取權重系數后,仍需要對權重系數分配的合理性進行檢查,對判斷矩陣進行一致性檢驗,若判斷矩陣不滿足一致性,則需要調整權重系數。
針對層次分析法基本評估體系中的元素分別獲取其判斷矩陣,之后獲得其各自權重系數,建立權重樹,進而建立更加科學合理的評估體系。
三、優化評估指標體系
將層次分析法應用于孔子學院評估,根據評估指標特點,可分別建立正面指標體系和負面指標體系作為目的層(A層)。正面指標體系的下一層(B層)包括辦學指導思想、和諧程度、管理機制、辦學條件、影響力、漢語教學情況、主辦文化推介活動情況、運營情況、獲獎情況9個一級指標;負面指標體系的下一層(B層)包括負面影響1個一級指標,如圖2所示。正面指標體系評估結果采用正數值表示,負面指標體系評估結果采用負數值表示,孔子學院的綜合評估結果為正數值和負數值的和。也可建立正面指標評估和負面指標評估的權重比,孔子學院的綜合評估結果為正數值和其權重比的積與負數值和其權重比的積的和。
建立分層體系后,對同層指標進行兩兩比較,確定各指標的重要性,重要性較高則權重較大,對最終評估結果影響較大。確定影響權重較為客觀的方法是,請多位國內外相關領域的專家學者按層次分析法進行指標比較,得出每位預期的權重結果后再取期望值。
以B層B6漢語教學情況指標舉例說明。其下C層指標有學生人數(C19)、培訓本土漢語教師數(C20)、漢語考試情況(C21)、教育技術應用情況(C22)、教學法創新情況(C23)、本土化教學資源開發情況(C24)、向其它漢語教學機構提供教學資源情況(C25)、教學質量學生評價結果(C26)、教學質量專家評價結果(C27)和單位時間內教學效率專家評價(C28)。根據層次分析法的基本思想和筆者個人經驗,對指標C19至C28進行兩兩比較,建立判斷矩陣,如表3所示,評估其對上級指標漢語教學情況的重要性,確定影響權重分配。
經過矩陣運算后,獲取其最大特征值λ=11.1332和對應的特征向量值W=[0.4991,0.7310,0.1209,0.0612,0.0456,0.2696,0.0960,0.1951,0.1951,0.1951]。根據最大特征值和相應的特征向量值,計算出該判斷矩陣的一致性檢驗值大于0小于0.1,滿足一致性原則,權重分配具有合理性。根據最大特征值進行歸一化操作后,其權重結果為W.=[0.2072,0.3035,0.0502,0.0254,0.0189,0.1119,0.0399,0.0810,0.0810,0.0810]。評估某一孔子學院漢語教學情況指標時,對其下一級指標C19至C28進行評分,分數采用矩陣J表示,J=[jc19,jc20,jc21,jc22,jc23,jc24,jc25,jc26,jc27,jc28]T,漢語教學情況指標的實際得分結果是
采用上述層次分析法構建孔子學院評估指標體系,引入重要性權重分配的概念,可將指標體系從定性化描述變為定量化表現和標準化評估,減少評估的主觀性。
四、單指標評分方法
在孔子學院評估工作中,可對不同孔子學院之間同一指標進行橫向比較,也可對一所孔子學院同一指標不同年份的數據進行縱向比較。無論橫向比較還是縱向比較,重點都是對52個二級指標進行評分。
針對不同的評估需求,可以采用統一評分法和對比評分法兩種不同的單指標評分方法。統一評分法較為簡單,即結合實際數據情況直接判斷給出相應分數。統一評分法適用于研究對象較多的評估研究,但必須在掌握大量數據和相關情況的基礎上才能提升客觀性。對比評分法則是采用層次分析法的基本思路,針對每個單指標,將不同孔子學院的數據或同一孔子學院不同年份的數據進行兩兩比較,建立判斷矩陣,計算最大特征值和特征向量值,此時的特征向量值表示得分比值。對比評分法客觀性更強,但建立判斷矩陣工作量較大,適用于研究對象較少的評估研究。
在單指標評分過程中,根據數據性質大致可分為兩種指標類型:定量化單指標和定性化單指標。對于定量化單指標,如學生人數(標準學年人),可分析已有數據,確定統一評分標準,方式很多,較為簡單的是分段式評分,即獲取學生人數指標數據的最大值和最小值,在兩值之間進行區域分段劃分,每個區域對應一定分數。定性化單指標評分方法更加多樣,需要保證對于同一指標采用同一種評分標準和方式,以減少評估誤差。以學院領導與師生和諧度指標為例,在評估人主觀評分基礎上,可使用計算機在描述學院領導與師生和諧度的相關資料中對使用的詞匯進行文本情感分析,定量化呈現定性化單指標,輔助最終評分,提高定性化單指標的客觀性、合理性。
五、結語
孔子學院評估工作意義重大、方法眾多,筆者在吳應輝教授提出的指標體系基礎上進行研究,提出了上述優化方法,下一步將繼續通過理論探索和實證研究進行驗證改進,以期不斷完善評估指標體系,推動評估工作常態化,助力孔子學院更好發展。
(作者單位:中央民族大學國際教育學院)
注釋:
①數據來源:國家漢辦官方網站http://www.hanban.edu.cn/confuciousinstitutes/node_10961.htm。
②吳應輝,男,云南人,中央民族大學研究生院院長,教授,博士生導師。
參考文獻:
[1]吳應輝.孔子學院評估指標體系研究[J],教育研究,2011(8).
[2]樊釘.孔子學院質量評估體系研究,云南師范大學學報(對外漢語研究版),2012(9).
[3]鄧雪,李家銘,曾浩健,等.層次分析法權重計算方法分析及其應用研究[J].數學的實踐與認識,2012,42(7):93-100.
[4]郭金玉,張忠彬,孫慶云.層次分析法的研究與應用[J].中國安全科學學報,2008,18(5):148-153.
[5]Saaty T L.Basic theory of the analytic hierarchy process:how to make a decision[J].Revista De La Real Academia De Ciencias Exactas Físicas Y Naturales,1999,93(4):págs.395-423.