應對社會安全事件績效評估方法魯棒性分析的參數與指標研究

【摘要】績效評估方法的魯棒性是指模型內部參數或環境參數發生變化時，運用績效評估方法使得政府應對社會安全事件績效評估的結果能夠保持相對穩定的能力。本文基于相關理論，深入剖析地方政府應對行為績效評估方法魯棒性分析的參數內涵，并討論參數的變化規律，采用Kendall和諧系數作為績效評估方法魯棒性分析的度量指標，為提高地方政府應對社會安全事件績效評估方法的魯棒性提供方法依據。

【關鍵詞】績效評估方法? 魯棒性? 社會安全事件

一、引言

選擇科學的方法評價政府應對社會安全事件的績效既是重要的理論和現實問題，地方政府應對社會安全事件績效評估方法的魯棒性是指應對行為績效評估系統內部或環境參數發生變化時，運用某種績效評估方法對若干個同一層級地方政府應對行為的績效水平進行排序時，績效評估的結果能夠保持相對穩定可靠的能力。

國內外對魯棒性的分析研究主要集中在控制理論方面，將其應用于綜合評價方面的研究還比較缺乏，毫無疑問提升績效評估方法的魯棒性是應對不確定因素影響的重要手段之一，現有研究大多都是針對環境參數、模型參數或模型偏好結構，較少研究決策方案或系統結構對結果魯棒性的影響導致評價模型魯棒性度量結果不準確。然而在不確定性和危機出現的情況下，地方政府應對社會安全實踐評估方法的魯棒性已經成為績效評估系統能否正常運行的關鍵，評估方法在運行過程中受環境因素的影響，績效評估要容許在實際控制中會出現能夠承受的偏差，因此評估方法必須是魯棒的。本文討論方法魯棒性的參數控制與指標設置，能夠為績效評估方法的魯棒性分析提供方法依據。

二、應對社會安全事件績效評估方法魯棒性分析的參數

2.1參數類型

2.1.1方法的內部參數

績效評估方法的內部參數指績效指標信息數據處理方式，是指政府應對行為績效評估指標體系指標原始數據處理的各種方法。績效評估指標體系是由多個相互聯系指標組成的復雜多維系統，涵蓋地方政府應對行為的綜合職能，全面衡量績效水平。應對行為績效指標信息處理是對績效評估指標的信息加以匯集整理，從整體上認識評價對象的優劣狀況。績效評估指標中由于各指標的內涵和信息形式各異，需要將其轉化為統一的數據形式，進行無量綱化方法處理，顯示了評估者對每個指標原值變動與評價信息量之間函數關系形式。

針對同一個應對社會安全事件行為績效評估問題，一個績效評估方法在不同無量綱化方法，其評估結果的排序可能非一致。那么在指標信息無量綱化處理方式變化的情況下，可對不同績效評估方法進行魯棒性分析，判定針對同一問題魯棒性強的績效評估方法。如果采用某種績效評估方法對政府行為績效水平進行評價時，當改變評估指標的數據信息時，如果評估結果的變化不大，則表明該種方法的魯棒性強;如果評估結果變化很大，則表明該種方法的魯棒性差。

2.1.2方法的環境參數

環境參數主要指應對社會安全事件績效評估的客體數量。地方政府應對社會安全事件績效評估是對參與政府管理活動的效果及社會影響進行全面和客觀評價，并劃分績效等級的過程。績效評估的客體主要指負責應對社會安全事件的市級政府、縣級政府以及鄉級政府三個層次。各級政府依據法律法規，結合本轄區內的實際情況，承擔有效預防和妥善安全事件的職責，各層級地方政府的數量存在差異。

在應對社會安全事件績效評估的實踐活動中，績效評估的評估客體數量并不是固定不變的，在不同的評估目標和要求下，評估客體的數量各不相同。在一定的績效評估指標下，采用一種績效評估方法，如果被評估對象數量變化，而評估結果的排序有很大差異且對數量變化敏感，則說明此種績效評估方法的魯棒性較差;如果評估結果的排序對被評估對象數量變化不敏感，即被評估對象數量的變化對評估結果有很大影響，則此種績效評估方法魯棒性較好。

2.2參數控制

2.2.1應對社會安全事件績效評估指標的無量綱化方法變化

績效評估的指標性質和數據形式各異，不同的原始績效數據無量綱化處理方法是績效評估方法的內部參數，從改變指標無量綱化方法角度，分析績效評估方法的魯棒性。為了消除數據量綱對評價結果的影響，對類型一致的評價指標進行無量綱化處理，一般有五種方法：

2.2.2 應對社會安全事件績效評估客體的數量變化

應對社會安全事件績效評估客體的數量屬于績效評估方法的環境參數，從改變客體的數量的角度，分析績效評估方法魯棒性。

假設要對n個評估對象的應對行為績效進行評價，從少到多改變被評估對象的數量，設一個基準評估對象數量n0，該評估對象數量為績效評估對象的最低值，從n0開始逐個增加評估對象的數量直到n，可得（n- n0+1）種評估對象樣本量，然后運用績效評估方法對（n- n0+1）種情況進行評估，可得第 i個評估對象在j個評估對象數量下的排名為pij，（? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ? ?）。這里通過從少到多的逐個增加被評估對象的樣本數量，采用多種績效評估方法對評價結果排序，觀察被評估對象的數量變化對評估排序的差異影響大小，據此可以對若干績效評估方法的魯棒性進行分析比較。

當選擇某一種績效評估方法對應對社會安全事件績效進行評價時，如果被評估對象數量變化，而評估結果的排序有很大差異，則此種績效評估方法的魯棒性較差;如果被評估對象數量的變化對評估結果排序有很大影響，則此種績效評估方法魯棒性較好。

三、應對社會安全事件績效評估方法魯棒性分析的度量指標

3.1 度量指標的含義

績效評價方法魯棒性的度量指標一般有最優方案一致率、方案排序匹配率、均方差、平均絕對差以及Kendall和諧系數。綜合評價的目的就是要找到一個合理排序或最佳排序，本文選擇Kendall和諧系數來分析應對社會安全事件績效評估方法的魯棒性。Kendall和諧系數是用于度量多種績效評估方法評價結果排序的密切程度，或者稱之為一致性、相關性。采用Kendall系數計算排序結果之間的一致性或相關性程度，通過觀測Kendall系數的變化情況來分析績效評估方法的魯棒性問題。

3.2 度量指標的計算

Kendall和諧系數的計算步驟如下：

（1）設多種績效評估方法所得評價結果為一個排序矩陣

四、小結

本文深入討論了地方政府應對社會安全事件績效評估方法魯棒性評價中的參數設置與指標分析，根據績效評估參數的變化，觀測評估指標的大小，并以此來判斷綜合評價方法的魯棒性。如果某績效評估方法的Kendall和諧系數越大，表示改變模型內部參數無量綱化方法對該績效評估方法的結果影響越小，那么這種績效評估方法在各種無量綱化方法下的評估結果排序沒有太大差異，這種方法的魯棒性強;反之，Kendall和諧系數越小，評估排序結果差異大，則該評估方法的魯棒性差。

參考文獻：

[1]P.Vincke. Robust solutions and methods in??decision-aid[J].Journal of Multi-Criteria Decision?Analysis，2015，8（3）：181-187.

[2]R. Hites，Y.D.Smet，N.Risse，M.Salazar-Neumann，?P.Vincke. About the application of MCDA to somerobustness problems[J].European Journal of?Operational Research，2006，174（1）：322-332.

[3]孫世巖，邱志明，張雄飛.多屬性決策魯棒性評價的仿真方法研究[J].武漢理工大學學報（信息與管理工程版），2006，28（12）：58-61.

[4]張立軍，陶璐.多指標綜合評價模型魯棒性度量方法研究[J].統計與信息論壇，2011，26（5）：16-20.

課題項目：湖北省教育廳科學技術研究計劃指導性項目《地方政府應對社會安全事件績效評估方法的魯棒性研究》（B2017283） 階段性成果。

作者簡介：賈晶，女，1983.11，武漢商學院副教授，博士。研究方向：土地管理，房地產管理。