地質災害專業監測預警項目供應商績效評價研究
——以四川省為例

●雷蕾，吳 潔，李 婷

（第一作者單位：成都信息工程大學物流學院）

一套科學的績效評價體系不僅能夠豐富政府部門績效評價管理理論，還可以在實際應用中幫助自然資源主管部門發現存在的問題，提高專業監測預警能力。因此，構建一套科學的績效評價體系是十分有必要的。

研究小組分析了地質災害專業監測預警項目供應商績效評價的特點、內涵以及績效評價體系等內容，運用層次分析法建立績效評價模型，并在四川省S縣進行實證研究。

一、四川省供應商績效評價工作存在的問題

四川省地質災害專業監測預警項目自2017年開始，各級自然資源主管部門按照四川省自然資源廳相關要求對供應商進行績效評價。隨著項目建設規模的不斷擴大，績效評價取得了一定進展，但是在實踐中也存在著一些問題。

（一）績效評價意識薄弱

四川省自然資源主管部門對供應商績效評價重視程度不夠，缺少專人負責機制，績效評價工作存在拖延心理和應付現象。由于部分工作人員對績效評價工作的重要作用存在認識上的不足，致使有些市縣的績效評價工作中仍存在“走過場”現象，嚴重影響了績效評價結果的有效性。

（二）績效評價重項目建設結果，忽視了項目服務過程

績效評價主要針對結果評價，缺乏過程的考核，即主要在項目驗收階段對供應商進行考核，在運維服務階段時監督考核缺失。地質災害專業監測預警項目周期一般為3年，主要包含項目建設和運維服務2個重要階段。供應商在項目驗收通過后，由于缺少相應的績效評價，供應商在進行運維服務時積極性低，出現設備損壞后延期處理、不及時維修更換等問題。

（三）評價結果未能有效利用

在對以往的供應商績效評價中，撥付款按照進度撥付，供應商在項目中的表現優劣并不是最主要的考核因素，部分供應商的工作積極性降低，由此出現響應不及時、甚至不處理等問題。

（四）績效評價以定性為主，缺少定量指標評價

自然資源主管部門對供應商的績效評價多是根據采用定性的文字描述進行評價，缺少量化指標。這導致績效評價主觀性較強，不同評價人員對同一供應商的評價結果不同，不利于形成統一的監督和考核體系。

二、績效評價體系設計

關于績效評價概念的界定，主要有4種方式。第1種是強調績效評價結果的內涵；第2種是從過程界定績效評價概念；第3種是從被評價對象能力界定績效評價概念；第4種是結合以往學者對績效評價的觀點進行拓展。目前，對地質災害監測專業預警項目供應商績效評價的內涵還沒有明確、統一。研究小組認為，地質災害專業預警是地質災害防治的重要組成部分，因此，此次研究主要采用第4種界定方式，即結合地質災害防治績效評價內涵和地質災害專業預警項目特點，由自然資源主管部門為實現一定經濟效益和社會效益，采用定性和定量分析相結合而制定的績效評價體系。評價體系的指標要充分體現科學性，能夠對供應商在地質災害監測預警項目服務過程和結果進行綜合評價。

地質災害專業監測預警項目屬于政府項目，由自然資源主管部門組織實施。自然資源主管部門作為組織單位，對整個項目負責，對供應商進行監管；供應商為地質災害專業監測預警項目提供服務，對自然資源主管部門負責，受自然資源主管部門監督。因此，供應商績效評價的主體、客體分別為自然資源主管部門和項目供應商。

以往，自然資源主管部門經常采用定性評價的方式對供應商進行績效評價。這種方式缺少量化指標，主觀性較強、流于形式，違背了績效評價的初衷。層次分析法是一種定性和定量結合的方法，能夠將復雜問題簡單化、減小主觀因素影響、應用廣泛，因此，研究小組選用層次分析法建立績效評價模型。

三、績效評價指標體系構建

（一）評價指標要素

過程考核：供應商為實現項目預期效果所進行的一系列活動，包括儀器的靈敏度、應急響應等指標。

結果考核：供應商采取監測預警技術和管理手段實現項目的預期結果，包括互聯互通、設備在線率等指標。

設備在線率：同一時間段內，設備的在線率要求高于95%。設備在線率是一項長期性的指標，它關系到項目能否穩定運行。

應急響應：項目設備多在山區，服務周期長，設備面臨著較多的不可控因素。該指標要求供應商在斷電等緊急情況下，可以保證設備可短期運行。應急響應性能是項目的必然要求。

互聯互通：設備系統平臺建設與省、市、縣平臺對接情況及數據上傳頻率。互聯互通體現在數據的實時傳輸上，對設備在線率起決定性影響。

監測數據上傳報告：監測點的計算結果數據（觀測點原始數據等資料），監測數據上傳報告的原始數據為模型優化、預警值的設置提供了重要依據。

運行維護：定期維護儀器設備和設施，確保監測設備、數據傳輸、預警。運行維護響應及時性是互聯互通、設備在線率穩定的重要保障。供應商要在儀器出現異常后3個工作日內使其恢復，特殊時段至少應于5個工作日內使其恢復。

儀器的靈敏度：儀器對被測物變化量的反應程度。地質災害具有突發性，儀器如果不能及時、快速、準確地實現預警、預報，就無法為轉移受災人群提供緩沖時間，難以保障人民生命財產安全。因此，要求監測儀器具備良好的靈敏度。

儀器的安全性：儀器安裝完成后，需考慮人為破壞、牲畜破壞等因素造成儀器的損壞。供應商須通過選用材質優良的支架、圍欄，設置警示標志等方式保障儀器的安全。

儀器的故障率：儀器的故障率對項目穩定運行產生重要影響，一旦儀器出現故障，發生地質災害，會造成巨大的損失。因此，要求儀器具有較低的故障率。

分區預警模型：針對不同的地質災害建立適合的預警模型，供應商根據現場情況、歷史數據優化預警模型，提升監測預警的準確性和及時性。

預警值設置：供應商要結合監測歷史數據、現場情況等設置預警值，避免儀器出現誤報，給附近居民帶來不便。

（二）應用AHP 法確定評價模型和指標權重

依據四川省自然資源廳績效考評管理辦法，經相關單位調研、專家論證，研究小組建立了專業監測預警項目供應商綜合績效評價模型（見圖1）。評價模型分為3層，目標層即供應商綜合績效；準則層即績效評價要素集，包括過程考核、結果考核；指標層即績效評價要素，包括互聯互通等10項指標。

圖1 專業監測預警項目供應商績效評價層次分析模型圖

考察準則層各影響要素和指標層各觀測指標對目標層的影響程度，用成對比較法和 1～9 比較尺度構造成對比較陣。比較尺度主要分為1～9共9個標度。其中1、3、5、7、9分別代表兩個要素相比較，具有相同重要性、前者比后者稍重要、前者比后者明顯重要、前者比后者強烈重要、前者比后者極端重要；2、4、6、8分別代表上述含義中的中間值。

通過Matlab計算出最大特征值和一致性指標，檢驗一致性，獲得各層權向量，從而確定各指標層間權重及權值（見表1）。

四、基于四川省S 縣的實證分析

研究小組應用構建的層次分析法評價模型，在四川省S縣進行實證檢驗，結合四川省自然資源主管部門對績效評價的可操作性和簡易性需求，采用評判等級和分值范圍對應，實施評價。

在實例中，四川省自然資源主管部門按照表1中的二級指標權值進行分項評分，計算出總分，根據分值范圍得出評價等級，等級設置為優秀、合格、不合格，分別對應的分值范圍為80～100分、60～80分和60分以下。在項目招投標文件中明確考核周期采用績效評價和付款相掛鉤的模式按年度計算。經四川自然資源主管部門考評后，供應商得分在80（含）分以上的，支付當年度100%的服務費；得分在60（含）～80（不含）分的，只支付當年度95%的服務費；得分在60（不含）分以下的，只支付當年度90%的服務費并要求供應商提供整改報告，如整改后仍不合格，則按違約處理。

表1 各指標層間權重及權值表

通過在四川省S縣的實踐，績效評價結果與實際情況一致（如表2所示）。從評價結果來看，S縣供應商在設備在線率、互通互聯、運行維護方面還存在不足，四川省自然資源主管部門根據績效評價辦法撥付其95%的年度服務費，以督促供應商改進服務，該供應商后期作出了相應改進，提高了供應商的服務效率和水平。

表2 四川省S 縣供應商績效評價得分表

五、建 議

（1）堅持過程考核和結果考核并重的原則，對項目全過程績效評價。對供應商績效評價指標選取時，既要重視過程指標也要重視結果指標；從四川省S縣的實例來看，構建了全過程績效評價指標體系，既考慮到過程指標，如：運行維護、儀器故障率等，也考慮到了結果指標，如：設備在線率、互聯互通等，各級自然資源主管部門堅持對供應商在項目全生命周期的行為進行考評，確保了供應商在監測預警項目全過程中發揮技術與服務支撐作用。

（2）堅持全面和重點相結合，注重指標選取的科學性、全面性。采用多項指標績效評價，促進績效評價全面、客觀。重點突出設備在線率、應急響應、運行維護、互聯互通、預警值設置等指標的權重；廣泛征求供應商、主管部門及專家的意見，盡最大可能降低主觀因素對績效評價指標的影響，以反映供應商的真實水平。

（3）建立績效評價長效機制，將績效評價納入供應商撥付服務費款的依據。從四川省S縣的實例來看，將績效評價和付款相掛鉤，也就是將績效評價結果作為撥付款的依據，可以倒逼供應商提升服務質量，確保項目取得防災、減災的預期效果。

（4）建立績效評價監督機制，保證績效評價反映真實情況，保障績效評價工作的客觀性和公平性。制定績效評價監督制度，成立績效評價監督小組，規范績效評價流程，切實解決績效評價主觀性強、流于形式等問題。

（5）實施績效評價模型動態調整機制。地質災害監測預警項目是動態的，項目周期長、涉及內容多、控制因素多、復雜性強，因此績效評價模型指標和權重要根據實際情況動態調整。自然資源主管部門要積極收集績效評價相關問題及建議，檢查績效評價結果和供應商實施情況是否相符，組織專家對績效評價模型進行優化調整。