浙江省農村信用社聯合社新一代運維監控項目

如今，電子渠道的業務量已經占到銀行業務量的80%以上，電子渠道用戶的體驗變得比以往任何時候都更加重要。作為業務系統的建設者與維護者，運維部門同樣需要從客戶的體驗出發，實時感知用戶辦理業務的真實體驗，及時定位和解決影響用戶體驗的隱患和故障，以持續提升用戶滿意度，滿足行內業務發展的要求。

面臨的運維挑戰

浙江省作為全國民營經濟最發達的地區，金融業務的需求非常旺盛。作為浙江省內最大的金融機構，浙江省農村信用社聯合社（以下簡稱省聯社）負責對浙江省農信系統（包括農信聯社、農村合作銀行、農村商業銀行）進行管理、指導、協調和服務。本行下轄81 家行社，擁有4100 多個營業網點及5 萬多名員工，規模大、網點多，業務穩定性要求高，因此對運維品質和質量的要求極高。

隨著省聯社業務發展及IT 管理的需要，服務器、網絡、中間件、業務應用等面臨的監控壓力也越來越大，運維監控開始出現短板：

1.業務系統多，缺乏統一的應用性能監控平臺，無法實時把控業務系統的運行質量；

2.故障可能的種類和原因愈發復雜，完成告警、定位、排障流程的耗時越來越長；

3.對應用監控的指標和維度不夠豐富，缺乏能夠反映用戶真實體驗的監控數據。

針對以上問題，運維部門開始著手建設應用性能監控平臺，幫助快速提升運維能力。

解決方案

1.方案選型

經過對行業內相關技術的廣泛調研和考察，目前主流的三種監控技術手段為：網絡旁路、埋點和日志。經過詳盡的對比和評估，省聯社認為旁路式監控對生產系統無影響，實施周期短，可快速提高科技部門的業務運維能力，成本低，見效快。由此決定進行網絡旁路式監控的部署。

2.覆蓋范圍

采用網絡旁路式應用性能監控技術的適應性強、時間短、成本低，適合多套業務系統的端到端全鏈路部署。所以在一期項目中，省聯社選取了行內16 套重要業務系統進行了全鏈路監控，包括：核心系統、網上銀行、手機銀行、大小額支付（超級網銀、農信銀）、綜合前置（渠道接入）、信用卡、電話銀行、第三方中間業務、銀行卡前置、綜合前端、國際業務、資金業務、短信平臺、信貸管理以及互聯網金融等系統。

3.系統主要功能

應用性能監控平臺作為省聯社在運維方面的主要監控系統，提供了絕大部分應用監控的功能實現：

（1）業務架構梳理

通過分析網絡數據包來自動繪制應用訪問關系，使省聯社實現了業務流程流轉關系的動態刷新，并可在業務系統變更后快速梳理業務架構。

（2）統計指標計算

通過網絡數據包的自動解碼、關聯，實時計算交易量、響應率、成功率、響應時間等應用性能指標，實現了高實時性的業務運行狀態把控。

（3）性能展示

實現了對16 套重要業務系統的實時監控覆蓋，并可根據需要自定義展示的指標數據，通過數據掌握用戶的真實體驗情況；并且可根據運維和管理需要靈活采集不同維度的數據，將監控平臺所展示的指標與信息集中于當下運維關注點。

（4）實時告警

通過與行內事件平臺的集成，通過動態基線和固定閾值組合的模式實現實時預警與快速定位，第一時間發現業務運行的隱患和故障，提高故障排除與系統恢復的處理效率。

（5）交易查詢

通過精確到逐筆交易的明細數據字段，實現對單筆交易的查詢、追蹤、分析、定位等操作，滿足快速查障排障的工作需要。

（6）數據輸出

通過API 接口應用將監控平臺的實時監控數據與監管報送平臺對接，滿足浙江省銀監局信息科技風險動態監測數據的報送要求。

（7）大屏展示

通過接入監控平臺實時數據，模塊化自定義大屏可提供針對業務運行、用戶體驗、系統性能、交易分布等多種維度的信息展示，在重大保障、系統變更、壓力測試等場合可實時、快速掌握各系統的全局運行態勢。

項目收益

通過此次項目建設，省聯社大大改善了業務系統的監控粒度和實時性，促進了運維水平和服務質量的極大提升，保障了業務系統可用性及連續性的進一步提高。

省聯社在較短的時間完成了行內主要業務系統的端到端的全鏈路監控覆蓋，建成了一體化應用監控平臺，實現了運維部門應用監控能力的極大增強，改善了運維工作的效率和品質。

新系統建成后，省聯社擁有了對業務系統中各項數據的采集、處理、分析能力，為后期金融科技項目建設提供了技術支持和數據來源；高度靈活性的運維管理平臺能夠很好地應對和滿足業務系統不斷擴張升級帶來的運維需求和壓力，支撐未來多年的業務系統發展。

總結及展望

近幾年，浙江省農村信用社聯合社逐步建成了管控平臺、部署平臺、日志平臺、應用性能管理四大運維平臺。應用性能管理平臺自上線運營以來，在新業務上線、業務變更、重大活動保障、災備演練等各方面成效顯著，已多次幫助運維部門及時預警、及時處理業務故障；幫助業務運維部門掌握業務系統的實時運行狀況，實時監測用戶的業務體驗；同時，保質保量地完成數據監管報送要求。后期，省聯社將持續提高監控覆蓋率，力求實現對行內重要業務系統的端到端監控全覆蓋，實現用戶業務體驗的全流程監測。

點評

隨著金融電子化的深入推進，電子渠道的業務量大大增加，業務系統對客戶體驗和滿意度的影響作用也大大提升，浙江省農村信用社聯合社通過建設新一代應用性能監控平臺，實現用戶業務體驗的全流程監測，在改善運維工作效率和品質的同時，也增加了客戶滿意度。