廖仲欽
[摘 要] 以南方電網企業管理信息系統(以下簡稱CSGⅡ)推廣、企業信息化建設為背景,圍繞建設過程中反映出的配網生產域數據質量問題展開論述,從數據質量問題產生的根源、數據質量管理及持續改善的策略、數據質量管理的技術實現思路、管理平臺的構建進行論述,希望進一步將管理和技術手段相結合,改進電網企業信息化建設中的數據質量問題。
[關鍵詞] CSGⅡ、數據質量、GIS、管理手段
doi : 10 . 3969 / j . issn . 1673 - 0194 . 2018. 03. 029
[中圖分類號] F270.7 [文獻標識碼] A [文章編號] 1673 - 0194(2018)03- 0070- 04
1 配網生產域數據質量提升的背景
2015年南方電網企業管理信息系統(以下簡稱CSGⅡ)全面推廣,配網運行管理對各專業各部門之間人員協同,系統協同要求越來越緊密,由于原系統本身存在的數據質量就不完善,遷移前后的新舊模型差異導致遷移后的存量數據產生部分數據問題。建設過程中,生產子系統、GIS系統平臺與營銷管理系統之間數據集成和數據交互,以及數據共享的過程中,暴露出來的數據的一致性、準確性、完整性和及時性等方面的問題,嚴重影響系統協同業務的開展,因此迫切的需要一套技術方法與管理手段開展協同數據質量提升工作。
2 配網生產域數據質量的問題現狀
配網設備臺賬,很多中壓、低壓線路下不存在任何導線及電纜線段,導致線路總數錯誤,與建設系統首先要“摸清家底”相悖;系統中還存在大量沒有站內設備的站房;35 kV以上變電站內部一次接線圖數據不完整,大部分缺失,10 kV側存在部分進出線間隔數據錯誤或者沒有畫內部接線圖,部分線路電源點缺失導致線路不帶電,從而導致營配平臺無法進行相應的停電分析工作;由于前期營銷遷移過來的用戶信息準確度不夠或者直接缺失(無表計資產編號、營銷用戶編號、計量點編號),導致在進行用戶與表箱關聯時找不到對應關系,同時存在大量的數據還未進行過戶表關聯;因歷史數據問題,部分變電站、線路、變壓器、落火點等數據維護部門不對應導致無法進行相應的建模編輯工作,跨班組移交遇到這類問題時需要花費很大工作進行確認及局部調整;遷移過來的內部一次接線圖,參數完整性、圖模實用性(間隔距離)、美化、目前都存在一定的問題,同時影響了單線圖應用,需進行此方面的數據提升工作來完善這部分數據從而支撐外部業務系統的應用;拓撲關系不連通,設備不帶電模擬停電無法操作;圖實不符,直接導致系統建設永遠停留在“建設階段”;站線變戶一致性、GIS平臺與生產功能位置一致性指標未達到協同應用的要求,使得CSGⅡ“系統協同應用”成為一句口號。因此,配網生產域數據質量提升勢在必行,而一套科學的數據質量提升方法就顯得尤為重要。
3 數據質量提升思路
站在配網生產數據質量角度,規范、及時電子化移交工作是確保配網生產域增量數據的數據質量的有效途徑。電子化移交工作的特點包括涉及業務部門眾多、業務協同復雜兩大方面。主要的涉及部門包括設備部、基建部、系統運行部、營銷部、信息中心等。為順利開展電子化移交業務,須尋求最大公約數,確定跨部門的主要工作原則。在具體協同業務方面,各部門對基建、技改、業擴等主要業務進行進一步梳理、制定協同規范,并將相關的生產子系統、基建子系統、營銷系統、GIS平臺和數據資源平臺進行了橫向聯通。按照南方電網公司數據質量管理辦法的要求,結合云南電網公司及瑞麗供電局數據質量管理實際情況,技術手段與業務手段相互結合“兩手一起抓,兩手都要硬”,將問題數據按照處理方式進行劃分,加強規范管理,以數據的準確性、完整性、及時性為治理目標,切實開展數據質量專項整治工作,形成以數據質量提升促進系統實用化,通過對實用化的管理倒逼數據質量提升;突出抓好數據質量健康水平和數據質量管理水平的提升,業務部門和信息部門深度配合,同步處理。
依托數據質量管理平臺,通過技術段手進行數據校驗,定期通報各部門數據質量情況及整改進度。總結經驗,按照責任明確、分層管控、分步推進、分類管理的要求,建立各級數據質量提升和進度監督管控機制,加強質量和進度考核。
4 數據質量提升方法與策略
4.1 技術處理方面
技術處理主要指系統廠家或技術人員直接通過技術手段或后臺數據操作,實現問題數據的篩選修改,不需要業務人員參與,具體包括:
(1)很多中壓、低壓線路下不存在任何的導線及電纜線段。這種線路無法通過前臺進行查詢定位修改。該部分數據需廠家通過技術導出確認后進行處理。
(2)系統中存在大量的站房缺失站內設備。該部分數據量較大,通過前臺查詢人工篩查方式效率低,需廠家通過技術導出處理。
(3)設備參數缺失問題。如中壓饋線源頭站所、線段所屬饋線、站內設備所屬站房、低壓線路所屬臺區、導線名稱為空等。針對這類問題,編寫修復工具,根據拓撲或者關聯信息后臺自動刷新或補錄設備重要屬性。
(4)由于前期營銷遷移過來的用戶信息準確度不夠或者直接缺失(無表計資產編號、營銷用戶編號、計量點編號),導致在進行用戶與表箱關聯時找不到對應關系,同時存在大量的數據還未進行過戶表關聯,影響用戶一致率,若要全部清理數據量較大,該部分數據在GIS平臺需通過技術手段清除,之后在營銷系統重新推送用戶信息,重新進行戶表關聯。
(5)部分變電站、線路、變壓器、落火點等數據維護部門不對應導致無法進行相應的建模編輯工作。跨班組移交遇到這類問題時需要花費很大工作進行確認及局部調整,導致后續流程混亂。該部分數據需廠家通過技術導出確認后進行處理。
(6)存量數據問題。如電子化移交單因數據遷移的數據問題而導致流程不能往下走,業務人員無法通過前臺操作來實現,只能由系統廠家或技術人員通過后臺數據操作來實現。
(7)存量數據問題。生產系統存在大量實際已經不存在的設備,但是系統中還存在,該部分數據系統前臺可以查詢確認,統計給廠家通過技術在后臺進行刪除處理。
(8)定期對協同數據質量及實用化進行統計。按照云南電網公司數據質量校驗規則以報表的形式定期對全局數據質量進行統計,為各級管理部門提供數據質量整改依據。
(9)系統缺少組織機構同步接口及機制,部分組織機構及人員賬號權限不滿足實際業務需求,涉及組織機構調整需多部門線下后臺同時調整,涉及工作復雜且易出錯,需要開發組織機構同步接口,從技術上解決組織機構及人員賬號同步問題。
4.2 業務人員前臺整改
針對瑞麗供電局組織機構及業務特點,要求各級業務部門緊密配合,熟練掌握臺賬移交、設備變更等提升數據質量的方法,對臺賬數據嚴格審核,保證數據準確完整,同時,修改的數據應保證線路結構、地理位置與現場一致。以下是系統建設,提升數據質量須通過業務人員前臺修改的問題:
(1)生產域舊系統遷移過來的數據,大量存在有配電功能位置無設備的數據(桿塔、導線),需業務人員前臺通過臺賬移交進行設備添加。
(2)大量配電功能位置基本參數、設備參數缺失的數據需要業務人員通過電子化移交或設備變更流程進行參數完善。
(3)實際線路發生改變,但GIS系統維護未跟上,從而導致大量圖實不符的情況,針對此問題,必須現場核實定位采集坐標、設備型號等設備數據,業務人員根據現場核實的數據,通過移交單進行數據修改,必須達到圖實一致。
(4)中低壓拓撲連通率整改,拓撲關系是否正確,是否連通,是GIS系統支撐其他系統業務應用的關鍵,拓撲連通率整改是業務人員修改的重要工作。
(5)由于變電站主變壓器電壓等級填寫錯誤、變電站出線間隔斷路器處于斷開狀態以及線路未與站房建立進出線等導致線路不帶電,需要業務人員前臺通過移交單進行修改。
(6)站房內部接線圖修改,新舊系統數據遷移、系統數據更新不及時等原因造成的站房內部接線圖缺失,或有接線圖但接線圖錯誤、無開關等均需要業務人員進行修改。
(7)準確可用的單線圖是GIS系統建設的主要目的,也是支撐停電、可靠性等業務應用的關鍵,所以要求業務人員將以上問題整改完成一條排版一條,確保圖形準確真實可用。
(8)協同一致率,站線變戶、GIS平臺與生產功能位置一致性,是協同數據質量提升的關鍵指標,是系統從“能用”邁向“好用、易用”的標志。所以協同一致率提升是業務人員核查修改最重要工作。
4.3 管理策略
4.3.1 明確責任
成立數據質量提升專項工作組,制定數據質量提升整改方案,確定組織機構及職責,責任明確到崗,到人,根據實際不定期組織集中整改;按周/月定期通報瑞麗供電局數據質量提升整改情況,各單位根據數據通報情況,深入開展生產域數據質量自查,分析問題原因,制定具體整改方法和工作計劃,在通報下發后7天內完成問題整改工作,提升數據質量,達到考核指標。
4.3.2 通報機制
局信息部門按周在調度早會材料中通報各單位生產域數據完成情況,對數據質量不達標的業務部門進行通報、考核。各業務部門根據數據通報情況,有針對性開展生產域數據質量自查及整改,在3天內完成問題整改工作,提升各單位數據整體情況,達到考核指標。
4.3.3 跨部門協同作戰
瑞麗供電局配網生產域數據質量提升工作因組織結構的特殊性,涉及到生產設備部、營銷部、信息班、輸變電管理所、客戶服務中心以及6個營業服務點,建立專用的數據質量提升工作交流群、微信群,各部門主任均在群里,實時指導工作開展。
4.3.4 定期集中辦公
數據質量提升是一個長期的工作,考慮到參與數據質量提升工作的人員均還有各自原來崗位的工作要開展,所以供電局決定每周三將各部門參與數據質量提升工作的人員集中在局本部3樓會議室集中辦公,對于在企信、微信、電話上溝通不清楚的問題,在集中辦公這一天統一進行溝通,集中解決遇到的問題,對于不能解決的問題,由信息班做記錄,統一上報系統后臺廠家進行解決。
4.3.5 成立“青年突擊隊”
借鑒廣州供電局經驗,成立“青年突擊隊”,發揮黨員、團員先鋒模范作用,設備部、信息班、輸變電管理所、營銷部、客戶服務中心及營業服務點協同工作,充分發揮黨員、團員先鋒模范作用“比學趕超”,相互促進數據質量提升工作快速開展。
5 采用的技術措施
5.1 建立數據質量管理平臺
對業務數據集成全過程的質量問題管理與監控,包括業務系統數據進入數據中心前數據質量規則檢查,生產系統設備參數完整性檢查、GIS系統圖形拓撲關系檢查,數據中心內部管理及數據加工處理過程中的數據接口監控,系統協同應用,如圖1所示。
通過協同數據質量管理平臺定期統計發布系統各業務域、協同域相關數據指標。通過該平臺,可以查詢到協同數據一致性指標情況、問題數據詳細清單,并分解到各基層業務部門,方便信息部門和業務部門了解各單位數據質量情況,方便問題數據的核查、定位和修復,為協同數據一致率提升工作提供參考依據。
5.2 建立數據質量規則庫
并從完整性、準確性、一致性、及時性四方面進行數據質量度量,基于規則識別數據質量問題,并根據具體的數據質量診斷任務,定時進行數據質量診斷并生成數據質量診斷結果,為數據質量提升工作指明方向。
6 小 結
瑞麗供電局各業務部門在CSGⅡ配網生產域數據質量提升整改工作中付出了大量艱辛的努力,通過持續努力,瑞麗供電局配網生產域數據質量提升工作取得了良好成效。具體反映在:
(1)中壓拓撲連通率,拓撲不連通變壓器數量整改24臺,由2017年初98.96%提升至現在的100%;不帶電變壓器累計整改完成304臺,現瑞麗供電局不帶電變壓器數量為0。為供電可靠性模塊的上線運行提供了重要保障。
整改結果如圖1所示。
(3)生產管理子系統中,設備的完整以及準確性和規范性均有較大提升,為系統各模塊的實用化提供了準確的數據支持。
雖然瑞麗供電局通過上述方法開展配網生產域數據質量提升工作取得了良好成效,但是瑞麗供電局并沒有滿足,配網生產域數據質量提升工作仍在有序開展之中,為實現“一套數據,多方應用”,為使CSGⅡ全業務協同開展工作,建設“好用、易用”的業務系統平臺,數據質量提升的方法與策略還需進一步探索。
主要參考文獻
[1]周培鑫. 論企業信息化建設中的數據質量管理[J]. 科技致富向導,2011(17).
[2]郭志懋,周傲英.數據質量和數據清洗研究綜述[J].軟件學報,2002(11).
[3]方幼林,楊冬青,唐世渭,等.數據倉庫中數據質量控制研究[J].計算機工程與應用,2003(13).