電網(wǎng)大數(shù)據(jù)智能采集與分析平臺(tái)

朱明增 劉小蘭 吳益芝 周素君

摘要：隨著Internet的廣泛應(yīng)用，電子政務(wù)、電子商務(wù)以及企業(yè)ERP（Enterprise Resource Planning）得到迅猛發(fā)展，數(shù)據(jù)的采集、傳輸、展示、交互、等問題顯得越來越重要。報(bào)表作為一種信息組織和展示的有力手段，是企業(yè)信息系統(tǒng)的重要組成部分。本文對(duì)電網(wǎng)大數(shù)據(jù)智能采集與分析平臺(tái)進(jìn)行分析，以供參考。

關(guān)鍵詞：電網(wǎng)大數(shù)據(jù);智能采集;平臺(tái)分析

1當(dāng)前公司數(shù)據(jù)管理存在以下四大難題

1.1多套系統(tǒng)并行，易成數(shù)據(jù)孤島

包括計(jì)量、變電站、輸電線路據(jù)、配網(wǎng)、EMS系統(tǒng)等數(shù)據(jù)，由于分管不同部門，有多套系統(tǒng)并行，形成數(shù)據(jù)孤島。

1.2業(yè)務(wù)發(fā)展迅速，報(bào)表功能跟不上

當(dāng)各個(gè)部門收集報(bào)表數(shù)據(jù)時(shí)，需要基層班組人工制作報(bào)表上報(bào)，工作量大，報(bào)表收集難度大，新增報(bào)表需求響應(yīng)慢，無法立即實(shí)施。

1.3人工處理數(shù)據(jù)，效率低難復(fù)用

自動(dòng)化系統(tǒng)不同的報(bào)表查詢導(dǎo)出需制作不同的報(bào)表模板，且需要自動(dòng)化維護(hù)員在系統(tǒng)制作系統(tǒng)用戶無法自己操作，報(bào)表機(jī)讀取報(bào)表速度慢且經(jīng)常出現(xiàn)數(shù)據(jù)量過大卡死現(xiàn)象。根據(jù)二次系統(tǒng)安全防護(hù)要求自動(dòng)化系統(tǒng)與辦公網(wǎng)絡(luò)無連接，所以報(bào)表導(dǎo)出后需要再轉(zhuǎn)存至辦公電腦才能發(fā)送給需求用戶，增加工作量。

1.4業(yè)務(wù)數(shù)據(jù)量大，難以輔助決策;

系統(tǒng)用戶報(bào)表需求各異，如公司計(jì)劃部，每年9月8日需要統(tǒng)計(jì)網(wǎng)區(qū)所有變電站、出線的有功、電流、電壓數(shù)據(jù)，用于線損計(jì)算;保護(hù)、方式專業(yè)每月需要統(tǒng)計(jì)變電站負(fù)荷、功率因數(shù)、主變及線路平均負(fù)載率、電壓月報(bào)表等，數(shù)據(jù)量龐大并且每年報(bào)表模板不一致，個(gè)性化差異較大，無統(tǒng)一報(bào)表管理平臺(tái)，用戶、數(shù)據(jù)、報(bào)表分散，數(shù)據(jù)整合困難，不能綜合分析。為解決以上難題，提出《電網(wǎng)大數(shù)據(jù)智能采集與分析平臺(tái)》，提高報(bào)表定制效率，減少重復(fù)勞動(dòng)。

2多源數(shù)據(jù)定制報(bào)表系統(tǒng)技術(shù)簡介及與其實(shí)現(xiàn)目標(biāo)

2.1技術(shù)簡介

作為多源數(shù)據(jù)定制報(bào)表系統(tǒng)，可以零代碼設(shè)計(jì)自定義報(bào)表，制作流程相當(dāng)簡單，如圖1所示：

采用VBA編程，結(jié)合Microsoft excel表格友好操作界面設(shè)計(jì)報(bào)表系統(tǒng)，直接讀取數(shù)據(jù)，只需添加數(shù)據(jù)標(biāo)簽，就可以輕松導(dǎo)出想要的數(shù)據(jù)，功能強(qiáng)大、性能優(yōu)異，且易學(xué)易用、性價(jià)比高。通過使用報(bào)表系統(tǒng)，無需任何的IT協(xié)助，便可完成報(bào)表創(chuàng)建和分發(fā)工作，以直觀的拖拽方式完成報(bào)表布局設(shè)計(jì)，無需掌握SQL等技術(shù)細(xì)節(jié)，滿足數(shù)據(jù)鉆取、打印和導(dǎo)出等多方面需求，便于設(shè)計(jì)出專業(yè)級(jí)報(bào)表布局，采用最先進(jìn)的報(bào)表處理技術(shù)運(yùn)用到電力行業(yè)中：

1）可制作各類報(bào)表：支持多數(shù)據(jù)源，能夠根據(jù)一定的規(guī)則把不同來源的數(shù)據(jù)拼裝成想要的報(bào)表樣式和結(jié)果。

2）可制作各類填報(bào)：支持清單、卡片、主從等填報(bào)樣式。并且支持分頁填報(bào)，這對(duì)大量數(shù)據(jù)的填報(bào)是很有必要的。

2.2預(yù)期目標(biāo)

1）需3-4人在2個(gè)工作日以上才能完成的報(bào)表，采用本平臺(tái)后，只需要一個(gè)人，半個(gè)小時(shí)內(nèi)就輕松高效完成大大提高工作效率。

2）本平臺(tái)系統(tǒng)應(yīng)用于調(diào)度班夜班負(fù)荷統(tǒng)計(jì)報(bào)表、賀州地調(diào)自動(dòng)化系統(tǒng)月度運(yùn)行指標(biāo)報(bào)表、月度電壓統(tǒng)計(jì)報(bào)表等上百個(gè)數(shù)據(jù)報(bào)表。

3系統(tǒng)的核心技術(shù)：

3.1數(shù)據(jù)過濾

面對(duì)企業(yè)內(nèi)的大規(guī)模數(shù)據(jù)，單個(gè)報(bào)表中經(jīng)常會(huì)有成千上萬條的數(shù)據(jù)量，逐行查看數(shù)據(jù)是不切實(shí)際且非常耗時(shí)，并且不同類型的用戶關(guān)心的數(shù)據(jù)或分析數(shù)據(jù)的角度也不同，因此通過數(shù)據(jù)過濾和篩選來幫助用戶選擇各自符合條件的數(shù)據(jù)，從而節(jié)省大量瀏覽數(shù)據(jù)的時(shí)間，避免一些無用的工作。系統(tǒng)提供了單條件、組合條件、級(jí)聯(lián)條件和模糊條件對(duì)數(shù)據(jù)進(jìn)行過濾篩選。

3.2交互式分析

報(bào)表系統(tǒng)為決策層報(bào)表提供了多樣化的數(shù)據(jù)交互式分析能力，決策者不僅能夠一目了然的分析業(yè)務(wù)發(fā)展趨勢(shì)，還能以交互的方式操作報(bào)表數(shù)據(jù)，進(jìn)行深入、透徹的業(yè)務(wù)分析。常用的交互方式包括：數(shù)據(jù)鉆取、深化、排序、URL跳轉(zhuǎn)、圖表表格聯(lián)動(dòng)、動(dòng)態(tài)表格、文檔目錄等。通過使用報(bào)表系統(tǒng)，無需任何的IT協(xié)助，便可完成報(bào)表創(chuàng)建和分發(fā)工作，以直觀的拖拽方式完成報(bào)表布局設(shè)計(jì)，無需掌握SQL等技術(shù)細(xì)節(jié)，滿足數(shù)據(jù)鉆取、打印和導(dǎo)出等多方面需求，便于設(shè)計(jì)出專業(yè)級(jí)報(bào)表布局。

4平臺(tái)使用說明

4.1條件

1）window 7系統(tǒng)電腦、Microsoft Office2007及以上版本或者wps軟件;

2）Oraclexe安裝包;

3）從Oracle獲取數(shù)據(jù)（2007版）.xlsm報(bào)表收資平臺(tái);

4）報(bào)表定制模塊.xls，例如調(diào)度班夜班報(bào)表template.xls;

5）遙測(cè)表.xls;

4.2軟件安裝

將Oraclexe安裝包解壓，雙擊運(yùn)行OracleXEUniv.exe，選擇下一步->選擇接受->下一步->任意輸入口令，如1->安裝->安裝完成。

4.3報(bào)表定制

4.3.1數(shù)據(jù)庫數(shù)據(jù)采集功能流程圖和詳細(xì)流程描述

首先讀取數(shù)據(jù)庫的配置，包括ip、端口、用戶名、密碼等，建立數(shù)據(jù)庫讀取通道，根據(jù)定義好的域名表名進(jìn)行數(shù)據(jù)讀取，讀取自動(dòng)化系統(tǒng)webIII服務(wù)器的oracle數(shù)據(jù)庫，將數(shù)據(jù)保存到相應(yīng)的表中。

4.3.2報(bào)表格式定制功能流程圖和詳細(xì)流程描述

根據(jù)需要采集的報(bào)表數(shù)據(jù)要求，定義域名和表名，讀取的原始數(shù)據(jù)是每個(gè)5分鐘的采樣點(diǎn)，求數(shù)據(jù)最大最小值、平均值等特殊要求需做公式定義數(shù)據(jù)模式，然后定制報(bào)表格式模板。

4.4系統(tǒng)數(shù)據(jù)庫連接設(shè)置界面

在此界面可以看到數(shù)據(jù)庫連接配置信息，包括：地址、SID、端口號(hào)、用戶名、密碼等。

4.5系統(tǒng)數(shù)據(jù)模板信息與定時(shí)設(shè)置界面

在此界面可以看到數(shù)據(jù)模板信息與定時(shí)信息配置，包括：模板文件名稱、模板名稱、域名從第幾行開始顯示、域名從第幾列開始顯示、是否復(fù)制其他sheet、每天幾點(diǎn)執(zhí)行、執(zhí)行后是否關(guān)閉文檔、定時(shí)執(zhí)行按鈕、定時(shí)停止按鈕、執(zhí)行按鈕等。

5取得效益分析

5.1經(jīng)濟(jì)效益

計(jì)算依據(jù)：調(diào)度班的電量統(tǒng)計(jì)報(bào)表、監(jiān)控班的日?qǐng)?bào)表、自動(dòng)化班的綜合報(bào)表及各部門報(bào)表（約32個(gè)報(bào)表）都需要獲取調(diào)度數(shù)據(jù)網(wǎng)的大量遙測(cè)數(shù)據(jù)，人工導(dǎo)出錄入需要花費(fèi)大量的時(shí)間，采用本軟件平均每天能節(jié)省7小時(shí)工時(shí)，按每人每天工資300元人民幣計(jì)算，每年節(jié)省人工費(fèi)：65天*300元/人=10.95萬元。

5.2社會(huì)效益

報(bào)表是企業(yè)應(yīng)用系統(tǒng)中不可缺少的一種數(shù)據(jù)展現(xiàn)方式，它可以為用戶特別是企業(yè)中高層用戶提供直觀的數(shù)據(jù)視圖（進(jìn)行自動(dòng)的統(tǒng)計(jì)計(jì)算，如求和，求平均，對(duì)分組進(jìn)行小計(jì)等），為用戶制定商業(yè)計(jì)劃和決策提供基礎(chǔ)和依據(jù)。報(bào)表同時(shí)也是商業(yè)智能應(yīng)用中實(shí)現(xiàn)數(shù)據(jù)可視化的方式之一。因此一套靈活并且可多源數(shù)據(jù)獲取定制的報(bào)表工具可以為企業(yè)帶來生產(chǎn)力的巨大提升。

結(jié)束語

本系統(tǒng)為單位各個(gè)部門大數(shù)據(jù)報(bào)表制作提供方便，使得調(diào)度班、自動(dòng)化班等能輕松獲取調(diào)度數(shù)據(jù)網(wǎng)的大數(shù)據(jù)，減輕工作量，每年經(jīng)濟(jì)效益可以達(dá)到10.95萬元，本成果已在本單位內(nèi)部推廣，調(diào)度班、監(jiān)控班、自動(dòng)化班等班組已使用本報(bào)表系統(tǒng)生成報(bào)表。

參考文獻(xiàn)

[1]翟進(jìn)乾，張凱，李文建，王心怡，王國民.基于大數(shù)據(jù)的智能電網(wǎng)信息系統(tǒng)設(shè)計(jì)[J].電子設(shè)計(jì)工程，2019，27（23）：99-102+107.

[2]萬方林.智能電網(wǎng)大數(shù)據(jù)處理技術(shù)現(xiàn)狀與挑戰(zhàn)研究[J].通訊世界，2019，26（10）：197-198.