基于電力營銷業(yè)務(wù)數(shù)據(jù)深度挖掘研究

【摘要】隨著電力營銷信息化建設(shè)和應(yīng)用的深入，數(shù)據(jù)作為信息化建設(shè)和應(yīng)用的主體，其質(zhì)量已經(jīng)越來越受到各方面的廣泛關(guān)注。為了提高營銷信息化系統(tǒng)的實用化程度，國網(wǎng)公司在營銷信息化系統(tǒng)實用化評價辦法中，提出了數(shù)據(jù)可用程度的評價標準；同時，針對營銷分析與輔助決策軟件的實用化，國網(wǎng)公司也提出了數(shù)據(jù)完整性與準確性“雙百”要求。根據(jù)業(yè)務(wù)需要及國網(wǎng)公司要求，新疆電力公司也迫切需要建立常態(tài)的數(shù)據(jù)質(zhì)量體系和核查機制，提高營銷業(yè)務(wù)數(shù)據(jù)質(zhì)量，滿足目前及將來的營銷業(yè)務(wù)工作開展需求。本文針對在基于電力營銷業(yè)務(wù)的數(shù)據(jù)分析和深度挖掘進行討論，介紹我們在電力營銷業(yè)務(wù)數(shù)據(jù)治理中的研究成果和工作經(jīng)驗。

【關(guān)鍵詞】電力營銷；數(shù)據(jù)質(zhì)量；分析；挖掘

【中圖分類號】TP311.52 【文獻標識碼】A 【文章編號】1672-51 58（2012）09-0170-02

1、引言

數(shù)據(jù)完整和準確是理想化的目標，新疆本身基礎(chǔ)跟內(nèi)地省有一定差距，尤其在營銷用戶檔案管理方面，由于新疆地域廣、人員分布分散，很難保證普查能完整準確的獲取用戶的檔案和用電信息。導致新疆電力營銷業(yè)務(wù)應(yīng)用系統(tǒng)運轉(zhuǎn)中的很多問題是用戶檔案數(shù)據(jù)錯誤或缺失而引起的，從而使基層的業(yè)務(wù)人員和系統(tǒng)運維人員天天忙碌于處理這些問題，而沒辦法騰出手更多的從事一些提高服務(wù)質(zhì)量的工作。提高數(shù)據(jù)質(zhì)量，保證數(shù)據(jù)準確率和完整率的工作迫在眉梢，針對此項工作，新疆電力公司一方面加大對用戶信息的普查力度，加強對客戶檔案信息的管理，同時我們利用系統(tǒng)自定義查詢功能，配置業(yè)務(wù)邏輯校驗查詢規(guī)則，每月定期通報考核各單位的問題數(shù)據(jù)

2、營銷數(shù)據(jù)質(zhì)量管理和業(yè)務(wù)邏輯

90年代中期美國麻省理工開展的全面數(shù)據(jù)質(zhì)量管理（TDQM—Total Data Quality Management）活動，借鑒了物理產(chǎn)品質(zhì)量管理體系的成功經(jīng)驗，提出基于信息生產(chǎn)系統(tǒng)所生產(chǎn)的數(shù)據(jù)產(chǎn)品的質(zhì)量管理體系。它指出數(shù)據(jù)作為信息系統(tǒng)所生產(chǎn)的產(chǎn)品，也應(yīng)當將其作為具有生命周期的產(chǎn)品進行管理，要由專門的數(shù)據(jù)管理員按照PDCA四個環(huán)節(jié)管理數(shù)據(jù)產(chǎn)生的過程和結(jié)果。

數(shù)據(jù)質(zhì)量管理的方法基于TDQM思想，主要步驟包括質(zhì)量定義、度量、分析和改進。

（1）定義：定義質(zhì)量要求，反映數(shù)據(jù)提供者、生產(chǎn)者和管理者對數(shù)據(jù)產(chǎn)品不同角度的質(zhì)量要求。

（2）度量：根據(jù)數(shù)據(jù)產(chǎn)品及其質(zhì)量定義，確定質(zhì)量指標體系，跟蹤數(shù)據(jù)的量度，監(jiān)控數(shù)據(jù)質(zhì)量。

（3）分析：分析質(zhì)量問題出現(xiàn)的原因。

（4）改進：根據(jù)分析結(jié)果，采取措施消除產(chǎn)生數(shù)據(jù)質(zhì)量問題的根源。如采用數(shù)據(jù)修正、轉(zhuǎn)換等技術(shù)方法改進如重碼、數(shù)據(jù)不一致等問題，或者制定政策改進數(shù)據(jù)的生產(chǎn)過程和管理方法。

全面數(shù)據(jù)質(zhì)量管理（TDQM）具有如下特點：

（1）周而復始循環(huán)的四個過程不是運行一次就完結(jié)，而是周而復始地進行。一個循環(huán)結(jié)束了，解決了一部分問題，可能還有問題沒有解決，或者又出現(xiàn)了新的問題，再進行下一個循環(huán)，依此類推。

（2）階梯式上升循環(huán)不是停留在一個水平上的循環(huán)，不斷解決問題的過程就是水平逐步上升的過程。

通過分析營銷數(shù)據(jù)質(zhì)量管理的業(yè)務(wù)過程，結(jié)合全面數(shù)據(jù)質(zhì)量管理（TDQM）思路，得出營銷數(shù)據(jù)質(zhì)量管理業(yè)務(wù)模型如下圖：

營銷數(shù)據(jù)質(zhì)量管理是對營銷業(yè)務(wù)及營銷分析與輔助決策業(yè)務(wù)中的數(shù)據(jù)質(zhì)量進行全面管理，主要包括定義定義、度量、分析、改進四個步驟：

質(zhì)量定義：根據(jù)營銷業(yè)務(wù)及營銷分析與輔助決策業(yè)務(wù)可能存在的數(shù)據(jù)質(zhì)量問題，從準確性、完整性、一致性、及時性及適用性等維度，對業(yè)務(wù)數(shù)據(jù)進行剖析，發(fā)現(xiàn)數(shù)據(jù)問題潛在規(guī)律，對問題進行分類，定義各分類問題數(shù)據(jù)的核查規(guī)則與改進規(guī)則，最后根據(jù)問題分析、重要等級等定義問題考核規(guī)則，作為數(shù)據(jù)質(zhì)量考核的依據(jù)。

度量：根據(jù)問題數(shù)據(jù)核查規(guī)則，定期、不定期對各種問題數(shù)據(jù)進行核查，找出質(zhì)量問題數(shù)據(jù)。

分析：通過對問題分類、分布、趨勢等分析，找出數(shù)據(jù)質(zhì)量及其變化的主要原因，為后續(xù)改進提供依據(jù)。

改進：通過技術(shù)及管理兩方面對數(shù)據(jù)質(zhì)量進行改進。技術(shù)方面：發(fā)起問題修正流程，人工或自動修正問題數(shù)據(jù)，并回流到數(shù)據(jù)源，實現(xiàn)數(shù)據(jù)質(zhì)量的閉合管理；除了數(shù)據(jù)質(zhì)量本身問題，也應(yīng)該對數(shù)據(jù)質(zhì)量產(chǎn)生過程進行修正（如程序BUG等），才能在技術(shù)層面確保不再有同樣新問題數(shù)據(jù)產(chǎn)生。管理方面：通過數(shù)據(jù)質(zhì)量考核等管理手段，促使管理人員、業(yè)務(wù)人員等提高數(shù)據(jù)質(zhì)量意識，促進數(shù)據(jù)質(zhì)量提高。

圍繞著營銷業(yè)務(wù)數(shù)據(jù)質(zhì)量及營銷分析與輔助決策分析數(shù)據(jù)質(zhì)量，通過定義、度量、分析、改進四個步驟周而復始地進行，逐步解決問題數(shù)據(jù)，促進數(shù)據(jù)質(zhì)量水平不斷上升。

3、應(yīng)用邏輯

根據(jù)營銷數(shù)據(jù)質(zhì)量管理業(yè)務(wù)模型分析，數(shù)據(jù)質(zhì)量管理業(yè)務(wù)功能可分為定義、度量、分析、改進四大部分，通過對業(yè)務(wù)功能的繼續(xù)抽象，可以將各業(yè)務(wù)功能的共同點抽取出來。

定義部分：包括數(shù)據(jù)產(chǎn)品模型、生產(chǎn)模型及質(zhì)量模型定義。數(shù)據(jù)產(chǎn)品模型定義指數(shù)據(jù)實體相關(guān)描述，相當于數(shù)據(jù)庫系統(tǒng)中的數(shù)據(jù)字典；數(shù)據(jù)生產(chǎn)模型定義指數(shù)據(jù)產(chǎn)品生產(chǎn)過程的描述（過程），如數(shù)據(jù)屬性的產(chǎn)生環(huán)節(jié)、責任單位等；數(shù)據(jù)質(zhì)量模型提供了關(guān)于質(zhì)量要求的描述，包括數(shù)據(jù)質(zhì)量核查及修正規(guī)則定義、質(zhì)量考核規(guī)則定義。

度量部分：通過對各種分類數(shù)據(jù)質(zhì)量核查過程抽象，度量部分可以分為數(shù)據(jù)核查及核查引擎兩部分。數(shù)據(jù)核查提供操作者與核查，而核查引擎根據(jù)核查規(guī)則從業(yè)務(wù)數(shù)據(jù)中篩選出問題數(shù)據(jù)。

分析部分：問題數(shù)據(jù)的原因定位，包括分類問題分析、問題分布分析、問題趨勢分析、問題解決情況分析、問題分析報告。

改進部分：提供問題數(shù)據(jù)修正及數(shù)據(jù)質(zhì)量考核。數(shù)據(jù)修正可分為人工修正及自動修正，自動修正指利用已定義修正規(guī)則通過修正引擎完成修正，數(shù)據(jù)修正先在數(shù)據(jù)質(zhì)量管理數(shù)據(jù)庫上進行，記錄修正日志及結(jié)果，通過審批后，歸到到業(yè)務(wù)生產(chǎn)庫。數(shù)據(jù)質(zhì)量考核則根據(jù)考核規(guī)則，計算各考核單位指標得分及排名，作為考核依據(jù)。

4、數(shù)據(jù)邏輯

基于數(shù)據(jù)質(zhì)量管理的業(yè)務(wù)邏輯模型及應(yīng)用邏輯架構(gòu)，根據(jù)數(shù)據(jù)質(zhì)量業(yè)務(wù)數(shù)據(jù)特點，可將營銷數(shù)據(jù)質(zhì)量管理數(shù)據(jù)分為：元數(shù)據(jù)、異常數(shù)據(jù)、改進數(shù)據(jù)、分析結(jié)果數(shù)據(jù)等，異常數(shù)據(jù)來源于營銷查詢數(shù)據(jù)庫、營銷分析與輔助決策數(shù)據(jù)的核查結(jié)果，核查結(jié)果的修正數(shù)據(jù)回流到營銷生產(chǎn)數(shù)據(jù)庫。

5、數(shù)據(jù)治理

通過以上的工作邏輯，現(xiàn)場數(shù)據(jù)治理工作將按如下流程開展：

1）規(guī)則制定

按照業(yè)務(wù)邏輯要求制定相關(guān)規(guī)則。

2）腳本編譯并確認根據(jù)規(guī)則編譯查詢統(tǒng)計腳本，驗證腳本符合業(yè)務(wù)邏輯。

3）統(tǒng)計核查問題

執(zhí)行腳本統(tǒng)計問題。

4）問題分類分析

按照問題思考整改方式方法。

5）整改

通過修改數(shù)據(jù)或走流程的方式進行維護數(shù)據(jù)。

6）系統(tǒng)或業(yè)務(wù)優(yōu)化

分析問題產(chǎn)生原因以便對業(yè)務(wù)開展方式、管理方法或系統(tǒng)流程進行優(yōu)化。

6、總結(jié)

通過對基于電力營銷業(yè)務(wù)數(shù)據(jù)深度挖掘研究，建立科學有效的數(shù)據(jù)質(zhì)量管理，從數(shù)據(jù)完整性、準確性、一致性、及時性等維度實現(xiàn)國網(wǎng)公司總部、公司層面的數(shù)據(jù)質(zhì)量動態(tài)監(jiān)控、分析、考核，使數(shù)據(jù)質(zhì)量管理常態(tài)化，實現(xiàn)數(shù)據(jù)完整性與準確性“雙百”目標，真正做到營銷數(shù)據(jù)完整、準確、可信、可用，全面提高營銷綜合管理。