大型航運集團主數據管理體系規劃

賈怡菁，　金　華，　韓明龍

(中海網絡科技股份有限公司， 上海 200135)

大型航運集團主數據管理體系規劃

賈怡菁，金華，韓明龍

(中海網絡科技股份有限公司， 上海 200135)

摘要:針對“大數據”時代企業信息化建設不斷發展的過程中，數據質量存在著缺乏完整性、有效性和及時性等一系列問題的現狀，結合某大型航運集團獨有的業務特性，通過識別主數據對象、確定主數據管理模式、明確主數據所有者、建立主數據管理組織、規范主數據管理流程、統一主數據標準、分析搭建主數據管理系統的定位及集成架構要求，研究并規劃一套全集團范圍內的主數據管理體系，從而落實集團對主數據管理控制的需求和目標。

關鍵詞:數據質量； 主數據； 體系； 規劃

0引言

在“大數據”時代，企業內存在著交易數據、分析數據等多種數據類型，其中主數據是一類在企業范圍內需要統一標準和共享的非常重要的高價值基礎性數據。主數據具有企業級共享、業務部門與IT共同管理、變化緩慢且有生命周期的特征，是構成交易信息、為企業決策分析提供支持的關鍵部分。

縱觀過去5~10年，中國大部分的企業信息化建設均達到了高峰期，從無到有地建設了企業資源計劃(Enterprise Resource Planning, ERP)和自動化辦公(Office Automation, OA)等多類系統，以此來滿足相關業務和企業發展的需要。但是，絕大多數的企業在信息系統建設過程中忽視了統一的數據標準，各系統的建設均是以項目的形式獨立開展的，既缺少統一的主數據標準加以指導，又不重視企業級標準在本系統中的落實。因此，當企業邁入更高層次的輔助決策支持、商業智能等系統的建設過程中需要從各個系統中提取數據進行分析時，發現各系統存在數據標準各異、數據規則與口徑差異大、數據質量無法支持分析的要求等問題。

作為國有大型航運企業，集團的管理要求正不斷提升，信息化建設深入發展，集團總部及其下屬子公司愈發關注如何發掘和提高各類信息的使用價值。但是，在集團原有的以業務為先的信息系統分散建設模式下，各類數據(特別是集團層面的主數據)散落在各公司的信息化系統中進行分頭管理，數據顆粒度以及精細化程度不盡相同，數據完整性、有效性、及時性缺乏集團層面統一的設計保障，因此無法實現系統大數據的挖掘和智能使用，難以較好地實現數據的應用價值，直接影響集團快速獲取準確的決策信息，迫切需要從根本上優化數據質量。

對此，結合大型航運集團獨有的業務特性，通過研究主數據的管理對象、管理模式、所有者、管理組織、管理流程、標準及系統定位、集成架構、技術架構等的要求，規劃全集團范圍內的主數據管理體系。

1規劃目標

遵循“以管控模式與數據規范為基礎，以管理組織、管理流程及管理平臺為支撐”的原則，建立一套完整的集團主數據管理體系(見圖 1)；以全程化的在線集中管控模式強制主數據維護的工作程序性和數據規范性，從而落實集團對主數據管理控制的需求和目標。

圖1　主數據管理體系架構

1) 數據規范是主數據管理體系中的基石，是識別和保證主數據唯一性的依據,包括主數據的編碼、分類和屬性等。其中：編碼設計應能體現行業特點與管理要求；分類設計與管控模式緊密相關；屬性設計則要充分考慮唯一性和完整性的策略。通過規范集團主數據標準，確保集團管理的主數據源單一、合法、有效，支持集團范圍內主數據的唯一性、完整性、可控性、時效性和準確性。

2) 管理模式是主數據設計的核心內容之一，其設計方案應能體現集團對各類主數據管理的要求和策略。此外，其還是組織和流程設計的基礎，決定了主數據管理組織架構的職責、角色以及流程的走向。

3) 主數據管理離不開組織的保障，否則主數據的質量無法得到真正的提高。主數據管理組織設計包含組織架構、角色、職責以及人員配置等多方面，是落實數據標準、管理模式及指導主數據流程設計的重要環節。

4) 主數據管理流程面向主數據全生命周期，包含主數據創建、變更、停用、歸檔等階段。流程設計應根據業務系統及主數據管理平臺的定位，結合組織結構與角色，明確流程執行的活動、表單及跨系統數據流向。

5) 在整體體系架構中設計主數據管理系統，明確其定位、實現模式、功能及集成架構，用于固化主數據標準、管理模式、組織和流程，滿足主數據管理的需求。

2規劃方法及內容

2.1識別主數據對象

主數據的分布現狀與集團及下屬子公司信息系統的總體規劃和建設緊密相關，主數據分布于集團及下屬子公司的各個信息系統之中。其具有以下幾個特征：

(1) 主數據是跨平臺共享的數據；

(2) 主數據是隨企業經營管理的變動而相應變化；

(3) 主數據需要在企業內保持一致性，在全集團范圍內共享和使用。

根據主數據識別的原則(見圖 2)，主數據是企業內需要管理的關鍵基礎數據，具有權威性，可為企業的業務分析和戰略決策提供重要的支撐。其在企業的多套信息系統中長期存在，對企業業務功能有非常重要的價值；同時，需要在企業內部縱向整合集中管理，橫向跨多個業務部門共享使用。

圖2　主數據識別原則

2.2確定主數據管理模式

通常行業內主數據的管理模式有集中型管理、聯邦型管理、協同型管理和分散型管理4種，目前集團對各類主數據的管理模式尚未明確，應針對不同的主數據制定適應相關業務的管理模式。影響主數據管理模式歸屬的因素很多，主要有集團管控模式、業務組織職責以及信息系統架構等幾方面，此外還涉及到其他關聯信息系統是否需要功能改造。

針對集團現有業務的特性及各類主數據對管控模式的需求，未來將對集團及下屬子公司共同關注的主數據對象采用集中型的管理模式，對具有行業特性或特殊管理要求的主數據對象則自行管理。在實際業務中，往往會出現某類主數據的基本屬性需要集團集中管理而部分行業屬性需要自行維護的情況，此時應采用聯邦型或協同型的管理模式(見圖3)。

圖3　集團主數據管理模式

2.3明確主數據所有者

明確主數據所有者通常需要考慮以下3個方面：

(1) 與IT部門共同協調和推動是成功完成主數據管理工作的重要經驗總結；

(2) 所謂“服從專業權威性”是指數據的“使用者”要嚴格服從“所有者”制定的管理標準；

(3) 橫向跨企業水平整合的數據一定要在集團總部層面設置崗位，或由總部指定授權給下屬企業代為行使。

2.4建立主數據管理組織

組織是實現數據標準化的前提，組織機構內的各成員根據各自被賦予的角色與職責，通過協同工作，共同支持數據管理體系的高效、常態化運轉。主數據管理必須有組織的保障，這樣不僅可以使數據規范化管理工作得以常態化開展，而且能落實數據管理和數據質量的責任。因此，主數據管理的組織與職責的確立是非常關鍵的內容，是落實數據標準與管理模式，并指導主數據流程設計的重要一環。

根據數據從創建、發布到維護的全生命周期，明確主數據組織機構中的角色以及角色對應的部門，包括數據標準制定者、數據創建/維護者、數據審核者、數據發布者以及數據使用者。以外部客商主數據為例，為滿足集團對客商資源進行共享和集中采購的要求，同時及時響應市場需求。未來外部客商主數據可采取統一標準、分級管理的模式：

(1) 統一標準即由集團制定客商主數據的標準，包括數據編碼、數據屬性以及數據分類等，為方便集團統計分析奠定良好的基礎，下屬各級子公司在審核客商主數據時都要遵循標準；

(2) 分級管理主要是依據集團管控的需求對客商進行分類，由集團總部及二級公司總部完成所有客商主數據的管理審核工作；

(3) 集團總部將集中管理集團重點客商，根據業務發生情況，定期在系統內標識屬于集團的重點客商并進行管理。

基于以上設計思路，建立客商主數據管理組織結構(見圖4)。

圖4　客商主數據管理的組織結構

2.5規范主數據管理流程

目前，集團在主數據管理流程上主要存在多頭維護、效率低、缺乏對主數據對象進行管理和發布的統一平臺等問題，下面以現有客商主數據管理流程(見圖 5)為例進行說明：

(1) 缺乏統一的客商主數據申請標準，且通過郵件或OA申請，并未與業務系統直接對接;

(2) 通常只是簡單地根據客商名稱進行排重，不支持模糊檢索，也未使用其他屬性作為搜索條件，容易造成數據冗余、數據錯誤的問題，且缺乏信息系統的支持，人工比對工作量大；

(3) 財務系統與業務系統割裂，分頭維護，線下反復溝通成本高，且缺乏差錯校驗和完整性保障機制；

(4) 集團缺少對外部客商進行統一審核和管理的職能部門，難以對數據質量進行把控；缺乏對主數據對象進行管理和發布的統一的平臺。

未來將基于管理模式與管理組織的設計，結合集團實際情況，將主數據管理系統定位為管理平臺。以統一流程發起源頭為原則，設計并規范從申請、業務資質與數據審批到最終編碼發布的完整主數據管理流程，實現端到端的自動化主數據維護和信息發布。基于外部客商的“統一標準，分級管理”思路，未來外部客商主數據的管理流程見圖6，說明示例見表1。

圖5　現有客商管理流程

表1　未來外部客商管理流程說明

圖6　未來外部客商主數據管理流程

2.6統一主數據標準

目前集團尚未建立跨集團、完整統一的主數據標準，使得下屬成員單位在建設和維護應用系統時沒有可遵循的規范，進而導致主數據在不同下屬成員單位中不一致、同物不同碼、屬性缺失、層次管理缺失等各種數據質量及管理問題。

同樣以客商為例，目前集團缺少統一的數據標準，存在大量數據不一致、不規范的問題， 主要體現在：

(1) 在同一系統中，同一外部客商在不同二級公司財務帳套中的代碼不一致；

(2) 在同一系統中，同一外部客商在同一財務帳套中的代碼和名稱不一致、不規范；

(3) 各二級公司業務系統不注重屬性維護，僅對客商名稱、角色等基本信息進行維護，缺乏對客商進行多維度分析的數據基礎。

無論是屬性規范性問題還是編碼的統一性問題，實質上都歸結為集團層面對全集團統一的客商主數據標準的缺失，而這一缺失反映出集團層面缺少能統一管理客商數據的歸口部門。

2.7搭建主數據管理系統

2.7.1系統的定位與數據流向

主數據管理系統的定位為：集團統一建設，使集團能夠高效、規范地管理船舶、港口、客商、公司組織等的主數據，保持各二級單位與各應用系統之間主數據的一致性、唯一性、共享和及時性，為集團數據分析和決策支持提供規范的數據基礎。

當前集團不同業務系統對同一主數據的編碼、名稱、分類體系及屬性千差萬別，原因在于這些主數據是在各業務版塊的業務系統上自行維護的，“標準不一、規范不一、口徑不一、平臺不一”是主數據治理的核心痛點。主數據管理的方向是在一個統一的管理平臺上集中維護，該平臺落實全集團同一套數據標準、同一套管理流程、同一套數據質量監督體系，以此來保障主數據的唯一性和完整性。因此，主數據的數據源頭為MDM系統，在MDM完成數據創建后按照基礎數據的性質提供標準接口，供各周邊系統調用(見圖7)。

圖7　主數據管理系統與周邊系統的數據流向

2.7.2集成架構要求

MDM與周邊系統集成的技術方式，分為MDM主動把主數據信息推送至相關系統以及各相關系統主動到MDM拉取與其相關的主數據信息兩種模式(見圖8)，相關說明見表2。

(b) 業務系統主動從MDM拉取主數據

方式數據流轉模式說明11)業務系統按照接口技術規范發布WebService2)MDM調用業務系統發布的WebService,通過SOAP協議把數據實時傳輸給業務系統3)業務系統將接收數據的處理情況同步反饋給MDM以形成數據交互閉環21)業務系統按照接口技術規范開辟臨時存儲區域并向MDM系統開放2)MDM通過JDBC協議把數據寫入業務系統的臨時存儲區域供使用31)業務系統開辟FTP共享文件目錄,供MDM傳輸信息文件2)MDM將數據以文件形式(EXCEL、CSV)傳輸至FTP對應目錄下3)業務系統從目錄下解析文件獲取MDM傳輸的數據41)MDM按照接口技術規范發布WebService,同時定義時間戳供各業務系統定期拉取所需數據2)業務系統定時調用MDM發布的WebService來發送指令,以獲取一段時間內與其相關的主數據信息3)MDM實時響應業務系統,把相關的主數據信息通過SOAP協議傳輸至該業務系統51)MDM按照接口技術規范開放部分數據庫,供抽取數據2)通過ETL工具定期從MDM開放的部分數據庫中抽取相應的數據61)MDM按照接口技術規范開辟臨時存儲區域,數據存放于其中,并且該區域向所有相關業務系統開放2)依靠業務系統監聽程序來監聽MDM臨時存儲區域3)業務系統判斷是否為本系統所需數據,如是,則通過數據庫直聯方式獲取該數據,供業務流轉使用

出于集團信息化建設的整體考慮，建議未來采用方式4，即MDM按照接口技術規范發布Web Service的方式，供各業務系統按需獲取標準、完整的主數據信息，從而實現主數據在各系統間的互聯互通。

2.7.3技術架構要求

集團主數據管理系統的技術架構要求包括集成性、部署靈活性以及遵照集團整體的IT架構標準。

(1) 數據和服務的集成：數據集成分發方面，能夠把不同來源、格式、特點性質的數據在邏輯上或物理上有機地集中，從而為主數據提供全面的數據源，并能夠通過統一的服務接口向各系統分發經過清洗審核后的主數據記錄；服務集成方面，能夠通過界面或操作集成的方式弱化用戶在不同系統中進行操作的不良體驗；數據清洗方面，能夠通過自定義的數據規則對錯誤數據、重復數據、殘缺數據進行自動清洗匯總。

(2) 支持工作流引擎方面，系統部署靈活、可擴展：所有管理流程都可通過自定義規則進行配置管理,且流程節點可圖形化監控,管理流程可追溯及分析；全配置實施方面，能夠僅通過界面配置或少量代碼開發，即實施新的主數據信息。

(3) 權限控制方面，遵守集團基礎的架構原則：權限控制的顆粒度，不僅要到某一條記錄還需要到某一個屬性；安全性方面，從物理安全、網絡安全、主機安全、應用安全、數據安全和備份恢復等角度確保系統數據不丟失、不泄露，服務不中斷。

3結語

結合集團主數據管理的現狀，分析了目前集團主數據管理存在的問題及產生問題的原因。通過識別主數據對象、確定主數據管理模式、明確主數據所有者、建立主數據管理組織、規范主數據管理流程、統一主數據標準、分析搭建主數據管理系統的定位及集成架構要求的規劃方法，設計了1套集團范圍內的主數據管理體系。該規劃研究對后續系統平臺的建設及實施推廣具有指導性作用。

參考文獻：

[1]和軼東，張怡，曹乃剛.SAP MDM 主數據管理[M] .北京：清華大學出版社，2013.

[2]張揚.主數據管理中的Why,What,How和Who[J]. 信息系統工程，2010(7)： 34.

[3]賈紅龍.面向服務體系架構(SOA)的主數據管理(MDM)和流程監控(PM)研究[J].信息技術與信息化， 2010(2)： 78-82.

[4]謝正華.搭建主數據管理系統，助推企業信息化建設[J].信息系統工程,2010(4):16.

[5]何志峰.主數據集成：打破信息共享的壁壘[J].上海信息化,2009(4):59-61.

[6]林泳琴.面向企業應用集成的主數據管理系統[J].電腦知識與技術,2011(19):4521-4523.

2015年10月將取消有關水運涉企行政事業性收費項目

2015年8月17日，財政部、國家發展改革委聯合發布《關于取消有關水運涉企行政事業性收費項目的通知》(財稅[2015]92號)，根據國務院關于推進收費清理改革工作部署，為切實減輕航運企業負擔，促進長江經濟帶發展，決定取消有關水運涉企行政事業性收費項目。有關事項通知如下：

1. 自2015年10月1日起，取消船舶港務費、特種船舶和水上/水下工程護航費、船舶臨時登記費、船舶煙囪標志或公司旗注冊費、船舶更名或船籍港變更費、船舶國籍證書費及廢鋼船登記費等7項中央級設立的行政事業性收費。

2. 各省(區、市)財政、價格部門要對省級設立的水運涉企行政事業性收費項目進行清理。取消屬于政府提供普遍公共服務或體現一般性管理職能，以及主要目的是養人、違背市場經濟基本原則的不合理收費項目。堅決取締違規設立的收費項目。

3. 取消有關水運涉企行政事業性收費項目后，相關部門和單位依法履行職能和事業發展所需經費，由同級財政預算予以統籌安排，保障工作正常開展。

4. 有關執收部門和單位要到財政部門辦理財政票據繳銷手續。有關行政事業性收費的清欠收入應按照財政部門規定的渠道全額上繳國庫。

5. 各地區和有關部門要嚴格執行本通知規定，對公布取消的水運涉企行政事業性收費項目，不得以任何理由拖延或者拒絕執行，不得以其他名目或者轉為經營服務性收費方式變相繼續收費。各級財政、價格部門要加強對落實本通知情況的監督檢查，對不按規定取消相關收費項目的，按有關規定給予處罰，并追究責任人員的行政責任。

中圖分類號：TP315

文獻標志碼：A

收稿日期：2015-04-10

作者簡介：劉榮(1988—)，男，湖南瀏陽人,助理工程師,主要從事軟件研發工作。

文章編號：1674-5949(2015)03-091-05

Planning Master Data Management System for a Large Shipping Group

JiaYijing，JinHua，HanMinglong

(China Shipping Network Technology Co.,Ltd， Shanghai 200135， China)

Abstract:To guarantee the quality of data, such as integrity, effectiveness, timeliness, acquired via complex network of a big shipping group, a series of basic researches are performed. The object items are indentified; The scope of major data is defined; The owner of master data is specified; The working flow the department in charge of master data management are determined and the standard of data formats is defined. The architecture and the distribution plan of the master management system for the Group are planed.

Key words:data quality; master data; system; planning