在SAP ERP系統數據歸檔中采用索引數據庫的應用研究

陳超

摘要：SAP ERP系統是大型制造業廣泛采用的企業資源計劃管理軟件。隨著企業發展，不斷增長的數據量給系統上線后的運行維護帶來了重重問題。對系統進行數據歸檔能減少在線數據量，達到提升運行效率并降低數據管理成本的目的。通過首鋼京唐公司數據歸檔的實例說明，本文所提出的采用索引數據庫的數據歸檔方法，與標準數據歸檔相比，對數據空間的釋放量有了明顯提升。

關鍵詞：SAP ERP系統 數據歸檔

中圖分類號：TP319 文獻標識碼：A 文章編號：1007-9416（2016）07-0088-02

Abstract：SAP ERP system is widely used in large-scale manufacturing as enterprise resource planning management software. With the development of enterprises， the growing data has caused many problems for the system operation and maintenance. Data archiving of the system can reduce the amount of online data， in order to improve operation efficiency and reduce the cost of data management. Through the examples of Shougang Jingtang data archiving， the release amount of spatial data has improved significantly compared to the index database data archiving method using with standard data archiving.

Key Words：SAP； ERP system； Data archiving

ERP（企業資源計劃系統），是指在信息技術基礎上，以系統化的管理思想，為企業決策層及員工提供決策運行手段的管理平臺。企業資源計劃也是實施企業流程再造的重要工具之一，是大型制造業普遍使用的公司資源管理系統。世界500強企業中有80%的企業都在用ERP軟件作為其決策的工具和管理日常工作流程。SAP公司的ERP軟件，以其功能強大、開放性強、設計思路與流程嚴謹牢居著全球ERP軟件之首。

企業成功實施了SAP ERP系統，僅是"萬里長征"走完了第一步。系統進入穩定運行階段，企業對SAP系統的依賴隨著時間的推移而不斷加強；企業內部、外部環境不斷發生變更，并且隨著連接的外圍系統增加、系統邊界范圍的擴展，系統的復雜度和數據量也在不斷的提升。由于數據庫越來越大，對于管理和使用都是一個大的問題，如何讓ERP系統在上線后保證運行效率和運行穩定性，是日常運行維護工作的重點。數據歸檔的目的就是為了盡可能減少系統在線數據，降低系統數據庫數據量，控制數據增長，從而提高系統性能，減少后續備份設備和存儲設備投資，是解決上述問題的一種可靠、成熟的技術手段。

1 SAP ERP系統數據歸檔概述

1.1 SAP ERP系統數據歸檔的定義及目的

SAP ERP的數據管理策略包括：數據避免，數據匯總，數據刪除和數據歸檔。其中，數據避免和數據匯總基于數據分析，對無效數據相關配置進行取消修改，達到避免無效數據產生的目的；數據刪除主要針對部分系統數據表和自定義數據表建立生命周期管理策略，定期執行清理；數據歸檔則主要應用于業務數據和主數據歸檔及其查詢。

數據庫是結構化的數據集合，“數據歸檔的核心是標識數據庫中非活動數據，然后將非活動數據從中央數據庫中分離出來存儲，至更廉價的存儲設備[1]”。SAP ERP系統的數據歸檔，就是通過數據分析定義數據庫中的非活動數據，按照制定的歸檔策略將非活動數據從數據庫中轉移到歸檔文件中，然后將非活動數據從在線數據中刪除。在ERP系統數據歸檔時，由于是真實遵循生成原件的方式而產生的電子文件，所以可視為原件的忠實復件，與原件具有相同的效力[2]。

數據歸檔的目的，主要有三個方面：

一是降低ERP系統數據庫在線數據，最大程度的提高系統性能。通過減少在線數據提高系統的功能程序和報表程序的響應速度，縮短系統同步及備份時間，縮短系統升級等操作的停機時間。

二是減少數據的管理成本。通過歸檔降低系統數據的整體增長速度，減少后續備份設備和存儲設備投資，減少數據的運行和維護管理成本。

三是建立ERP系統長期的歸檔策略。保證系統數據庫的數據空間長期達到相對穩定狀態，提升系統的穩定性。

1.2 SAP ERP系統數據歸檔的步驟及方法

（1） 進行數據分析，明確歸檔范圍。通過分析數據庫表大小和增長速率，結合業務、法律法規和審計方面的需求，明確歸檔范圍及歸檔對象。

（2） 制定數據歸檔策略。通過對歸檔對象進行業務分析和技術分析，明確歸檔對象間的業務依存關系、歸檔范圍、歸檔方式及數據保留期限等，制定數據歸檔的策略。

（3） 進行系統測試。進行歸檔范圍相關程序的系統測試，并解決標準程序和自開發程序在查詢歸檔數據時出現的性能問題。

（4） 執行歸檔操作及數據庫重組。完成配置等請求的系統傳輸，并按照AOP執行生產系統的數據歸檔操作，進行數據庫重組充分釋放空間。

2 在數據歸檔中采用索引服務器的新方法

傳統方案中的索引是全部存放在SAP數據庫的，以自建表實現，這在很大程上占用了數據庫的空間，并且后期隨著更多信息結構的創建，其數據量也會迅速增加。下圖1為標準歸檔功能中索引的架構。

索引服務器的架構是通過DBCO在SAP系統進行配置從而與外部Oralce數據庫集成的一種方式，處理索引數據時更加靈活，更加可靠。對于已歸檔的數據來說，數據訪問的瓶頸主要在于讀取數據文件，尤其是大數據量的時候，循環讀取歸檔文件，其性能極為低下，甚至程序運行時可能出現內存不足或運行超時的錯誤。因此，索引服務器可以解決這個問題。架構如圖2。

從長遠影響來看，當數據訪問時（尤其是自開發報表），為了加快查詢速度，會考慮增加字段，即添加索引。這在后期的維護中又為ERP系統數據庫的空間劇增埋下長期隱患，也違背了減少數據量的初衷，更影響了歸檔的實際效果。當比較常用或訪問頻率相對較高的字段信息放到索引服務器數據庫后，會明顯提升歷史數據的訪問效率，使得讀取歸檔文件的頻率降低，在程序開發時可以優先考慮訪問索引服務器。同樣，讀取已歸檔數據的需求解決后，標準的信息結構索引表也就無需填充太多的數據，其所占用SAP的硬盤空間也大幅的減少。

3 實例研究

首鋼京唐公司SAP ERP系統上線運行幾年后，隨著公司產線陸續投產，系統業務也變得復雜和多樣化。ERP系統中采購、質量、設備、生產、銷售和財務數據也在不斷增加并且數據的增長速度在不斷加快，大量過時的及冗余的歷史數據嚴重影響著ERP系統的性能。一般公司在ERP系統上線3-5年后，數據的增長方向已經明確，就開始進行歸檔處理。截至歸檔項目啟動前，京唐公司的ERP系統數據庫占用量已經達到約3T。根據以往項目經驗和財務憑證的審計要求，保留最近2年的系統數據。根據影響程度和范圍，圍繞數據量大和增長速度快的表數據，結合使用頻繁，數據庫響應時間慢的功能評估，確定了財務、生產、設備、銷售模塊相關的25個歸檔對象。

首鋼京唐公司的SAP ERP數據歸檔采用了索引服務器的新方法，通過實例證明，該方法不僅大幅提升了數據庫空間的釋放量，提升了系統性能，而且保證了數據的讀取效率。

應用了索引服務器，使得大量的信息結構索引轉移到SAP系統之外的數據庫成為可能，極大地節省了SAP系統的數據庫空間。通過對歸檔對象所對應數據表的分析，可歸檔的數據量約為1.3T，按照標準歸檔方法的經驗壓縮比，可釋放的空間約為900G。采用了索引服務器的新方法后，數據庫釋放空間1.07T。相比標準歸檔方法，多釋放了近200G的空間。對比楊波在文章[3]中所提到的應用標準歸檔方法數據庫容量減少30%的案例，數據庫空間的釋放量有了明顯的提升。

數據歸檔后，對在線數據查詢性能無影響，部分事務代碼的查詢性能有了明顯提升。如MB5B對過賬日期的庫存查詢，響應速度提升近一倍；月結過程中運行物料分類賬的單層處理原來需要2.5個小時以上，歸檔后運行時間減少為1個多小時，響應速度比原來提高近一倍。

在歸檔數據讀取效率方面，根據標準邏輯，取歸檔數據會先從SAP的信息結構索引表中讀取條件數據和文檔ID以及偏移量，然后根據文檔ID和偏移量去讀取對應的數據文件，再經過數據篩選處理，得到所需的數據。而直接從索引服務器取數，主要整理好查詢條件，再通過封裝的功能便可直接取出數據，可以稱之為一步到位。經過測試，從歸檔索引服務器取數的時間與從數據庫取數速度相當，比讀取數據文件的速度要快得多。

4 結語

SAP ERP系統的數據歸檔通過對非活動數據進行歸檔，降低了系統的在線數據，達到了提升系統性能，減少數據管理成本和建立長期歸檔策略的目的。通過實踐表明，本文所提出的采用索引數據庫的方法，不僅大幅增加了數據歸檔后數據庫空間的釋放量，而且提升了系統性能，保證了數據的讀取效率。

參考文獻

[1]沈立強.高校信息系統數據歸檔研究[J].中山大學學報：自然科學版，2009，48（S1）：215-219.

[2]云霄.基于ERP系統結構化數據歸檔技術方案研究[J].北京檔案，2014（7）：34-36.

[3]楊波.SAP 數據歸檔在工程機械企業中的應用-記廣西柳工機械股份有限公司SAP 數據歸檔項目[J].機械設計與制造工程，2013，42（9）：68-72.