數(shù)字校園數(shù)據(jù)的遷移與整合策略

摘 要：數(shù)據(jù)中心是數(shù)字校園建設(shè)的核心部分，為各類信息化應(yīng)用提供穩(wěn)定可靠的基礎(chǔ)硬件條件，為校內(nèi)各種個(gè)性化應(yīng)用需求提供共享基礎(chǔ)數(shù)據(jù)，為各類數(shù)據(jù)提供高速安全的存儲(chǔ)與備份。

關(guān)鍵詞：數(shù)字校園；數(shù)據(jù)中心；機(jī)房

數(shù)字校園共享數(shù)據(jù)中心平臺(tái)將所有的信息有機(jī)集成，形成各部門聯(lián)合與治理后的完善的綜合數(shù)據(jù)庫(kù)。在各個(gè)孤立的業(yè)務(wù)應(yīng)用系統(tǒng)中，通過(guò)數(shù)據(jù)交換系統(tǒng)（ESB）提供的數(shù)據(jù)采集、抽取、轉(zhuǎn)換、過(guò)濾、映射等功能，將源數(shù)據(jù)庫(kù)中的權(quán)威數(shù)據(jù)裝載到共享主題數(shù)據(jù)庫(kù)中，形成統(tǒng)一的共享數(shù)據(jù)中心平臺(tái)的核心共享數(shù)據(jù)庫(kù)；再通過(guò)ESB提供的數(shù)據(jù)交換功能，根據(jù)不由業(yè)務(wù)應(yīng)用系統(tǒng)同步的需求，將共享數(shù)據(jù)庫(kù)中的治理后的共享主題數(shù)據(jù)庫(kù)，向下同步到各個(gè)業(yè)務(wù)應(yīng)用系統(tǒng)中，實(shí)現(xiàn)數(shù)據(jù)的有效共享。

1 數(shù)據(jù)遷移策略

在對(duì)原有的系統(tǒng)中的數(shù)據(jù)進(jìn)行遷移時(shí)，必須在遷移前做好一切數(shù)據(jù)遷移的準(zhǔn)備工作，包括數(shù)據(jù)遷移計(jì)劃、測(cè)試方法、備份與恢復(fù)策略與計(jì)劃等。成功數(shù)據(jù)遷移是保障證新系統(tǒng)試運(yùn)行成功的關(guān)鍵。數(shù)據(jù)遷移工作比較復(fù)雜，主要分為以下幾個(gè)步驟：

⑴業(yè)務(wù)系統(tǒng)及數(shù)據(jù)格式調(diào)研。數(shù)據(jù)遷移第一件事就是對(duì)業(yè)務(wù)系統(tǒng)數(shù)據(jù)格式和內(nèi)容調(diào)研，實(shí)現(xiàn)數(shù)據(jù)正確讀取工作，然后和新系統(tǒng)數(shù)據(jù)結(jié)構(gòu)進(jìn)行對(duì)比，制訂數(shù)據(jù)遷移策略和實(shí)施計(jì)劃。

⑵遷移工具準(zhǔn)備。在新舊系統(tǒng)數(shù)據(jù)格式及轉(zhuǎn)換規(guī)劃確認(rèn)后，開(kāi)始準(zhǔn)備遷移工具。遷移工具可以考慮成熟產(chǎn)品，也可能根據(jù)調(diào)研結(jié)果編制專用遷移工具。如果編制遷移工具要考慮數(shù)據(jù)遷移過(guò)程中數(shù)據(jù)漏傳、斷點(diǎn)續(xù)傳、及數(shù)據(jù)重復(fù)問(wèn)題，還要考慮數(shù)據(jù)質(zhì)量檢驗(yàn)問(wèn)題。保證數(shù)據(jù)以正確格式導(dǎo)入新的應(yīng)用系統(tǒng)。數(shù)據(jù)遷移還會(huì)遇到操作系統(tǒng)異構(gòu)、操作系統(tǒng)異構(gòu)、字符集異構(gòu)等問(wèn)題，做好充分測(cè)試工作，確保數(shù)據(jù)遷移一次成功，不影響業(yè)務(wù)運(yùn)作。

⑶遷移計(jì)劃制定。遷移計(jì)劃要制定合理周詳，要在測(cè)試環(huán)境中對(duì)計(jì)劃進(jìn)行預(yù)演，記錄每步工作時(shí)間，通過(guò)充分試驗(yàn)后，安排正式實(shí)施計(jì)劃。

⑷遷移數(shù)據(jù)準(zhǔn)備。準(zhǔn)備工作完成后，通過(guò)遷移工具導(dǎo)出數(shù)據(jù)，并對(duì)數(shù)據(jù)進(jìn)行質(zhì)量檢驗(yàn)。

⑸遷入新系統(tǒng)。通過(guò)遷移工具把數(shù)據(jù)導(dǎo)入新的系統(tǒng)，并對(duì)系統(tǒng)初始化，包括建立索引、檢查視圖、存儲(chǔ)過(guò)程等的有效性。⑹檢查遷移結(jié)果。對(duì)新數(shù)據(jù)庫(kù)進(jìn)行全面檢查，如果合格遷移工作完成，負(fù)責(zé)調(diào)整計(jì)劃后重復(fù)以上工作。

⑺起動(dòng)新系統(tǒng)。數(shù)據(jù)檢查無(wú)誤后，起動(dòng)新系統(tǒng)，觀測(cè)新系統(tǒng)運(yùn)轉(zhuǎn)情況。

⑻數(shù)據(jù)整合。針對(duì)學(xué)校各個(gè)應(yīng)用系統(tǒng)的情況，需要同步的原有應(yīng)用系統(tǒng)例如教務(wù)信息管理系統(tǒng)、人事管理系統(tǒng)、圖書(shū)管理系統(tǒng)、辦公系統(tǒng)、財(cái)務(wù)系統(tǒng)等。

2 數(shù)據(jù)整合策略

當(dāng)被整合的應(yīng)用程序不提供任何API或客戶接口時(shí)，使用數(shù)據(jù)級(jí)集成，數(shù)據(jù)級(jí)集成是缺乏API的應(yīng)用程序唯一的選擇。數(shù)據(jù)級(jí)集成發(fā)生在學(xué)校相關(guān)系統(tǒng)的數(shù)據(jù)庫(kù)和數(shù)據(jù)源層，將數(shù)據(jù)從一個(gè)數(shù)據(jù)源移植到另一個(gè)數(shù)據(jù)源來(lái)完成數(shù)據(jù)集成。數(shù)據(jù)級(jí)集成通過(guò)數(shù)據(jù)復(fù)制或中間件工具來(lái)推動(dòng)在數(shù)據(jù)源之間的數(shù)據(jù)傳輸。所有集成數(shù)據(jù)均需遵循信息標(biāo)準(zhǔn)要求，或者數(shù)據(jù)本身符合信息標(biāo)準(zhǔn)，或者提供向信息標(biāo)準(zhǔn)轉(zhuǎn)換的映射關(guān)系。在數(shù)據(jù)集成上將現(xiàn)有系統(tǒng)的數(shù)據(jù)劃分為三大類：應(yīng)用數(shù)據(jù)、共享數(shù)據(jù)與外部數(shù)據(jù)。

應(yīng)用數(shù)據(jù)是與業(yè)務(wù)系統(tǒng)關(guān)系比較密切的數(shù)據(jù)。共享數(shù)據(jù)是業(yè)務(wù)系統(tǒng)提供的公共數(shù)據(jù)。業(yè)務(wù)系統(tǒng)需要維護(hù)其生命周期。外部數(shù)據(jù)是業(yè)務(wù)系統(tǒng)運(yùn)行時(shí)需要引用的外部數(shù)據(jù)。

這三類數(shù)據(jù)都會(huì)通過(guò)企業(yè)服務(wù)器總線平臺(tái)與主題共享庫(kù)和其他業(yè)務(wù)應(yīng)用系統(tǒng)進(jìn)行數(shù)據(jù)交換。針對(duì)這三種數(shù)據(jù)會(huì)采取不同的策略進(jìn)行數(shù)據(jù)集成：⑴外部數(shù)據(jù)集成。對(duì)于業(yè)務(wù)系統(tǒng)的外部數(shù)據(jù)視圖。建議采用數(shù)據(jù)訂閱的方式同步數(shù)據(jù)。業(yè)務(wù)系統(tǒng)將數(shù)據(jù)需求在企業(yè)服務(wù)總線平臺(tái)中注冊(cè)，當(dāng)訂閱數(shù)據(jù)出現(xiàn)更新的時(shí)候，由企業(yè)服務(wù)總線平臺(tái)主動(dòng)同步相關(guān)視圖的業(yè)務(wù)數(shù)據(jù)。⑵共享數(shù)據(jù)集成。對(duì)于業(yè)務(wù)系統(tǒng)中需要共享的數(shù)據(jù)。建議運(yùn)用適配器監(jiān)聽(tīng)數(shù)據(jù)變更，當(dāng)數(shù)據(jù)出現(xiàn)改變的時(shí)候，適配器會(huì)調(diào)用企業(yè)服務(wù)總線平臺(tái)的數(shù)據(jù)操作服務(wù)。該服務(wù)會(huì)在訂閱庫(kù)中查找數(shù)據(jù)訂閱的需求，找出相關(guān)的業(yè)務(wù)系統(tǒng)，然后主動(dòng)更新其外部數(shù)據(jù)的視圖。⑶應(yīng)用數(shù)據(jù)集成。對(duì)待不具有共享性的應(yīng)用數(shù)據(jù)。建議將其在可能的跨系統(tǒng)數(shù)據(jù)訪問(wèn)放在企業(yè)服務(wù)總線平臺(tái)中注冊(cè)，由平臺(tái)統(tǒng)一進(jìn)行管理。當(dāng)外部應(yīng)用需要獲取密級(jí)數(shù)據(jù)信息的時(shí)候，它必須通過(guò)企業(yè)服務(wù)總線平臺(tái)進(jìn)行數(shù)據(jù)服務(wù)查詢。在服務(wù)定位后，再通過(guò)企業(yè)服務(wù)總線平臺(tái)進(jìn)行數(shù)據(jù)查詢。平臺(tái)同時(shí)負(fù)責(zé)驗(yàn)證該外部應(yīng)用的安全身份。

總的來(lái)說(shuō)，應(yīng)用數(shù)據(jù)集成的核心思想是應(yīng)用企業(yè)服務(wù)總線平臺(tái)（ESB）將數(shù)據(jù)查詢，數(shù)據(jù)互操作與數(shù)據(jù)同步服務(wù)化并管理起來(lái)。使得各個(gè)應(yīng)用系統(tǒng)之間徹底解耦，提高系統(tǒng)的彈性與服務(wù)的可管理性。

3 數(shù)據(jù)集成期間原系統(tǒng)的運(yùn)行方案

在對(duì)原有應(yīng)用系統(tǒng)整合的過(guò)程中，學(xué)校需協(xié)調(diào)原應(yīng)用系統(tǒng)開(kāi)發(fā)商配合提供應(yīng)用/數(shù)據(jù)借口，并派技術(shù)工程師配合進(jìn)行系統(tǒng)整合工作。集成后，各系統(tǒng)登錄名更新為工號(hào)、學(xué)號(hào)，需通知到所有系統(tǒng)用戶，避免用戶混亂。各應(yīng)用系統(tǒng)集成前應(yīng)做好各自系統(tǒng)數(shù)據(jù)備份，確保數(shù)據(jù)安全。

[參考文獻(xiàn)]

[1]齊少蕾，林慧蘋(píng).一種適應(yīng)SaaS多租戶模式的數(shù)據(jù)遷移方法.計(jì)算機(jī)工程與應(yīng)用，2011，（32）：65-70.

[2]劉金玲，默蓉.基于元數(shù)據(jù)整合的信息資源共知體系建設(shè).成都理工大學(xué)學(xué)報(bào)（社會(huì)科學(xué)版），2013，（6）：114-117.