信創及X86多云平臺數據整合技術在煙草信息化中的應用探究

高煒　周鑫

摘? 要：煙草信息化建設一直都有一個難以突破的點，那就是信息資源共享，如今信創及X86多云平臺為這一難點的突破提供了機會，云平臺是信息資源共享的一大渠道，煙草公司各部門都可以在這一平臺上進行資源分享與獲取，這樣可以有效打破資源隔閡，提高煙草信息管理效能，倘若信創及X86多云平臺可以廣泛的應用到煙草行業當中，那么煙草行業就可以實現數據共享，一個公司當中從生產到銷售的各個管理數據都可以明確的展示出來，也可以通過信創及X86多云平臺進行數據分析，如此一來，煙草公司面對煙草生產與銷售決策可以得到充分的現實數據支持，有利于煙草公司的科學管理，從而推動煙草行業各公司實現共收共贏。

關鍵詞：信創云平臺;X86多云平臺;數據整合技術;煙草信息化;應用探究;時間戳;數據抽象層應用

一、引言

我國經濟飛速發展，這使信息化技術也水漲船高，相關的科技水平不斷進步，直接推動了各種行業之中的信息化技術朝著十分喜人的方向發展，為了進一步推進煙草行業信息化的進程，使得煙草行業管理模式更適合二十一世紀的發展需求，特別提出煙草行業運用云平臺進行數據整合。這是由于當今信創及X86多云平臺發展非常迅速，提供基于“云”的服務，供開發者創建應用時采用。顧名思義，信創及X86多云平臺允許開發者們或是將寫好的程序放在“云”里運行，或是使用“云”里提供的服務，或二者皆是。而現在許多煙草行業經過幾年的信息化建設，已經基本實現煙草行業的信息化應用，但是由于煙草行業這一行業特殊性，各個部門在正常工作當中，由于煙草生產鏈、業務對接和其他相關業務處理，導致煙草公司系統當中存在許多積累數據，這些數據主要有兩種，第一種是生產數據，第二種是管理數據，無論是哪種數據由于存在量巨大而且紛繁復雜，導致數據分析工作雖然可以按部分順利完成，但是缺少對于整個煙草公司的分析。導致這一現象發生有多種因素：第一種因素就是最初為了快速推進信息化建設，所以在初始建設階段，只求速度，沒有考慮之后發展，缺乏統一的規劃與設計，第二種因素就是煙草公司雖然信息化建設并不落后，但是由于存在多個系統，系統與系統之間信息共享能力差，導致存在信息孤島問題，許多有價值的原始煙草信息資料由于以上原因無法被整合利用，許多可以進行清理的原始煙草信息資料，也由于以上原因無法得到徹底清理，進一步加重了煙草信息系統的負擔，為了解決這一問題，可以將信創及X86多云平臺引入到煙草公司工作系統之中，不僅可以解決以上問題，還可以幫助煙草公司更便捷的查詢與統計全轄區生產數據，進一步輔助煙草公司進行宏觀決策。

二、數據整合存在的問題

相對其他行業，煙草行業信息化程度較高，但是數據整合問題還有幾方面叩待解決，可以大概概括為五點：

第一點是跨系統的數據共享問題。煙草公司由于業務需要一般都會擁有多個系統，但是系統之間的數據如果無法順利共享的話，那么會給煙草公司數據資源的整理與分析，帶來很大的弊端目前繼續解決就是不同系統之間數據邏輯如何形成正確性校驗，如何更好的在不同系統之間對于數據進行監控。

第二點是不同軟件重復采集相同數據。煙草公司由于業務需要，往往會開設多個相應軟件，但是應用軟件的用戶可能存在重復問題，于是對于用戶信息的采集經常會出現重復現象，對于煙草業務的記錄，也會出現重復記錄的情況，不僅如此對于信息的采集，還會出現一致性差的問題。

第三點是用戶查詢實時數據困難。一般煙草用戶在煙草公司的軟件或者系統上無法直接查詢實時系統，而且無法得到需要查詢的數據全貌，這給煙草銷售業務帶來了很大的影響。

第四點是煙草公司進行決策時缺少系統分析支撐。因為目前許多煙草公司都沒有建設綜合管理系統，這一系統的作用就是輔助決策，可以對煙草公司的許多數據資源進行綜合分析，從而得出結果支持公司決策。

第五點是數據聚合困難。因為煙草行業的公司由于業務需要通常會應用多個系統，但是系統之間由于體系和架構不同，相互之間存在隔閡，而且物理設計上也有阻礙系統共享的設計，因此往往會存在數據聚合實現困難的問題。

面對以上五點問題，煙草行業在急需一個解決辦法，最好是有一個平臺幫助煙草行業各系統之間的數據進行統一的處理與分析，另外，煙草公司也由于存在許多系統導致共享信息資源性能較差，許多有效數據難以利用，海量數據無法清理、整合與匯總。與此同時，信創及X86多云平臺擁有較為先進的數據整合技術，可以幫助煙草公司分析利用已有的海量數據，將不同系統之中的數據進行篩選與整理，雖然許多應用系統都是面對不同業務進行特殊建造的，因此許多管理系統和數據結構與代碼都存在差異，但是信創及X86多云平臺數據整合技術可以將這些差異進行簡化，從而高效的利用已有數據資源，綜合分析，從而輔助公司進行決策，也便于煙草公司對數據資源的統一管理。

三、數據整合技術中的數據抽取研究

煙草公司由于存在許多系統，所以數據整合當中對于數據抽取技術要求是非常重要的，為了更好的實現數據抽取，從而更好的利用數據資源，一般來說會采用仿照數據倉庫建設的步驟進行數據抽取與利用，首先將目標系統當中的數據進行抽取，其次，對于抽取的數據進行再次清洗，最后得到的數據，結果就是可以直接利用的數據。一般要實現這兩個步驟需要應用ETL工具進行操作，在這一過程當中，面對不同的系統、不同的數據來源都要依照相同的操作標準進行抽取、清洗與轉換操作。同時還要注意的一點就是對于數據的增量抽取。也是非常重要的，因為一般來說，煙草公司的數據信息量是非常巨大的，面對如此多的數據量，常見的很多數據庫信都是無法完成數據處理的，創及X86多云平臺為了解決這一問題特意提出了三種應對方式：

第一種應對方式是對于數據增量的抽取無論是哪個系統、哪個來源都采用基于時間戳抽取的方式。

第二種應對方式是對于數據增量文件進行掃描，在這一過程當中可以建設關于關系數據庫的歸檔日志。

第三種應對方式就是在數據增量的處理前后對于映象進行對比操作。

當然以上幾種方法各有利弊，創及X86多云平臺在實際應用過程之中，主要考慮的是基于時間戳的數據增量抽取，想要實現基于時間戳的數據增量抽取，那么在數據處理之前就應當保證以下四點不會影響數據抽?。?/p>

第一點影響因素是增量抽取的標識唯一性，如果抽取數據增量過程之中有多個標識，那么對于數據抽取來說是混亂的抽取方式，為了避免這種問題的產生，只將時間屬性作為抽取唯一標識。

第二點影響因素是索引字段，索引字段可以有效避免遭遇性能瓶頸，抽取過程中，我們也盡可能的對于大事務從大化小的處理，然后對于數據總量進行抽取。

第三點影響因素是數據庫和數據倉庫的連接，為了順利的將抽取到的喲數據進行存儲，應當在抽取之前建立好數據倉庫進行數據存儲，而且應當采取直接的連接方式，以免在數據儲存過程中產生誤差。

第四點影響因素就是盡力減少對于數據的操作處理，因為一般原始數據是最能反映煙草公司業務情況的數據，如果對于抽取到點數據進行多次的轉換和清洗動作，那么難免會產生誤差。

四、云原生

（一）云原生存儲

云原生存儲在數據、控制雙平面提升存儲使用效率與安全性。云原生存儲是指通過整合多種云存儲形態，完整匹配 Kubernetes 環境下的存儲聲明機制，提升存儲的質量、穩定性及安全等能力，以滿足不同應用場景下的存儲使用需求的新型存儲解決方案。當前主要有兩種方式來構建云原生存儲能力：

一是對已有存儲系統的對接改造。這種構建方法適用于已經具備可用存儲系統的公有云或私有云環境，通過標準的CSI接口來對接各類存儲，通過完善聲明式接口和增強原有存儲系統能力（擴展性、性能、安全性、穩定性等）來構建云原生存儲系統。這種構建方式可以復用云計算基礎設施，無需重復發明輪子。二是面向云原生場景設計全新的存儲系統，云原生存儲系統通?；诰唧w平臺存儲層（塊或者文件）再構建一層分布式存儲層，屏蔽了不同平臺的存儲層差異，提高了應用部署的靈活性，使存儲系統可以像云原生應用一樣能被部署到任意平臺上。

煙草行業公司由于業務需要，往往存在許多應用，應用與應用之間如果要實現通信信息集成那么就需要中間連接器，可以在創及X86多云平臺之中的消息中間件平臺身上連接連接器，這樣做的目的是將稅務內部不同系統進行連接。如果要實現在不同企業之間的稅務部門連接，那么就應當增加B2Bi建立連接，B2Bi是應用在不同企業之間特殊的連接器，可以有效的建立企業間聯系，也可以在同一企業內，不同部門間建立上下級聯系，同時在消息傳輸過程中，數據幾乎零誤差，可以有效避免因為數據傳輸問題帶來的數據損耗或者誤差缺陷，避免數據丟失。同時創及X86多云平臺的連接器也可以保證應用之間同步通信，沒有延時誤差，傳輸效率高，應用間異步通信也可以得到很好的保障，系統之間的耦合度弱，可以支持并發數據的良好傳輸，數據一致性和完整性不會被破壞。最后應用層之間的通信集成還可以支持集群服務，系統容錯性能好，負載均衡不會產生偏差。

（二）云原生服務器

云原生服務器是指基于專用硬件、芯片，利用軟硬融合虛擬化等技術將負載或任務轉移，提升資源使用效率、用戶體驗和整體性能的新型服務器。云原生服務器采用軟硬一體的硬件卸載和加速技術，通過專用的硬件，將原來在物理機上運行的網絡、磁盤、管控等負載，完全下沉到定制的硬件上，物理服務器上的資源可以被最大程度的釋放出來，從而提升資源的使用效率，降低成本。同時，通過使用 ASIC或者 FPGA 等專用芯片來處理存儲、網絡等任務，可以使用較低的成本將性能提升數倍甚至一兩個數量級。此外，軟硬融合的虛擬化技術能夠支持裸金屬形態的計算產品，使其同時具備虛擬機的使用體驗和物理機的強大性能。

云原生服務器不僅具有虛擬機的靈活性和彈性，同時具備物理機的一切特性和優勢，因此也具備再次虛擬化的能力，而不用擔心嵌套虛擬化帶來的性能開銷。

（三）云原生技術架構

云原生技術架構目前看來是較為先進的技術加購形式，有如下特點：

（1）服務自制與故障自愈能力：云平臺的服務形式如果全部依靠工作人員維護的話是非常龐大的一個工作量，為此實現服務自制即是云原生技術的一個技術提升，另外又是減輕維護與運行人員的有效革新。

（2）極致的彈性能力：不同于虛擬機分鐘級的彈性響應，以容器技術為基礎的云原生技術架構可實現秒級甚至毫秒級的彈性響應。

（3）大規?？蓮椭颇芰Γ嚎蓪崿F跨區域、跨平臺甚至跨服務商的規模化復制部署能力。

五、煙草行業應用云原生未來發展趨勢

（一） 應用服務 Serverless 化，更加聚焦業務的核心價值

作為云原生技術未來的演進方向，無服務器架構技術（Serverless）也從觀望逐漸落地，據Gartner 的過往預測數據顯示到2020年全球將有20%的企業部署無服務器架構。Serverless 將進一步釋放云計算的能力，將安全、可靠、可伸縮等需求交由基礎設施實現，使用戶僅需關注業務邏輯而無需關注具體部署和運行極大地提高應用開發效率。同時這個方式促進了社會分工協作，云商可以進一步通過規?；?、集約化實現計算成本大幅優化。

（二） 從資源云化到業務云化，最終趨于全面云原生化

企業上云的初期階段是把現有 IT 系統搬遷到云上，更多在虛擬化層面的改造工作，隨著云計算生態的蓬勃發展，原有的應用架構陳日，在擴展性、適配性、彈性伸縮、資源調度、開發運維等方面與云計算架構的優勢不四配，無法真正發揮云的價值。云原生技術通過標準化資源，輕量化彈性調度等特征，應用場景較為廣泛，隨著技術和生態不斷成熟和完善，有效緩解企業上云顧慮，拉動全行業的上云程度。

六、結語

通過創及X86多云平臺可以有效完成我國煙草信息系統數據整合問題，無論是客觀影響還是建設規劃造成的數據共享困難，專網系統過強，煙草公司橫行系統薄弱都可以得到有效的解決，煙草公司專網之間數據隔閡現象將會被打破，我國煙草行業應用創及X86多云平臺將會在數據處理與決策方面得到更進一步的發展，決策結構將會變得更加科學化，動力結構將會變得更加生動化，信息結構將會變得更加嚴謹化，共同協作可以促進煙草行業信息管理的統一化，這樣做不僅可以提高煙草公司近期局部效益，而且從煙草行業信息化發展的整體來看，使用創及X86多云平臺可以促進煙草行業長遠發展。

參考文獻：

[1] 苑志剛.空間信息大數據管理及其可視化技術在地下管線管理平臺中的應用[J].價值工程，2020：245-246.

[2] 黃彬.大數據技術在計算機網絡信息管理中的應用研究[J].衛星電視與寬帶多媒體，2020：77-78.

[3] 葉峰，張一揚.質量管理信息化平臺在再造煙葉行業的應用研究[J].中國管理信息化，2020：86-91.

[4] 尹鵬程，凌海峰，李淑貞，陳新偉，馬艾平.時空信息云平臺技術在國土資源信息化中的應用探討[J].國土資源信息化，2017

[5] 尹鵬程，凌海峰，李淑貞，陳新偉，馬艾平.時空信息云平臺技術在國土資源信息化中的應用探討[J].國土資源信息化，2017