哈密市大數據平臺建設初探

邵全民

摘要：本文從數據平臺的主要功能入手，初步解決了數出多門的矛盾局面，分析了“互聯網+政府部門”的迫切性，結合互聯網、云計算、大數據發展等相關政策，指出了建立橫向擴展到“邊”、縱向延伸到“底”的立體、多維的統計架構。詳細講述了平臺的“六大原則”：系統的安全性和穩定性原則、兼容性和可擴展性原則、可維護性原則、高效快捷性原則、易用和操作性強性原則，充分反映數據平臺的“應統盡統”的強大優勢。

關鍵詞：大數據平臺 部門統計 互聯網+統計 數據處理

中圖分類號：TP3 文獻標識碼：A 文章編號：1009-5349（2017）07-0061-01

隨著哈密經濟日新月異的發展，黨和政府了解經濟的發展趨勢更加緊迫，對統計調查數據質量也高度關注。統計數據對于宏觀戰略政策的制定、當前區情的分析尤為重要，但常規統計數據越來越不能滿足政府和人民日益增長的需求，建立一套融合各部門數據的處理分析平臺勢在必行。

2015年新疆維吾爾自治區統計局開始全面深化統計改革發展，全力推進現代統計體系建設，建立數據信息共享機制、構建新疆統計數據中心、積極探索大數據在政府統計中的應用。

2016年哈密市統計局通過深入學習領會自治區統計精神實質，實地考察成熟地區的平臺應用，確定建設哈密市統計大平臺。為了滿足目前及未來幾年系統穩定及擴展的需求，在建設本系統時本著統籌規劃、分步實施的宗旨進行整個系統的構建，主要遵循以下設計原則：

一、安全性原則

大數據的發展進一步擴大了信息的開放程序，隨之而來的訪問量也成幾何倍數的增長，系統平臺的安全性和數據安全是第一位的。（1）是防止APT（高級持續性威脅）攻擊，針對APT的攻擊特征難以提取、單點隱蔽能力強、攻擊渠道多樣化、攻擊持續時間長、攻擊空間路徑不確定等特點，系統平臺必須設計具備實時檢測能力的沙箱方案（原理是將實時流量先引入虛擬機或沙箱，通過對沙箱的文件系統、進程、注冊表、網絡行為實施監控，流量中是否包括惡意代碼）、異常檢測方案、全流量審計方案。（2）用戶訪問權限控制。平臺針對的用戶繁多，嚴格按照用戶需求和密級等級設定差異化訪問權限，不同級別的用戶訪問權限和密級程度都有所不同，管理者（ADMIN）為最高級權限：包括有登錄平臺訪問、修改平臺流程、平臺發布消息、設置下級權限的權利；次高級為部門管理者權限：包括登錄本部門窗口、錄入、修改、發布本部門信息權限；最低級權限只有上報錄入權限。

二、穩定性原則

一個系統的穩定性，通俗來說，就是它從安裝到加載啟動運行直到結束的整個過程盡可能不出現異常、錯誤。穩定的生存能力是體現一個系統的成功，所以平臺從開始設計架構、應用開發和初步演示到投放應用時，對系統結構、語言算法、邏輯條件、技術措施、軟硬件平臺和維護響應能力等方面進行全方位的統籌，確保系統較高的性能和較少的故障率。必要時可采用雙備份或支持異構服務器之間跨越廣域網的數據遠程實時復制。

平臺設計初期就準備了周詳的事前準備，并且分析平臺運行時可能受到最大沖擊程度和受沖擊后的恢復策略，結合目前最先進的信息技術，提出最佳的恢復方案，在系統備份計劃建立后，還反復假想測試，進行時時調整、改進，確保平臺運行的穩定性。

三、兼容性原則

統計數據共享平臺的宗旨是全方位覆蓋經濟數據提供部門（市統計局、發改委、國地稅、工商、經信委、質監、科技等），實現數據收集零死角，考慮到平臺現有和未來需要與其他相關上百個部門、系統的對接需要，在建設過程中已預先規劃好數據通信及共享接口的設計。

在經濟運行提供全面數據支持的同時，深入挖潛各級部門據業務需求，利用大數據技術，進行定制化的信息共享服務，提高數據利用率，提高工作效率，壓縮政府開支，降低行政成本，有效推動政務工作開展，提高政府部門決策的科學化水平、服務效率和社會管理水平。

四、可擴展性原則

軟件設計盡可能模塊化、組件化，并提供配置模塊和客戶化工具，使應用系統可靈活配置，適應不同的情況。系統的要素、編碼、功能和數據庫結構都必須易于擴充，為以后的功能擴展保留接口，以滿足系統進一步的發展和系統建設的需要。同時系統的升級充分考慮與現有各應用系統的版本兼容問題，盡可能保證系統有更長的生命周期。

為保證平臺的開放性，平臺構建中使用合適的軟件平臺，基于業界開放式標準，支持平臺建設中涉及的各種網絡協議、硬件接口、數據接口等二次開發，同時支持英文等常用外文版的編輯與發布，為未來的平臺擴展奠定基礎。

系統功能最大限度貼合客戶需求，系統在設計思想、系統架構、采用技術、選用平臺上均需要具有一定的先進性、前瞻性，考慮一定時期內業務的增長。

五、高效性、易用性原則

整個系統采用規范化設計流程和高效的系統架構，可有效避免數據冗余等現象發生，具有較高的運轉效率，從網絡、硬件、軟件產品的選型上確保平臺上的高效性，針對不同的處理邏輯，采用不同的先進技術和優化策略。提供友好的用戶操作界面，具備直觀易用的人機界面。對于復雜操作步驟，提供操作向導和聯機幫助。

責任編輯：楊國棟