胡大川++錢誠++韓戴鴻++鄔顯豪++徐彬凌
摘 要
本文從云計算和大數據概述入手,分析了云計算與大數據的關系,之后闡明了電子政務大數據管理的重要意義,最后以云計算為基礎,探討了電子政務大數據的管理模式,旨在更好的讓電子政務數據服務于政府管理和相關服務工作。
【關鍵詞】云計算 電子政務 大數據 管理
相關數據顯示,政府部門集成數據占社會數據總量的九成以上,大數據時代下,政府部門數據呈現多樣化的發展趨勢,不僅涉及到在數據庫存儲的結構化數據,還涉及到大量的半結構化和非結構化數據,如何對電子政務數據進行有效的處理是當前政府部門工作的重中之重。基于以上,本文以云計算為基礎,探討了電子政務大數據管理的相關問題。
1 云計算與大數據概述
云計算是以互聯網為基礎的一種相關服務增加、使用和交付的模式,是并行計算、網絡計算以及分布式計算融合發展的產物,其主要目的是通過互聯網來更好的實現數據拓展、管理、計算和存儲。
大數據是種類繁多、數量巨大以及類型復雜的數據,大數據的目的是挖掘海量數據中的信息和價值,其著眼于數據。電子政務大數據則指的是公務機構在管理和服務過程中產生的大數據。
2 電子政務大數據管理的意義
(1)大數據的包容性能夠有效打破政府各部門之間以及政府與社會大眾之間的信息壁壘,有效避免了信息孤島現象發生,實現數據共享,為政府管理提供信息支持,提升政府管理能力和公共服務能力。
(2)對電子政務大數據的管理能夠實現對社會輿情和相關危機的動態監測,并對其進行深入分析,這對于提升政府的危機預警能力和危機應對能力有著重要的意義。
(3)對電子政務大數據的管理能夠轉變政府決策模式,以實證為基礎制定相關決策,對于提升政府的決策有效性和決策效率至關重要。
(4)對電子政務大數據的管理能促進數據的開放性和流動性,政府管理的過程中能夠實現對大數據的深度挖掘和廣泛應用,從而提升政府管理和公共服務的開放性與透明性。
3 基于云計算的電子政務大數據管理
傳統電子政務數據管理主要為對數據的收集和存儲,在云環境下,憑借著強大的云計算能力,能夠實現對電子政務大數據的分析和挖掘,創新管理形式和管理模式,從而更好的讓電子政務大數據服務于政府的管理和決策.
3.1 數據采集
電子政務大數據采集不僅涉及到政府機構內部大數據的采集,同時涉及到政府機構之間數據的采集,一般有分布式采集和集中是采集兩種方式,二者有著各自的優點和缺陷,在云計算下,可以利用云計算分布式并行計算特點來將兩種采集方式整合,提升電子政務大數據采集效率。將電子政務大數據集中式采集模式應用到政府機構內部,將電子政務大數據分布式采集模式應用到政府機構之間,將一定數量的中心服務器設置在政府機構內部,作為集中式數據注冊機構,來存儲共享數據,采用分布式數據采集模式來組織各個機構服務器。
上文中提到,電子政務大數據類型有著多樣性的特點,因此需要以不同類型數據為基礎進行云計算分布式采集,實現數據的分類存儲。此外,可以借助云計算的擴展性和容錯能力來實現相似數據或相同數據的同構化,借助幾圈技術和虛擬化技術實現政府機構之間的對接和數據超級共享。
3.2 數據存儲
在云計算下,采用列式存儲方式來進行電子政務大數據的存儲,以屬性列為基礎,將數據存儲在列式數據倉庫中,不同屬性列數據分離開來,只需要查詢屬性列即可以實現數據投影,降低了系統損耗。在云計算列式存儲模式下,相鄰數據之間有著較高的相似性,壓縮率較好,數據的壓縮能夠降低系統輸出與輸出的開銷,這對于提升電子政務大數據倉庫的管理性能有著積極的意義。
3.3 聯機分析
聯機分析處理是電子政務大數據管理的重要方面,其能夠實現對數據的復雜分析和操作,從而為政府決策制定提供支持,其查詢效果十分直觀。基于云計算的聯機分析從綜合數據著手,能夠提供多維模型和多維分析方法來進行多維數據分析,讓政府決策者能夠更加全面的對電子政務大數據進行分析。基于與計算的聯機分析處理中的多維數據分析能夠與數據倉庫多維數據組織結合,互為補充,能夠實現大量數值計算,實現海量電子政務數據的處理。
3.4 數據挖掘
聯機分析能夠獲得數據表層信息,而對數據屬性內在關系以及隱含信息的進一步揭示則需要依賴于數據挖掘,基于云計算的電子政務大數據挖掘以分布式并行挖掘技術為基礎,相較于其他數據挖掘技術而言,基于云計算的分布式并行挖掘技術能夠對大規模數據進行挖掘處理,其挖掘能力更強,消耗時間更短。其將機器群看做是硬件數據池,能夠拆分并行任務,利用空閑機器來進行數據處理,這就能夠有效提升對數據的計算效率,且數據的無關性能夠促進計算集群的擴展。
3.5 數據可視化
電子政務大數據可視化是政府決策和管理服務的重要保證,在云計算下,多維非空間數據可以由圖像展示,更好的幫助用戶對數據含義進行理解,此外,形象的圖像能夠實現對檢索過程的指引,這就大大提升了檢索效率。發達國家對數據可視化十分重視,例如美國能源部門投資2500萬美元來進行數據可視化研究,更好的實現對數據管理,促進其環境研究計劃和核數據計劃的實現。
4 結論
綜上所述,在大數據時代下,對電子政務大數據加強管理是有著積極意義的,傳統的數據管理方式有著一定的局限性,難以充分發揮電子政務大數據的重要作用,本文提出了一種基于云計算的電子政務大數據管理模式,探討了電子政務大數據采集、存儲、聯機分析、挖掘和可視化等管理工作,旨在充分發揮電子政務大數據對于政府工作的重要服務作用。
參考文獻
[1]王書偉.大數據時代政府部門間信息資源共享策略研究[D].吉林:吉林大學,2013.
[2]趙志超.電子政務大數據系統應用云計算架構[J].計算機與網絡,2014(14):62-65.
[3]趙震,任永昌.大數據時代基于云計算的電子政務平臺研究[J].計算機技術與發展,2015(10):145-148.
[4]董凌峰,李永忠.基于云計算的政務數據信息共享平臺構建研究——以“數字福建”為例[J].現代情報,2015(10):76-81.
作者單位
常州市科技信息中心 江蘇省常州市 213000