張 海
(中山大學新華學院,廣州 510520)
隨著現代信息技術和互聯網技術的不斷發展,信息網絡已經全面滲透到人們生活的各個方面,人們的工作和生活已經完全離不開現代信息科技和計算機技術。在地質調查工作中,大數據集成服務的框架和體系已經基本建立,當前的大數據處理框架中,大量使用了現代的大數據文本搜索技術,機器人學習與數據挖掘等技術。這些技術對于地質調查工作的發展,產生了重大的推動作用,但還遠遠不能滿足現狀。地質調查工作是一項十分復雜且重要的工作,工作中需要處理的數據十分龐大,也十分復雜,所以,如何有效利用數據,實現數據的價值,提升服務技術的覆蓋率,真正發揮其作用,是人們關注的焦點問題。
數字填圖包括野外地質調查數據獲取技術及其成果一體化描述、組織、存儲、集成和發布,能完成野外手圖、總圖、材料圖、地質圖等數據的儲存、交換和傳遞。并且對日常工作進行梳理,建立完成的數據庫,強調地質圖和三維地質模型等產品的價值,注重這些產品的不斷更新和發展。在地質調查中,數據初始來源于地質人員的直接觀察和思考,野外地質調查數據的獲取技術是數字填圖技術的核心,而地質調查與野外填圖數據的匯總,在數據模型中對相應的數據進行分析,提高野外地質勘查路線規劃的定量化描述,工作的精準度得到顯著提升,改變了傳統的數據采集的空間定位和采集方式。在空間數據采集和處理方面,以數據編稿原圖為基礎,保證模型中的非結構化的綜合數據能不斷被革新,完善和充實數據。地址三維模型主要是對地址填圖的PRB過程進行羅占,構建雙重的三維模型技術。數字填圖數據集成服務技術,在地質調查工作中的應用發揮著重要的作用,數據模型的構建,改變了傳統的工作模式,完善大數據環境下,局域網數據集成處理,并很好的實現了數據的交互和傳遞。
地質調查中,網絡大數據處理的基本框架已經建立并逐漸完善,在大數據處理流程中,涉及的大數據框架的數字填圖數據技術的應用,是十分重要且關鍵的一項技術,也是流程中非常重要的一個環節,其應用優勢十分明顯。大數據處理使用Avro作為數據序列化的重要工具,對已有的地質勘查數據結果進行轉化,方便數據的相互傳遞,將其轉化為常用的格式,然后存儲到地調網中。為了不斷滿足高并發、低延時、交互式處理的需求,需要一個分布式的并行存取的數據庫,最終實現對數據資源的有效組織和管理。數字填圖數據集成服務系統中,就是利用大數據處理的規范化流程,選用分布式存儲工具,構建一個面向列的分布式數據庫,能對大數據進行更精準的處理,能實現大規模的隨機、實施查詢和訪問,數據的共享變得更加方便,自如的進行大數據的存儲,對數據結構化和非結構化的存取,也是非常規范的,整個信息網格平臺,大數據處理的種類繁多,而集成服務技術,能將同類型的數據組織在一起,以便與數據的訪問,便于數據分析和挖掘,其技術應用效果明顯。
數字填圖數據集成服務技術在大數據環境中,應用于地質調查工作中,是一項重大的工作突破,也是拓展工作服務領域的重要舉措。但是,面對大數據的復雜環境,工作本身的復雜性,數字填圖數據技術集成服務管理成為一項重要的工作任務,如何提升集成服務數控的有效管理,在保證數據被合理利用的同時,還能保證數據的安全
大數據環境推動了現代技術不斷走向集成化和數字化,數字填圖數據集成服務技術就是時代發展的重要產物,改變了數據處理方法,不斷完善數據挖掘和開發的技能。為了進一步實現數字填圖數據集成服務技術的應用和推廣,必須加強集成服務技術的應用管理,注重大數據的處理框架的構建和管理,全面對大數據處理進行規范化管理。
[1] 康瑛石,鄭子軍.大數據整合機制與信息共享服務實現[J].電信科學,2014,30(12):97-102.
[2] 張秀東.電力調控大數據集成及管理技術研究與應用[D].哈爾濱工業大學,2016.
[3] 王藝霏,許大衛,李賢等.基于服務匹配的電網大數據服務資源整合技術[J].電子技術應用,2016(z1).
[4] 余小高,余小鵬.基于Web服務、移動代理和本體的教育大數據集成研究[J].信息通信,2017(9):35-38.
[5] 謝榕,劉亞文,李翔翔.大數據環境下衛星對地觀測數據集成系統的關鍵技術[J].地球科學進展,2015,30(8):855-862.