張敏
(遼寧宇鑫建設工程有限公司,遼寧沈陽 110000)
現階段,在大數據的影響下,我國社會經濟與科學技術得以快速發展進步,同時,大數據處理技術的優勢開始在各個領域得以展現。特別是在數據的存儲和分析方面表現的尤為突出,通過大數據處理技術可有效解決測繪地理信息檔案管理問題。
現階段,相對專業的資料檔案管理部門主要負責地理信息檔案的管理工作。在檔案管理過程中主要存在以下幾方面的問題。
其一,檔案數據量過大,現如今的檔案管理還是紙質文檔和電子文檔相結合的方式進行存儲。就本單位而言,已存檔的省內地理信息相關的文檔就有400TB,有與項目相關的一些矢量數據、相關的影像數據、元數據和相關的紙質版資料等等,并且數據量還在以每天100GB的速度增長[1]。
其二,檔案數據結構過于復雜,測繪地理信息數據不僅包含結構化數據還包含非結構化數據,比如測繪項目的DOM(數字正射影像圖)數據、DEM(數 字高程 模型)數據、DRG(數字柵格地圖)數據、DLG(數字線劃地圖)數據和三維立體模型等等,從而對數據的檢索帶來一定難度。
其三,為數據安全性較低,由于數據量大且格式不統一,而且有的矢量數據還涉及到保密,不能進行集中存儲,因此只能進行分散管理,數據安全也無法得以保障,很容易出現數據孤島。
上述問題對測繪地理信息管理工作帶來了一定的困擾,借助于大數據處理技術方能解決這些問題。
1.大數據處理技術應用于地理信息檔案管理的重要性
當前,測繪地理信息服務需求爆發式增長,大數據處理技術的使用優勢,已廣泛應用于自然資源、水利水電、城市交通、電力電網、管線管網、軍事和許多其他領域,并發揮著更重要的作用,給測繪地理信息檔案管理部門帶來了重大挑戰和更大的發展機遇。大數據處理技術在測繪地理信息檔案管理中的廣泛應用,有利于促進地理信息檔案管理部門的不斷進步和高效運作,隨著地理信息技術突飛猛進的發展,越來越多的地理信息數據檔案需要存儲,而且地理信息數據檔案具有數據量大、生產成本高、技術含量高和涉密性的特點,它不僅是國民經濟建設所必需的基礎數據,而且還具有很高的應用價值和廣泛的應用需求,這是目前我國地理信息檔案管理部門應該廣泛關注的問題。在測繪事業轉型升級的今天,大數據技術應用于地理信息檔案管理的檢索引擎中,取得了首戰告捷的應用效果,它不僅可以為各行各業快速準確的提供有實用價值的信息,而且大數據技術也增強了自身的靈活運用,為今后的地理信息檔案管理部門高效的工作提供更強的技術支持[2]。
2.省級地理信息檔案資源大數據處理平臺的創建
測繪地理信息檔案包含的內容琳瑯滿目,如全國土地利用現狀數據庫成果、各類工程測量成果、大地測量成果、無人機航測成果、地形圖制圖成果、地理國情普查與監測數據庫成果、海洋地理信息數據采集成果、行政區劃數據成果、房產測量成果以及其他地理信息檔案等等。在這之中,除了比如坐標成果信息和坐標系統的結構化數據外,還有大量的非結構化數據,例如:文本、表格、圖片、光盤、硬盤和HTML等[3]。特別對于歷史地理信息檔案而言,由于年代久遠,有大量的紙質版檔案和紙質版地形圖等,由于測繪地理信息檔案具有保密性和完整性,測繪地理信息檔案還包含屬性特性、空間特性、精度特性和時間特性等,因此有的測繪地理信息檔案基本不具備數字化程度,在這之中勢必存在大量非結構化數據。因此,針對大量非結構化地理信息檔案數據可以選擇借助于大數據處理技術構建出省級地理信息檔案資源管理大數據技術處理平臺。
3.深入挖掘測繪地理信息檔案資源數據
現階段,在科學技術快速發展的推動下,測繪地理信息業務檔案利用正在發生著根本的改變,人們對相關測繪地理信息數據的需要日益旺盛,很多塵封已久的先進測繪技術得以廣泛應用,能夠獲取到地理信息數據的途徑越來越多,相關聯的測繪地理信息檔案管理也就越來越多,加之多年來日益積累的數據檔案。若要在這些測繪地理信息檔案中通過人工查找的方式挖掘出有價值的信息數據是很難實現的,借助于大數據處理技術則能夠實現[4]。在大數據處理技術廣泛應用的過程中,其核心為數據分析,靈活多維度的分析,不同數據多層次下鉆,滿足多領域數據的分析需要,比如:地圖數據可視化、宏觀房地產商圈智能分析、城市地名和道路名稱實時更新等。在測繪地理信息檔案管理部門服務過程中,可利用大數據應用技術的數據挖掘和知識發現對數據進行深入分析。在大數據相關技術的共同作用下,對測繪地理信息所存在的多元異構數據進行采集、集成、清洗、分析和存儲,從而形成一種便于分析的數據模式,進而將其應用在數據文件系統的倉庫中,逐步形成完整的測繪地理信息檔案大數據處理平臺后,可以對地理信息檔案進行不同層次的加工重組,以達到最有效地開發利用信息資源的目的,使其具備數據挖掘能力。最后,利用相關知識圖譜,應用ES搜索引擎,實現數據的高質量搜索,為用戶提供出更加有深度且更加準確的信息。
綜上所述,大數據處理技術的優勢能夠在測繪地理信息檔案管理中被充分展現出來,不僅因為大數據處理技術在測繪地理信息檔案管理中應用的重要性,還借助于大數據處理技術能夠創建省級地理信息檔案資源大數據處理平臺并深入挖掘測繪地理信息檔案資源數據,推動提升測繪地理信息檔案管理工作的質量和效率。