云計算下數據挖掘平臺架構及其關鍵技術的探索

劉建東

摘 要：云計算作為一種新型的信息化計算技術，已經被很好地應用于現階段的生活當中，而隨著大數據時代的不斷推進，“數據挖掘”成為了當下的一個研究重點。借此，立足于信息化時代背景，對云計算下數據挖掘平臺架構及其關鍵技術進行了深入的研究。

關鍵詞：云計算；數據挖掘；平臺架構；分布式存儲技術

中圖分類號：TP311.13 文獻標識碼：A DOI：10.15913/j.cnki.kjycx.2017.06.128

伴隨著改革開放的不斷深入，我國進入21世紀之后，綜合國力有了全面的提升，無論是經濟方面，還是科技方面，都取得了很大的進步與發展。我們希望可以通過不斷地發展經濟與科技來使社會發展獲得更大的動力。經濟全球化的大趨勢在不斷推動社會發展的同時也使我國邁進了信息化時代，而信息化的不斷深入又使得大數據時代“如期而至”。云計算憑借其高強的存儲能力與計算能力受到更多人的青睞。因此，對云計算下數據挖掘平臺架構及其關鍵技術的探索有著鮮明的現實意義。

1 數據挖掘技術與云計算技術研究

1.1 數據挖掘技術

所謂的“數據挖掘技術”，主要是針對數據研究的一種新型技術。隨著計算機網絡技術的發展與移動互聯技術的普及，現階段生活當中，每天基于網絡環境所產生的虛擬數據已經十分龐大。在大數據的時代背景之下，數據挖掘技術應運而生。而所謂的“數據挖掘技術”，其主要的研究對象便是眾多的數據，工作內容便是在眾多的數據當中“挖掘”出對自身有用的知識信息，然后加以利用。筆者習慣將這一過程看作一個“廢物利用”的過程，其研究的范圍將會涉及到人工智能等高尖端領域，而其內部的技術包括預測分析等。

1.2 云計算技術

云計算技術可以說是信息化的必然產物，但是其一經出現便被廣泛地應用于企業發展之中，尤其是企業內部的財務管理，應用到的云計算技術是最為常見的。因此，云計算技術往往會被冠以“商業計算模式”的稱號。但是從其本身的優越性來說，云計算技術可以被應用于社會當中的各個領域。簡單來說，云計算技術的主要計算原理就是將各種計算任務按照一定的要求與規律分布在計算池當中，然后各個計算系統可以根據自身的需求獲取相應的計算能力、存儲空間及信息服務。這樣就保證了計算任務的快速與高效，并且其內部大量的存儲空間也是其被廣泛應用的原因之一。

總的來說，云計算技術有著鮮明的優越性，尤其是在數據的處理過程當中有著眾多優勢。因此，云計算環境之下的數據挖掘技術將會有一個很好的發展前景。

2 云計算下數據挖掘平臺架構

就云計算下數據挖掘平臺架構來說，其主要還是應該集中于云計算技術進行研究。而云計算背景之下的分布式存儲技術與分布式計算技術將會促進傳統的數據挖掘平臺開始新的變革之路。本文所建立的云計算下數據挖掘平臺架構主要應用了分層設計的理念。在實踐過程當中，本文將其分為了3個層次，其最上層為云計算支撐平臺，中層是數據挖掘能力層，最底層是一個數據挖掘云服務層。

2.1 云計算支撐平臺

簡單來說，云計算的支撐平臺其實是云計算技術支撐平臺，云計算的支撐平臺將會為數據挖掘平臺提供分布式的數據存儲技術、分布式計算技術、數據庫存儲技術和必要的云計算技術。

2.2 數據挖掘能力層

數據挖掘能力層主要提供的能力是數據挖掘的基礎能力，其中包含算法服務管理能力、調度能力、數據并行框架處理能力和數據挖掘的云服務能力。同時，這個層次擁有相關的第三方挖掘工具的接入。這在設計過程當中是被允許的，例如Weka、Mathout等相關的分布式法庫就是第三方的挖掘工具。

2.3 數據挖掘云服務層

數據挖掘云服務層主要是提供數據挖掘的云服務，其中，服務能力的封裝接口樣式可以是多種多樣的，例如簡單常見的Webservice等。在這個平臺當中，可以根據不同類型的服務問題，為數據業務配置、組裝相應的數據挖掘云服務。

3 云計算下數據挖掘平臺關鍵技術研究

3.1 分布式存儲技術

分布式存儲技術主要被應用于數據挖掘當中，因為在對數據進行“挖掘”的過程當中需要應用到分布式存儲技術。而分布式的存儲技術在很大層面之上主要應用的是分布式存儲系統。這種存儲方法可以實現對大容量數據的存儲，并且在存儲的過程當中將會實現存儲位置的明確、存儲分類的清晰等。這種存儲方式不僅可以保證數據挖掘平臺的穩定，還可以保證用戶的使用體驗。

3.2 虛擬化并行云計算技術

虛擬化并行云計算技術的主要優勢表現在高效率上。雖然其在實際的應用過程當中并沒有分布式存儲技術的應用射頻大，但是其也是云計算數據挖掘平臺不可缺少的環節之一。其應用主要體現為在一些大數據的處理當中，在云計算的運行環境中，其將虛擬技術和云計算技術進行有力的結合，然后進行數據挖掘服務。它主要是對數據進行重復性的挖掘，然后幫助用戶考察。這種方式可以降低數據分析時的出錯率，還可以保證數據挖掘的正確率。

4 結束語

云計算技術作為信息化時代的必然產物，在很好地推動信息化普及的過程當中具有鮮明的現實意義，同時對促進社會發展也起著重要的作用。因此，就現階段的發展情況來說，無論出于何種原因，處于何種發展階段，社會、國家以及其中的各個領域的發展都不能不結合時代特色。綜上所述，云計算背景之下的數據挖掘平臺是云計算技術與數據挖掘技術的強有力的結合。雖然現階段在對該方面的研究中仍然存在一些問題，但是技術發展本就不是一蹴而就的，我們應該堅實地走好每一步。

參考文獻

[1]丁巖，楊慶平，錢煜明.基于云計算的數據挖掘平臺架構及其關鍵技術研究[J].中興通訊技術，2013（01）：53-56，60.

[2]溫善毅.網絡教學平臺中數據挖掘云系統設計與開發[D].南昌：江西師范大學，2015.

[3]薛良飛.云計算在新型信息化系統中的綜合研究[D].濟南：山東大學，2013.

[4]王慧.基于Hadoop的并行挖掘算法的研究[D].北京：首都師范大學，2013.