董俊伶
?
網絡大數據的現狀及展望
董俊伶
國網新疆電力公司科技信通部,新疆 烏魯木齊 830000
網絡大數據時代越來越高要求著IT構架與計算機能力,當然網絡大數據的發展也帶給人們深入挖掘其價值功能更嚴峻的挑戰和巨大的機遇,同時這就表明加強對大數據的研究,概括其發展規律等將極具現實意義。因此,在分析網絡大數據發展現狀的基礎上,展望其未來發展前景。
網絡大數據;發展現狀;基本概述
近年來,云計算、互聯網等IT技術和通信技術的進一步發展,數據增長速度的加劇帶給各行各業更多機遇和挑戰,促進著信息社會向大數據時代(Big Data)發展,而這種發展趨勢改變了人們生活工作的方式與企業運作模式,更從根本上改變了科學研究模式。
1.1 網絡大數據概述
所謂大數據,即數據集合,其在一定時間內無法利用常規軟硬件工具或機械實現感知獲取等操作。而網絡大數據簡稱網絡數據,指的是在Cyberspace(網絡空間)內彼此交互融合的三元世界(人、機、物)所產生且能夠獲取的互聯網大數據。目前,隨著網絡數據復雜程度和規模的增加擴大,促使現行IT架構處理計算能力面臨著嚴峻的考驗。據IDC公司2015年公布的數據顯示全球數據量儲存達到了7910ZB,同時在大數據摩爾定律,即全球數據量約每兩年翻一番的背景下,這個發展速度將延續到2020年。IBM則概括出大數據3個V的特點,包括Volume(大量化)、Variety(多樣化)和Velocity(快速化)。
1.2 網絡大數據發展現狀
網絡空間數據體量的擴展,數據集合規模也由GB、TB發展到PB,特別是網絡大數據計數單位更發展到EB、ZB(1021)等。據IDC研究報告中表明,全球大數據在今后10年內或將增長約50倍,管理數據庫的服務器數量也將隨之增長至少10倍左右。而且隨著網絡大數據的發展,其類型也不斷突破,現階段包括結構化、半結構化和非結構化三種數據。據調查顯示現代互聯網應用中,整個互聯網數據量中非結構化數據所占比例高達約75%,同時這些數據往往是伴隨新技術的涌現應用而產生的。[1]
目前,世界各國均將網絡大數據當作重要戰略資源。特別是一些發達國家更將其戰略納入國家戰略,為了推動其相關產業更進一步發展,發達國家甚至不惜為其大量投資,其重視程度堪比石油資源。這也表明國家數據運用能力及擁有規模是組成綜合國力的重要部分,對其的占有控制權更是國家核心權力之一。數據與土地、資本、人力同為生產中最關鍵的要素。因此,面對網絡大數據關鍵詞在全球范圍內極速升溫的現狀,這就必須保證網絡大數據研究內容及層次的全面性。
2.1 全新數據計算模式
網絡大數據自身的特性使其無法適應傳統數據分析、挖掘和處理的模式。故而,在這一背景下就必須采取數據密集型計算模式和新型計算范式,加強對數據計算效率評估方法等基本理論的應用。鑒于數據擁有較大體量,再加上其存在形式多為分布式,因此無法進行集中處理,而需要運用去中心化的自下向上計算模式,而避免從中心化的自上向下模式。此外,網絡大數據源自不同的網絡用戶,由于受到人為因素影響存在極大的隨機性,極易增高增多數據噪聲和冗余甚至垃圾數據。為此,這就需要采取舉要刪蕪、刪繁就簡的處理范式,或是尋求類似數據體量結合簡單邏輯的方式解決復雜問題。[2]
2.2 新型IT基礎架構
網絡大數據誕生至今對系統的要求越來越嚴格,包括如計算機系統和存儲傳輸系統等,簡言之即現行數據中心技術無法滿足其需求。為此,革命性的重構整個IT基礎架構尤為迫切。但鑒于當前數據增長遠超存儲能力增長,故而還需采取分層存儲架構才能滿足scale-up式與scale-out式的可擴展性,這也是IT系統最關鍵的部分。隨著網絡大數據時代的來臨,IT系統要改變既往數據圍繞處理器工作的模式,堅持處理能力圍繞數據操作的形式,避免將數據推送給計算,做到推送計算給數據。同時,在網絡大數據高速傳輸的背景下,網絡大數據計算、傳輸、存儲等平臺技術必須進行革命性的創新。[3]
2.3 安全與隱私問題
數據是一種有價值的資源,而由于存在價值也就增加了爭奪侵害的概率。無論是那種數據都會面臨安全與隱私問題。特別是在數據不斷增多的網絡大數據時代,其面臨的風險威脅更大,必須嚴格遵守相關規范標準,這也就提出了革新傳統數據保護法的要求。當前網絡大數據隱私保護需要解決的問題包括:數據密碼學與計算倫理學、強制與多粒度訪問控制、數據存儲與日志管理的安全性、分析挖掘基于商業利益和隱私保護的數據及安全通信等。
2.4 以人為本的發展趨勢
網絡大數據與以人為本理念相結合,也是其將來發展的趨勢之一。由于信息科技時代競爭的主體是人,這就需要契合人的思想需要進行不斷的持續發展。大數據時代要實現科學探索和決策,必須基于數據分析的基礎上。然而,數據分析從本質來說與人類思維活動不同,因此大數據的發展以人類思維意識為推助力。同時隨著互聯網IT通信技術的進一步提高,在大數據時代發展歷程中人們開始擔當不同的角色,不但是其使用者、生產者更是參與者,促進著人類與數據的雙邊互動合作。由此可見,網絡大數據將來的發展趨勢必定是與以人為本理念的應用相結合。
通過對當前網絡大數據發展現狀分析不難看出,新時代大數據雖然面臨著良好的發展機遇,但同時也面臨著更加嚴峻的挑戰,必須進一步增強其發展,不斷擴大網絡大數據規模。只有更深入地研究網絡大數據,并高效有序地利用大數據,才能真正為我國經濟發展助力,促進社會穩定持續的發展,從而有效增強國家綜合競爭力,達到保衛我國網絡空間數字主權,推動國家經濟核心產業和戰略新興行業發展崛起的目的。
[1]范媛媛.網絡大數據的現狀與展望[J].數字技術與應用,2015(12):246-246.
[2]趙淑芳.淺談大數據應用現狀及發展趨勢[J].商,2015(36):223-223.
[3]廖建新.大數據技術的應用現狀與展望[J].電信科學,2015,31(7):1-12.
The present situation and Prospect of large data network
Dong Junling
Xinjiang electric power company of Ministry of science and technology communication,Urumqi Xinjiang 830000
Network era of big data has higher and higher requirements on it infrastructure and computer ability, of course, the development of network data also bring people dig its value function is more severe challenges and enormous opportunities. At the same time, it shows that strengthen the data research, this paper generalizes its law of development will be of great practical significance. Therefore, this paper will be based on the analysis of the status quo of the development of large data network, and prospects its future development prospects.
network big data; development status; basic overview
TP311.13
A
1009-6434(2016)6-0141-02