莫建華
摘要:大數據時代已經來臨,并且開始深入到各個行業中,帶來7很多的機遇,也帶來了很多的挑戰。在文中主要就大數據時代的機遇與挑戰進行分析,為更好的在大數據時代中發展提供支持。
關鍵詞:大數據機遇挑戰
時至今日,大數據時代的來臨已經毋庸置疑,你的每一個習慣動作、你的每次通話過程、你的每一次消費行為、你的每一份就診記錄,都正在被巨大的數字網絡記錄下來、串聯起來。大數據正悄悄包圍著我們不管你有無感受到,它都在影響和改變著我們的生活,甚至連世界經濟格局也在醞釀著巨大變革。
一、認識大數據
大數據,簡單說,就是把所有的海量的數據放到一起分析,找到關聯,實現預測。大數據是一個寬泛的概念,見仁見智。“大”是大數據的一個重要特征,但遠遠不是全部,其核心能力,是發現規律和預測未來。它主要有四個特征,即海量的數據規模、快速的數據流轉、多樣的數據類型和巨大的數據價值。
二、大數據主要來源
(一)傳感器數據:分布在不同地理位置上的傳感器,對所處環境進行感知,不斷生成數據。
(二)網站點擊流數據:為了進行有效的市場營銷和推廣,用戶在網上的每個點擊及其時間都被記錄下來,利用這些數據,服務提供商可以對用戶存取模式進行仔細的分析,從而提供更加具有針對性的服務。
(三)移動設備數據:通過移動電子設備包括移動電話和PDA、導航設備等,我們可以獲得設備和人員的位置、移動、用戶行為等信息,對這些信息進行及時的分析,可以幫助我們進行有效的決策,比如交通監控和疏導系統。
(四)射頻ID數據:RFID 可以嵌入到產品中,實現物體的跟蹤,從而產生大量數據。
三、大數據的廣泛應用
電子政務領域:大數據的發展,將極大地改變政府的管理模式,有利于節約政府投資、加強市場監管能力、提高政府決策能力、提升公共服務能力,實現區域化管理。目前,我國有很多個城市,正構建“智慧城市”,即利用大數據的整合和分析來治理社會。
金融領域:大數據可大大助力推進高頻金融交易和小額信貸,協助金融企業精準營銷。未來大數據可能成為最大的金融交易產品。未來金融大數據將會如基礎設施一樣,有金融數據提供方、金融監管者,金融大數據的交叉復用等,最終將成為金融業進行重要活動的基礎設施。
教育領域:現在,大數據分析已經被應用到美國的公共教育中,成為教學改革的重要力量。在加拿大,教育科技公司“渴望學習”已經面向高等教育領域的學生,推出了基于過去的學習成績數據預測并改善未來學習成績的大數據服務項目。
生活娛樂領域:在春運這場堪稱人類歷史上最大規模的短期遷徙中,人群從哪兒去了哪兒?哪些線路最熱門?在以往,這些問題可能難以精確回答。但隨著技術進步,通過應用“大數據”這一技術利器,人們已經接近“在迷宮中感受全局”地看見春運的全景
國內有2億手機用戶使用百度地圖,用戶每次位置變化,百度都能得到數據。把手機網民的定位信息匯總成大數據進行分析,就能勾勒出人們的遷徙軌跡。
從上面各種事例中,可以得出以下結論:第一,數據是無價之寶;第二,價值雖有,但確如沙灘中的黃金;第三,數據融合的價值,要遠遠大于種類單一的數據價值。
四、大數據時代的機遇和挑戰
今天,大數據似乎成了“靈丹妙藥”,“包治百病”,無所不能。但千萬別把“大數據”用做解決世界上所有問題的全能辦法,無論是管理城市到消除貧困,制止恐怖襲擊、疾病流行到拯救地球環境等,以為有了“大數據”,就沒有解決不了的問題,這也是一種誤解。人類的思想、個k的文化和行為模式、不同國家及社會的存在發展都非常復雜、曲折和獨特,顯然不能全部由計算機來“數字自己說話:
(一)面臨的機遇
1.大數據技術促進國家和社會發展
大數據技術的運用前景是十分光明的。當前,我國正處在全面建設期,建設任務很重,建設下一代信息基礎設施,發展現代信息技術產業體系,健全信息安全保障體系,推進信息網絡技術廣泛運用,是實現同步發展的保證。大數據分析對我們深刻領會世情和國情,把握規律,實現科學發展,做出科學決策具有重要意義,我們必須重新認識數據的重要價值。
2.大數據藍海成為企業競爭的新焦點
大數據所能帶來的巨大商業價值,被認為將引領一場足以與20世紀計算機革命匹敵的巨大變革。大數據正在對每個領域都造成影響,包括商業、經濟等領域。大數據正在促生新的藍海,催生新的經濟增長點,正在成為企業競爭的新焦點。
在今天的大數據時代,商業的生態環境在不經意間發生了巨大的變化:網民和消費者的界限正在變得模糊,無處不在的智能終端,隨時在線的網絡傳輸,互動頻繁的社交網絡讓以往只是網頁瀏覽者的網民的面孔從模糊變得清晰,對于企業來說,他們第一次有機會進行大規模的精準化的消費者行為研究。作為保持著持續變革欲望的企業,主動地擁抱這種變化,從戰略到戰術層而開始自我的蛻變和進化將會讓他們更加適應這個新的時代,大數據藍海成為未來競爭的制高點。
3.大數據時代呼喚創新型人才
蓋特納咨詢公司預測大數據將為全球帶600萬個IT新崗位和上千萬個非IT崗位。中國是人才大國,但能理解與應用大數據的創新人才更是稀缺資源。 (二)面臨挑戰
1.大數據技術的運用仍有困難。目前,大數據技術的運用仍存在一些困難與挑戰,體現在大數據挖掘的四個環節中。
(1)數據收集:要對來自網絡包括物聯網和機構信息系統的數據附上時空標志,去偽存真,盡可能收集異源甚至是異構的數據,還可與歷史數據對照,多角度驗證數據的全面性和可信性。
(2)數據存儲:要達到低成本、低能耗、高可靠性目標,要用到冗余配置、分布化和云計算技術,存儲時對數據進行分類,通過過濾和去重,減少存儲量,并加入便于檢索的標簽。
(3)數據處理:大數據的復雜性使得難以用傳統的方法描述與度量,需要將高維圖像等多媒體數據降維后度量與處理,利用上下文關聯進行語義分析,從大量動態及可能模棱兩可的數據中綜合信息,并導出可理解的內容。
(4)結果的可視化呈現:使結果更直觀以便于洞察,目前,盡管計算機智能化有了很大進步,但還只能針對小規模、有結構或類結構的數據進行分析,談不上深層次的數據挖掘,現有的數據挖掘算法在不同行業中難以通用。
2.大數據給信息安全帶來新挑戰
(1)加大隱私泄露風險。一是大量數據的集中存儲增加了其泄露的風險;二是一些敏感數據的所有權和使用權并沒有清晰界定。
(2)對現有存儲和安防措施提出挑戰。一是復雜的數據存儲在一起可能造成企業安全管理不合規二是安全防護手段更新升級慢,存在漏洞。
(3)被運用到攻擊手段中。黑客可收集更多有用信息,大數據分析讓攻擊更精準,同時大數據為黑客發起攻擊提供了更多的機會。
在大數據時代,一方面我們通過對大量用戶數據的分析,公司、企業、政府都可以更好的了解用戶行為、消費習慣的等等,從而可以提供更好的服務。但是另外一方面,這又不可避免的對用戶的隱私構成威脅、挑戰。很多人已經意識到,在數據的應用方面,相關法律法規的制定變得越來越重要。作為用戶,需要明確界定自己在數據的使用方面具有什么權力和義務;作為企業和政府,需要逐漸的定位清楚,在多大程度上可以并且用什么樣的方式來使用用戶的數據。