魏清
摘 要:大數據作為信息革命的產物,其商業、社會價值日益顯著,本文將介紹大數據的定義及特征,分析方法,應用及可能的風險。
關鍵詞:大數據;特征;分析方法;價值
重慶財經職業學院校級課題
課題項目名稱:大數據在高等職業教育管理中應用的研究
項目編號:J18023YFC
大數據被美國的前總統奧巴馬譽為“未來的新石油”,而且美國,日本,韓國,英國,法國等國家均將大數據提升為自己的國家戰略,可見大數據的重要性,甚至有學者提出“得數據者得天下”的結論,在這種背景下,2014年我國也將大數據提升到了國家戰略的層面。
介紹大數據
1.1大數據定義:大數據(Big Data)這個詞是在apache org 的開源項目HUTCH中率先提出,意指規模巨大的數據,亦稱為“巨量資料”。目前并沒有公認的定義,維基百科中是這樣定義的:大數據是指檢測或軟件工具捕獲、管理和處理數據所耗時間超過可容忍時間的數據集。
1.2大數據的特征
大數據包括以下幾個方面的特征:數據的巨量性(Volume),數據處理的時效性(Velocity),數據形式的多變性(Variety),數據的價值性(Value),易變性(Variability)。
Volume是海量數據。是指數據量巨大,因此相比較傳統的數據以MB為單位計量,大數據通常以TB,PB,基至以ZB為單位計量規模。
Velocity指大數據處理的時效性。因為數據的規模巨大,傳統的數據軟件處理工具不能滿足需要,而大數據講究處理的時效性,因為大數據的用途是起到市場預測的作用,所以要求在短時間內對海量數據進行處理,提煉,得出有用的信息。
Variety大數據形式的多樣性。傳統的數據是結構化的形式,而我們的大數據形式是多種多樣。包括結構化的數據,半結構化的數據甚至是非結構化的數據,而且還可以運用技術將數據可視化,更加直觀的掌握數據信息。
Value大數據的價值性。大數據是在“互聯網+”,“云計算”,移動和物聯網普及的大背景下崛起的,面對巨量的數據,提煉出滿足需求者的信息,從而創造商業價值。
Variability大數據的易變性。大數據是瞬息萬變的,易變率非常高,因為產生數據的平臺總是源源不斷的輸出新的數據,甚至智能監測設備,傳感器也在不斷產生新的數據。造成數據變化非常快,數據的衰退率就很高,這就要求信息需求者對數據作出快速的反應,實時監測。
二、大數據分析的方法
可視化分析。
大數據的使用者包括專家和普通用戶,面對海量的數據,無論是專家還是普通用戶,都要通過數據可視化的技術將大數據變為可視化的圖形,通過圖形來分析并得出數據背后的涵義,讓信息需求者更容易讀懂數據,得出結論。
可預測性分析。
大數據在多個領域得到廣泛應用,但是其中最重要的一個應用領域是可預測性。在大數據中挖掘出有相互聯系的不同的數據,可以建立數學模型分析變量之間的關系,并引入新的經濟變量,并可預測其對未來的影響。
詞語引擎。
目前淘寶,京東等網絡平臺興起,消費者在網上搜索商品信息的數據巨大,可以通過用戶搜索的關鍵詞或標簽得出消費者的需求偏好,判斷其潛在消費習性,從而可以精準的給客戶推銷產品,實現精準化的營銷策略。
數據挖掘的方法。
大數據處理的核心就在于數據的挖掘,面對海量的數據,及各種不同的數據類型,在要短時間內完成處理,需要運用統計學家公認的計算方法來深入挖掘,以便能夠快速的挖掘出有用的數據信息,體現大數據的時效性。
三、大數據的應用
大數據不僅僅是數字,如果將數據通過技術化的處理,送到需要的客戶手里,就會帶來市場價值和經濟利益。在互聯網,云計算發展的背景下,每個人獲得大數據都變得更輕易,但是大數據的意義是即時地將正確的數據信息交付給恰當的人,創造經濟價值和社會價值。
大數據在社會生活的各個方面產生了重大影響,例如銀行可以通過掌握客戶的金融數據,從而判斷出哪些是優質客戶,得出推薦辦理信用卡的目標顧客,從而可以提升客戶的還款率,優化信用卡客戶群。政府掌握了民眾的水、電、氣等數據,可以判斷某個地區房屋的空置率,從而判斷當地房屋的供給狀況,來決定對當地的房地產采取是寬松還是緊縮的政策。企業通過詞語引擎,獲得網絡平臺的熱搜量,可以了解到消費者的需求偏好,預測出產品的銷售情況,從而調整自己的生產計劃,生產出適銷對路的產品,提高市場占有率,并提供精準的營銷策略,提高顧客的品牌忠誠度。同時我們每個人可以通過互聯網平臺,建立自己的信息庫,通過記錄,采集,儲存,積累個人的大數據信息。按時我國法律的規定,個人可以授權第三方機構獲得個人的相關信息,通過處理將個人數據變成有商業價值的信息。例如個人可以將自己的身體檢查數據授權給醫療收集,通過大數據的處理得出自己的健康狀況,醫療機構可以據此為個人提供私人醫療服務;也可以將個人的金融信息授權給金融機構采集,以便其為個人制定相應的理財方式。可見在社會生活中時時充斥著大數據的商業價值,如果對這些數據進行應用,將提高企業的生產效率,提升國家管理的水平,金融機構和醫療機構可以為個人提供更私人化的服務。
四、風險
大數據雖然應用非常廣泛,但是還是蘊藏著一定的風險,例如收集信息時可能會涉及到個人的隱私權,不法分子將個人信息泄露及販賣,涉及到國家安全的信息被出賣給別的國家,影響我國的戰略安全等。因此還要注重對個人信息,企業信息及國家信息的保護。
五、結束語
大數據正在改變著我們的生活及思維模式,對提升社會管理水平,推動經濟發展有著巨大的作用,但是因為大數據還有被不法分子盜竊的風險,因此要注重對數據的保護,在充分利用大數據的基礎上提高其安全性。
參考文獻:
[1] 孟小峰,慈祥.大數據管理:概念、技術與挑戰[J].計算機研究與發展,2013,1:150.
[3] 胡偉.大數據分析淺析[J].科學與財富,2014,5:93-94.
[4] 王曉.大數據環境下機器學習算法趨勢研究[J].哈爾濱師范大學自然科學學報,2013,4:48-49.
[5]胡坤,劉明輝,大數據的安全理解及應對策略研究[J],電信科學,2014,(02)