蘇志忠+劉慶敖
摘 要: 隨著網絡信息化時代的日益普遍,移動互聯、社交網絡、電子商務大大拓展了互聯網疆界和應用領域,我們正處在一個數據爆發性、幾何式增長的“大數據”時代,“大數據”時代已經來臨,將會對人類的數據駕馭能力提出前所未有的機遇與挑戰。
關鍵詞: 大數據 發展 影響
如果兩年前有人問,在IT領域什么概念最流行,可能很多人都會提到物聯網或云計算。但從2012以來,“大數據(Bigdata)”成為學術界、工商界和媒體爭相報道的熱詞?!按髷祿笔抢^續物聯網、云計算之后IT產業又一次顛覆性的技術變革,對國家治理決策、組織、業務流程及提供公共服務等方式都將產生巨大影響,有學者甚至將大數據時代稱為人類文明史上自工業革命以來的第二次大革命。
一、何為“大數據”
20世紀世界最偉大的技術發明之一——“互聯網”的誕生,標志著人們將進入全球性網絡時代。而隨著互聯網技術的不斷發展,特別隨著社會媒體和移動互聯網用戶的逐漸發展,物聯網、云計算、移動互聯、車聯網、手機、平板電腦、PC及遍布全球各個角落的各式各樣的傳感設備、終端的接入,使各種數據呈現出爆發式、幾何式的快速增長。我們可以試想一下:全球各個城市的視頻監控每時每刻都在采集流媒體數據,這是多么巨大的量?當50億手機終端、20億臺電腦終端,隨時隨地、持續不斷地都向分布在全球各地的服務器發送數據,所帶來的數據持續增量又是一個什么概念?不能否認,隨著大數據廣泛應用,我們已經身處在一個海量信息和海量數據的時代,MB、GB時代已經成為過去,TB時代正在被超越,大數據時代已經來臨。
目前,對大數據尚無統一的定義,通常人們會認為這是一種數據量龐大、數據源形式多樣化的非結構化數據。由于大數據分析常和云計算聯系在一起,有人會把大數據等同于云計算,也有人在大數據是一種技術還是一種現象之間糾結。但數據本身既是一種資源,更是一種資產,大數據是有價值的,這一點在業界已經達成共識。在這里我們還必須先厘清幾個概念:一是結構化數據。結構化數據可以在關系數據庫中找到,多年來一直主導著IT的應用;二是半結構化數據。半結構化數據包括電子郵件、文字處理文件及發布在網絡上的新聞等,以實際內容為基礎;三是非結構化數據。非結構化數據廣泛應用于社交網絡平臺、物聯網平臺和電子商務之中。隨著社交網絡平臺的增量、傳感器應用等新技術不斷發展與創新,更有數據稱,超過80%~90%的數據屬于非結構化數據。
二、大數據帶來的改變
現今的信息資源已日益成為與人力資源、物質資源同等重要的社會和企業資源。目前,大數據之所以越來越受到人們的認可和追捧,主要是因為其具有非常廣闊的研究和應用前景,正悄悄改變人們的傳統思維,并滲透到各個行業和各職能業務領域,這也意味著大數據將是一座巨大的金礦正等待著人們去開發和挖掘。同時,大數據帶來的商業機會現在為越來越多具有技術前瞻性和有實力的企業所重視,在各個領域發揮著重要作用,為廣大用戶提供更加專業化和個性化的服務。
例如,在中國,鐵路作為國民經濟的大動脈,在國民經濟發展中具有重要作用。隨著中國高鐵的快速發展,“四縱四橫”鐵路客運快速通道的實現,將會對現有交通運輸格局產生深遠影響。大數據在鐵路運輸方面也有直觀表現:首先,可以通過鐵路客運信息的收集、整理、分析預測客運量,合理整合運力資源。其次,通過鐵路信息海量數據統計,實際反映出旅客群體自身需求,通過數據分析優化配置并開展更為廣闊的增值業務。最后,相對于傳統信息處理方式,大數據將大大節省研發成本和人力資源,會對人們的不同需求做出正確判斷,它的分析將會把市場發展的不可預測性變為一種可能,同樣,利用“大數據”預測客運、貨運的趨勢將成為可能。
在德國,大數據技術已經被用于智能電網的各個終端,即現在所說的智能電表。同時,為了鼓勵大家積極使用太陽能,從而節約物質能源。各個家庭在安裝太陽能設備終端后,除滿足自家使用外,還可以把太陽能產生的多余電賣給電網企業。而智能電網可以每隔5~10分鐘收集一次用電使用數據,這些收集的數據可以用來分析、預測各個客戶的用電習慣等,通過數據分析、預測,從而推斷出在未來幾個月的時間內,整個電網相對準確的用電需求。
而易趣網(eBay)則將結構化數據和非結構化數據結合在一起,為準確分析各用戶的購物行為,eBay定義超過2000種各類型的數據,對顧客的行為進行持續跟蹤分析。比如,廣告收入上,利用該系統,eBay能夠精確計算出每一個關鍵字為其帶來的投資回報。通過對廣告投放的優化,eBay產品銷售的廣告成本降低了99%,頂級賣家占總銷售額的百分比卻上升到45%。
三、結語
隨著信息通信技術發展積極累至今,大數據作為新發明和新資源,正通過不斷的技術創新和發展,讓我們有機會更加深入走進信息社會,正在逐漸改變我們的生活方式和思維模式,其所帶來的巨大價值正被人們認可,而且在社會整體建設中的信息孤島現象將大幅消減,數據共享將成為可能,具體而言,在國家政策支持下,依托大數據發展,有利于提高科學決策能力,有利于管理模式的改變,有利于節約社會資源和成本,提升公共服務保障能力。