泥土和云端里的大數(shù)據(jù)

面對農(nóng)產(chǎn)品高價—擴種—降價—減產(chǎn)—再漲價的循環(huán)波動，應對方式不同。

中國農(nóng)業(yè)部2011年底成立市場預警專家委員會，首批確定10名委員，建立溝通交流機制，職責之一是密切關注國內(nèi)外農(nóng)產(chǎn)品市場運行情況，及時提出政策建議。

美國意外天氣保險公司利用美國氣象局和農(nóng)業(yè)部公開的氣象、產(chǎn)量、土壤等數(shù)據(jù)，租用大數(shù)據(jù)分析平臺，預測不同品種農(nóng)作物的來年產(chǎn)量，為農(nóng)戶提供價格保險產(chǎn)品，2011年底獲得超過5000萬美元的風險投資。

農(nóng)產(chǎn)品價格的循環(huán)波動客觀存在，影響因素包括農(nóng)資價格、勞動力成本、需求數(shù)量、政府政策、資本運作、自然災害和匯率期貨等諸多方面，描述這些因素的信息資源構(gòu)成了影響農(nóng)產(chǎn)品價格的大數(shù)據(jù)。這些大數(shù)據(jù)來源于生產(chǎn)交易的“泥土”，反映在資源網(wǎng)絡的“云端”，善于利用，價值巨大。

“大數(shù)據(jù)”從英語“Big Data”翻譯而來，維基百科將其定義為“無法在一定時間內(nèi)用常規(guī)軟件工具對其內(nèi)容進行抓取、管理和處理的數(shù)據(jù)集合”。數(shù)量龐大、種類復雜、增速迅猛是“大數(shù)據(jù)”的明顯特征，以往所說的“信息爆炸”、“海量數(shù)據(jù)”等已不足以描述數(shù)據(jù)對于日常活動乃至國計民生的重要價值。“大數(shù)據(jù)”得到信息科技企業(yè)的重視，IBM公司在2012年3月發(fā)布的年報中明確指出該公司的核心競爭力在于“gusher of data”（洶涌而出的數(shù)據(jù)），其新任CEO表明將依靠大數(shù)據(jù)分析取得今后5年業(yè)務發(fā)展的動力。“大數(shù)據(jù)”甚至上升為國家意志，也在2012年3月，美國奧巴馬政府公布了“大數(shù)據(jù)研發(fā)計劃”，首批投資2億美元，目標是改進人們從海量和復雜的數(shù)據(jù)中獲取知識的能力。“大數(shù)據(jù)”蘊含的潛力，可見一斑。

大數(shù)據(jù)的生命力在于持續(xù)積累

隨著信息科技的發(fā)展，無處不在的智能終端、隨時在線的網(wǎng)絡傳輸、互動頻繁的社交網(wǎng)絡使得大量的新數(shù)據(jù)無時無刻不在涌現(xiàn)。任何事物的發(fā)展都有一個過程，會不斷釋放有關事物發(fā)展過程和結(jié)果的事實，相關數(shù)據(jù)的持續(xù)積累蘊含勃勃生機，有望使掌握數(shù)據(jù)的一方在事態(tài)發(fā)展中爭取主動。

1997年，一臺名叫“深藍”的計算機擊敗了當時的國際象棋冠軍Garry Kasparov。2011年，另一臺計算機Watson在美國電視智力競賽節(jié)目《Jeopardy！》再次戰(zhàn)勝前幾屆的冠軍。誕生于傳統(tǒng)數(shù)據(jù)時代的深藍，通過將象棋規(guī)則轉(zhuǎn)化為以0和1形式存在的算法，借助并行處理技術(shù)，計算可能的走棋結(jié)果，通過掃描數(shù)據(jù)庫將結(jié)構(gòu)化的查詢和答案相匹配。而在大數(shù)據(jù)相關技術(shù)幫助下，Watson能夠“讀取”包括百科全書、報刊、書籍等大量人類知識載體，實時智能分析，回答以人類說話方式提出的不可預測的問題，速度和準確性都超過參與競賽的人類對手。這兩則事例詮釋了傳統(tǒng)數(shù)據(jù)與大數(shù)據(jù)時代下計算機生命力的精彩延續(xù)，而其背后是數(shù)據(jù)的持續(xù)積累，非一朝一夕之功。

咨詢機構(gòu)麥肯錫公司2011年5月發(fā)布報告《大數(shù)據(jù)：創(chuàng)新、競爭和生產(chǎn)力的新前沿》認為，當前大數(shù)據(jù)規(guī)模以及其存儲容量正在迅速增長，大數(shù)據(jù)已經(jīng)滲透到各個行業(yè)和業(yè)務職能領域，成為可以與物質(zhì)資產(chǎn)和人力資本相提并論的重要生產(chǎn)要素，大數(shù)據(jù)的演進將與生產(chǎn)力的提高有直接關系。

大數(shù)據(jù)的創(chuàng)造力在于發(fā)現(xiàn)“關系”

如同顯微鏡的發(fā)明使得人們以前所未有的細胞級水平觀看和測量事物，引擎搜索、網(wǎng)頁點擊、論壇發(fā)帖等數(shù)據(jù)記錄使得人們的行為和情緒能夠被衡量，來源廣泛、表現(xiàn)形式多樣的數(shù)據(jù)之間存在復雜關系，發(fā)現(xiàn)其中的“關系”使得判斷和決策以數(shù)據(jù)和分析為基礎，而非經(jīng)驗和直覺。

2008年2月，谷歌公司通過對美國大西洋沿岸中部地區(qū)網(wǎng)民關于“流感癥狀”關鍵詞搜索結(jié)果的統(tǒng)計分析，推斷出該地區(qū)關注感染流感的人數(shù)比較多，有爆發(fā)流感的趨勢，這一分析結(jié)果比美國政府公布的時間早兩周。2008年11月，谷歌公司推出了“流感趨勢”免費網(wǎng)絡服務，幫助美國境內(nèi)的人們了解自己所在地區(qū)的流感病例爆發(fā)情況，提前采取措施，避免感染。美國疾控中心表示，谷歌“流感趨勢”服務可以對其現(xiàn)有的疾控監(jiān)測起到很好的補充作用。可以看出，大數(shù)據(jù)的持續(xù)積累使得量化統(tǒng)計分析“關系”成為可能，從而爆發(fā)出鑒別真?zhèn)巍⒎治鲈怼⒀信汹厔荨㈩A警潛在的機會和威脅及快速響應突發(fā)事件等系列行為，大數(shù)據(jù)的創(chuàng)造力得到彰顯。

基于大數(shù)據(jù)，應用科學的研究方法，才能提高發(fā)現(xiàn)“關系”的客觀性。本文引子中提到的農(nóng)產(chǎn)品價格波動的應對事例，一個是基于專家的經(jīng)驗和判斷，定性地識別出價格與影響因素的“關系”；另一個是基于計算機的數(shù)據(jù)聚類和文本挖掘等方法，定量地識別出價格與影響因素的“關系”。有效利用大數(shù)據(jù)分析的“關系”，將促進新想法和新見解的產(chǎn)生，甚至帶來行業(yè)的關鍵發(fā)現(xiàn)。

大數(shù)據(jù)的破壞力在于威脅信息安全

我國目前的信息安全法規(guī)定義在“計算機系統(tǒng)”，而大數(shù)據(jù)彌漫在計算機、手機、監(jiān)視器以及所有電子設備上，連接所有人體、生物體和物體，大數(shù)據(jù)時代沒有“可以鎖起來”的信息安全，競爭可能從“誰能鎖得緊、藏得牢”躍遷為“誰能用得好、用得快”。而透露個人行為、情緒等隱私的大數(shù)據(jù)，成為威脅社會穩(wěn)定和信息安全的極大隱患。

與此同時，越來越多的公司、機構(gòu)等組織需要訪問第三方數(shù)據(jù)來源，并將自己信息與外部信息進行集成以充分獲取大數(shù)據(jù)的潛力。而在目前情況下，市場尚未建立交易或共享數(shù)據(jù)的成熟機制，尤其對于缺乏競爭強度和績效透明的公共行業(yè)以及利潤高度集中的產(chǎn)業(yè)，數(shù)據(jù)獲取的障礙客觀存在，解決價值挖掘與信息安全之間的矛盾值得密切關注。

而由信息安全衍生出來一系列問題：數(shù)據(jù)可以輕松復制帶來的知識產(chǎn)權(quán)問題，不準確數(shù)據(jù)導致負面結(jié)果的責任問題，優(yōu)化數(shù)據(jù)使用的工作流構(gòu)建問題，相關的數(shù)據(jù)人才短缺問題等等，有待破解。

無論是否察覺，形形色色的泥土和云端里的大數(shù)據(jù)切切實實地存在身邊，大數(shù)據(jù)時代已經(jīng)來臨。你，準備好了嗎？