大數(shù)據(jù)：正在到來的數(shù)據(jù)革命

以大量、多樣、高速為特征的大數(shù)據(jù)（Big Data）時代已經(jīng)到來了，大數(shù)據(jù)服務(wù)也成了眾多TT公司新的掘金點(diǎn)。云計(jì)算和開源軟件項(xiàng)目的出現(xiàn)、存儲和處理海量數(shù)據(jù)成本的急劇下滑，更成為大數(shù)據(jù)被政府、企業(yè)關(guān)注的關(guān)鍵。但是對眾人而言，大數(shù)據(jù)還是一個深奧的名詞，大數(shù)據(jù)能為我們的生活、工作帶來什么樣革命性的變化也不為所知。

涂子沛的著作《大數(shù)據(jù)》，就是通過講述美國半個多世紀(jì)信息開放、技術(shù)創(chuàng)新的歷史，以別開生面的經(jīng)典案例——奧巴馬建設(shè)“前所未有的開放政府”的雄心、公共財(cái)政透明的曲折、《數(shù)據(jù)質(zhì)量法》背后的隱情、全民醫(yī)改法案的波瀾、統(tǒng)一身份證的百年糾結(jié)、街頭警察的創(chuàng)新傳奇、美國礦難的悲情歷史、商務(wù)智能的前世今生、數(shù)據(jù)開放運(yùn)動的全球興起，以及云計(jì)算、Facebook和推特等社交媒體、Web3.0與下一代互聯(lián)網(wǎng)的未來圖景等，點(diǎn)面結(jié)合論述了大數(shù)據(jù)時代的趨勢以及這個時代給個人、企業(yè)和社會帶來的諸多挑戰(zhàn)。

在網(wǎng)絡(luò)高速發(fā)展的今天，各種資訊工具、硬件、軟件平行發(fā)展，信息數(shù)據(jù)鋪天蓋地，傳播速度也是昔日所不能比擬的。無論我們是在超市中，還是走在回家的路上，我們的軌跡都已經(jīng)被清楚地記錄下來，甚至連我們在家看電視、上網(wǎng)等行為，都留下了數(shù)據(jù)痕跡，經(jīng)由分析，便能獲得一些目標(biāo)市場所需要的結(jié)果。例如在美國的超市里購物，攝像頭將會全程記錄下消費(fèi)者的一舉一動：你走過哪些地方，購買了什么產(chǎn)品，在對比同類產(chǎn)品時的選擇結(jié)果、你的購物表情等等，這些信息經(jīng)由專業(yè)的分析公司分析，就能清楚地確定消費(fèi)者購買商品的傾向性及他們的意圖、滿意度和情緒等等，為商家提供市場銷售建議。

本書強(qiáng)調(diào)的一個觀點(diǎn)非常值得推薦，即大量數(shù)據(jù)應(yīng)該公開于眾。這與筆者早前采訪的一位信息化專家的觀點(diǎn)不謀而合。從古至今，無論哪個國家，全社會超過八成的信息數(shù)據(jù)都掌握在政府的手中。涂子沛覺得，在自由的社會里，政府應(yīng)該要將自身掌握的數(shù)據(jù)，大量地開放于群眾。上海投資咨詢公司總經(jīng)理王思政也曾在接受本刊記者采訪時強(qiáng)調(diào)，政府?dāng)?shù)據(jù)除了必須保密的部分之外，應(yīng)該要堅(jiān)決執(zhí)行好“公開是常態(tài)、保密是例外”的原則（詳情請翻閱2012年11月刊《智慧城市建設(shè)初級階段，我們該做什么？》一文）。

爭奪數(shù)據(jù)權(quán)令人激動，這將確保人民有權(quán)向政府索取各式各樣的數(shù)據(jù)，用于社會創(chuàng)新和商業(yè)創(chuàng)新。在這方面，目前美國做得最好，他們向社會免費(fèi)發(fā)布數(shù)據(jù)，就連一個學(xué)生寫論文所需的政府?dāng)?shù)據(jù)，都能從相關(guān)部門手中獲得。此外，各種各樣基于地圖的信息服務(wù)、公共數(shù)據(jù)的整合，也都已經(jīng)在美國興起。

開放數(shù)據(jù)使用權(quán)，是創(chuàng)建一個開放、負(fù)責(zé)和透明政府的關(guān)鍵條件之一。涂子沛引用胡適批評“差不多先生”，黃仁宇求索“數(shù)目字管理”的話語來表達(dá)國內(nèi)與美國在數(shù)據(jù)上的差異。目前來看，中國的數(shù)據(jù)權(quán)很是遜色于國外，但換個角度來看，我們應(yīng)該先弄清楚公開數(shù)據(jù)這種做法在當(dāng)今的中國是否合適；在公開數(shù)據(jù)之前，中國應(yīng)該先做什么。

和美國相比，中國擁有的數(shù)據(jù)量的絕對值較小，就如同涂子沛在書中所言，“中國缺乏的不是可提供收集的數(shù)據(jù)，也不是收集數(shù)據(jù)的手段，而是收集數(shù)據(jù)的意識。”數(shù)據(jù)意識的淡薄，決定了已收集數(shù)據(jù)的不完整性，如果一味地公開，就容易造成混亂。因此，要公開數(shù)據(jù)，需要一個過程，不能一味地跟著世界潮流走。

但無論如何，收集數(shù)據(jù)、使用數(shù)據(jù)、開放數(shù)據(jù)，都是大數(shù)據(jù)時代中國需要一一面臨的挑戰(zhàn)，任重道遠(yuǎn)。開放已經(jīng)成為人類社會一個不可逆轉(zhuǎn)、不斷加速的社會趨勢。如雨果所言：你可以阻擋一支入侵的軍隊(duì)，但你無法阻擋一種思想。

書評

大數(shù)據(jù)具有催生社會變革的能量。但釋放這種能量，需要嚴(yán)謹(jǐn)?shù)臄?shù)據(jù)治理、富有洞見的數(shù)據(jù)分析，以及一個激發(fā)管理創(chuàng)新的環(huán)境。涂子沛的《大數(shù)據(jù)》這本書總結(jié)了美國的經(jīng)驗(yàn)和實(shí)踐，并為中國提出了一個路線圖。我為他的成就感到驕傲。這本書完整地融合了技術(shù)、政治、商業(yè)三個角度，體現(xiàn)了我們學(xué)院師資教學(xué)的獨(dú)特優(yōu)勢。我相信本書會在中國激發(fā)新的思想和討論，幫助中國迎接大數(shù)據(jù)的挑戰(zhàn)。

—— 卡內(nèi)基梅隆大學(xué)海因茲學(xué)院及信息管理學(xué)院院長、終身教授Ramayya Krishnan

《大數(shù)據(jù)》這本書揭示了數(shù)據(jù)在未來社會中的革命性作用。大數(shù)據(jù)將是下一個社會發(fā)展階段的“石油”和“金礦”。無論是個人、企業(yè)還是國家，誰能更好地抓住數(shù)據(jù)、理解數(shù)據(jù)、分析數(shù)據(jù)，誰就能在下一波的社會競爭中脫穎而出。關(guān)于數(shù)據(jù)的知識，將成為個人知識結(jié)構(gòu)中的必備要素和基礎(chǔ)。

—— 復(fù)旦大學(xué)計(jì)算機(jī)研究所所長、上海（國際）數(shù)據(jù)庫研究中心主任 施伯樂