統(tǒng)計與大數(shù)據(jù)

■楊 靜

統(tǒng)計到底是怎樣一門學(xué)問呢?先看看我們的周圍，其實有無限多的數(shù)據(jù)，所謂數(shù)據(jù)就是一系列數(shù)字的集合或者符號的集合體。我們看一些數(shù)據(jù)的個數(shù)、平均、傾向、分類等數(shù)字特征才能了解數(shù)據(jù)的性質(zhì)。那么看數(shù)字特征，基本上會有一定的不確定性，比如某企業(yè)大多數(shù)都是一線員工，年收入在2萬元左右，另有一些管理層次的人，年收入幾十萬元，此時年收入的平均數(shù)就失去了參考價值。統(tǒng)計學(xué)就是一個被體系化的方法論，它用來查看零散的有不確定性數(shù)據(jù)的性質(zhì)，從大的數(shù)據(jù)（總體）抽取出一部分（樣本），查看它的性質(zhì)，推測原來的大的（總體）數(shù)據(jù)的性質(zhì)（用樣本的數(shù)字特征估計總體的數(shù)字特征）等。

在國外，統(tǒng)計工作開始于公元前3050年。埃及建造金字塔，為征收建筑費用，對全國人口進行普查和統(tǒng)計，到了亞里士多德時代，統(tǒng)計工作開始往理性演變。這時，統(tǒng)計在衛(wèi)生、保險、國內(nèi)外貿(mào)易、軍事和行政管理方面的應(yīng)用，都有詳細的記載。

數(shù)理統(tǒng)計起源于人口統(tǒng)計、社會調(diào)查等各種描述性統(tǒng)計活動。公元前2070年前大禹治水時，根據(jù)山川土質(zhì)，人力和物力的多寡，分全國為九州；殷周時代實行井田制，按人口分地，進行了土地與戶口的統(tǒng)計；春秋時代常以兵車多寡論諸侯實力，可見已進行了軍事調(diào)查和比較；漢代全國戶口與年齡的統(tǒng)計數(shù)字有據(jù)可查；明初編制了黃冊與魚鱗冊，黃冊乃全國戶口名冊，魚鱗冊系全國土地圖籍，繪有地形，完全具有現(xiàn)代統(tǒng)計圖表的性質(zhì)。可見，我國歷代對統(tǒng)計工作非常重視，只是缺少系統(tǒng)研究，未形成專門的著作。

數(shù)理統(tǒng)計在自然科學(xué)、工程技術(shù)、管理科學(xué)及人文社會科學(xué)中得到越來越廣泛和深刻的應(yīng)用，其研究的內(nèi)容也隨著科學(xué)技術(shù)和政治、經(jīng)濟與社會的不斷發(fā)展而逐步擴大，但概括地說可以分為兩大類：（1）試驗的設(shè)計和研究，即研究如何更合理更有效地獲得觀察資料的方法；（2）統(tǒng)計推斷，即研究如何利用一定的資料對所關(guān)心的問題作出盡可能精確可靠的結(jié)論。當然這兩部分內(nèi)容有著密切的聯(lián)系，在實際應(yīng)用中更應(yīng)前后兼顧。

由于大數(shù)據(jù)的出現(xiàn)，統(tǒng)計更加引人注目。理由很簡單，就是利用統(tǒng)計學(xué)方法分析大數(shù)據(jù)，在計劃經(jīng)營戰(zhàn)略，市場戰(zhàn)略，開發(fā)新產(chǎn)品，新業(yè)務(wù)的時候取得了有效成果。經(jīng)營不只是靠感覺，靠經(jīng)驗，靠勇氣的東西了，而是根據(jù)以數(shù)據(jù)為基礎(chǔ)的科學(xué)分析方法來進行決策。

最早應(yīng)用大數(shù)據(jù)并對大數(shù)據(jù)進行收集和分析的設(shè)想來自于世界著名的管理咨詢公司麥肯錫公司（M c K i n s e y）。麥肯錫公司看到了各種網(wǎng)絡(luò)平臺記錄的個人海量信息具備潛在的商業(yè)價值，于是投入大量人力物力進行調(diào)研，在2011年6月發(fā)布了關(guān)于大數(shù)據(jù)的報告，該報告對大數(shù)據(jù)的影響、關(guān)鍵技術(shù)和應(yīng)用領(lǐng)域等都進行了詳盡的分析。麥肯錫的報告得到了金融界的高度重視，而后逐漸受到了各行各業(yè)關(guān)注。

維克托·邁爾-舍恩伯格和肯尼斯·克耶在其編寫的《大數(shù)據(jù)時代》中提出大數(shù)據(jù)的4 V特點，即 V o l u m e（數(shù)據(jù)量大），V e l o c i t y（輸入和處理速度快），V a r i e t y（數(shù)據(jù)多樣性），V a l u e（價值密度低）。

當我們進入大數(shù)據(jù)時代之后，統(tǒng)計有了什么樣的變化呢?如果我們能夠分析總體的話就沒有必要分析一部分的樣本了。在大數(shù)據(jù)時代，最重要的是從這些龐雜的數(shù)據(jù)中，要得到那些有價值的信息。我們相信，隨著科技的發(fā)展，統(tǒng)計和大數(shù)據(jù)將會更加深遠地影響著我們的生活。