前瞻大數據在杭州統計服務中的應用

陳小國

（杭州市統計局，浙江杭州 310016）

研究探索

前瞻大數據在杭州統計服務中的應用

陳小國

（杭州市統計局，浙江杭州 310016）

大數據浪潮正在全球掀起，政府統計作為數據最重要的生產、管理和使用部門，充分開發和利用大數據，與時俱進提升統計服務能力至關重要。對杭州而言，大數據戰略有望成為推動信息經濟發展和智慧城市建設的重要力量。本文通過傳統統計和大數據的差異分析，基于杭州目前初具應用基礎的大數據狀態，提出創新統計理念；轉變統計工作重點；充分開發大數據資源；改進統計數據發布模式等提升杭州統計服務的建議思考。

統計服務；大數據；杭州

大數據開啟了一個新的時代，它正在并將徹底改變我們的生活、工作與思維。新興信息技術與應用模式的涌現，使得全球數據量呈現前所未有的爆發式增長態勢。借助大規模數據的生產、分享和應用，人們發現新知識，創造新價值，帶來“大知識”、“大科技”、“大利潤”和“大發展”。未來，大數據既是企業加速創新的利器，也是政府進行宏觀調控、社會管理的基礎。美國、新加坡、英國、澳大利亞等發達國家紛紛將大數據上升為國家戰略。然而當前中國大數據時代的資源開發、利用、共享方面還僅僅拉開帷幕。

杭州是全國信息化建設最發達的地區之一，信息基礎和設施條件較好，電子商務發達，很多企事業單位在多年業務發展中已積累了海量的數據以及實際的開發經驗，所以客觀存在著大數據應用的現實需求。隨著杭州智慧城市建設中各類交易、交互、傳感等電子化設備的廣泛應用，可以預言，大數據時代的來臨已經不遠。作為數據重要生產者和使用者的政府統計，順應大數據時代發展需要，不斷創新統計服務理念，提升統計服務水平，是未來統計工作的必然要求。因此，本文將對這個問題試作一些探索性和前瞻性的思考。

一、大數據的定義及形成

本質上，大數據不僅意味這數據的大容量，還體現了一些區別于“海量數據”和“非常大的數據”的特點。國際數據中心IDC對于大數據給出了這樣的屬性定義：大數據技術描述了一個技術和體系的新時代，被設計于從大規模多樣化的數據中通過高速捕獲、發現和分析技術提取數據的價值。這個定義刻畫了大數據的四個顯著特點，即容量（volume）、多樣化（variety）、速度（velocity）和價值（value）。

大數據的形成過程是對海量數據進行技術性收集、存儲和處理三步流程：首先利用大型存儲平臺收集數據并進行粗加工；然后利用分布式數據庫對數據進行簡單分析和分類匯總；最后對數據進行高級別的挖掘分析，以得出有價值的趨勢信息或個體偏好。

二、傳統統計和大數據的差異

大數據已經逐步滲透到當今每一個行業業務職能領域，成為重要的生產因素。作為政府統計部門，我們的統計工作理念、操作流程和效率也都

會因為對大數據的挖掘和運用而逐步發生質的改變。

我們都知道，由于種種客觀條件的局限，傳統統計和大數據分析在實踐操作中存在較大差異。

先看傳統統計。思維理念是：按照特定研究目的并通過統計調查、產業活動單位報表或抽樣調查獲得樣本數據（通常是格式化數據）。統計推斷分析的邏輯關系是：分布理論—概率保證—總體推斷。統計分析過程是：定性—定量—再定性。這種統計方法由于信息量有限、抽樣誤差大以及調查方案制訂的主觀偏差等，常常不能達到大數據內涵豐富、多層次統計、多角度觀察的高效率。

再看大數據。大數據本身就是一個數據總體，因此其分析的邏輯關系變成了：實際分布—總體特征—概率判斷。統計分析過程則變成了：發現—總結。

比較二者，不難看出：與傳統統計不同，大數據不但蘊含的信息量巨大，而且不重因果關系而更加關注相關性分析。這是一種多維、多角度的分析理念。二者的差異見下表。

傳統統計與大數據對比表

三、大數據對傳統統計的提升作用

海量的、非結構化和電子化的大數據，對人們的生活和企業生產經營的影響日益深遠，而站在數據收集和統計分析第一線的統計系統，則在統計應用和統計服務上明顯滯后。這就意味著，在大數據時代到來之際，傳統統計將由此面臨一場深刻的大轉型。

（一）大數據對于統計信息共享的促進。信息共享是指不同層次、不同部門信息系統間，信息和信息產品的交流與共用，以便合理地達到資源配置、節約社會成本、創造更多的財富。但長期以來，受到傳統信息管理模式的影響以及行政體制、技術手段的限制，不能完全建立政府部門之間的數據共享機制，散落在各部門的寶貴信息資源無法充分共享，形成了一個個“信息孤島”。利用大數據的處理方法，部門之間的數據分割有望打破實現跨部門業務信息共享也指日可待。這種“大統計”格局不僅能大幅減低政府統計的數據采集成本和管理成本，還有助于形成完整、全面、及時更新的名錄庫，減少企業漏報，強化關聯數據比對，提高數據質量。

（二）大數據對于統計效率的提高。在大數據時代，政府統計部門有可能通過現代信息技術搜索、整理信息、分析挖掘數據；有可能通過各種渠道，智能快速地獲得行政記錄、企業業務數據、各類網絡平臺數據等海量數據資料，用于國民經濟核算和統計分析研究，減少抽樣調查和重復調查大大縮短數據生產周期，提高政府統計的工作效率。

（三）大數據對于統計服務的優化。比較大數據，傳統統計的滯后性非常明顯，主要表現在統計指標及體系、統計流程和個性化服務三方面：由于地方統計部門對于工業生產、商貿、投資、物價等宏觀指標的采集是依據國家統計部門的表式布置，致使統計指標及體系明顯滯后，所以難以體現當地經濟特色和經濟發展態勢；由于統計流程是數據先基層上報，至統計部門匯總，最后進行分析，供領導決策。這種流程生產的統計產品不但具有較強的滯后性，還具有低頻性和主觀性，數據質量難以控制；由于傳統統計體系對于微觀行業的忽視和或缺，統計產品的微觀數據較少，所以統計產品的個性化也顯滯后。在大數據時代，可以利用發達的信息技術，實時獲取數據，實時分析不僅能更準確、及時地獲得經濟運行現狀，還能在此基礎上實現更加準確的預測。此外，由于微觀行業的數據得到了極大擴充，政府統計便能夠開發更加專業和細分行業的產品，個性化定制的統計產品生產也成為可能。政府統計針對政府部門、個人和企業能夠更具針對性的提供及時、便捷的統計信息服務。

四、大數據對傳統統計的挑戰

大數據帶給了政府統計改革創新的戰略機遇

但是如果因循守舊、固步自封，則會喪失先機，給工作帶來不應有的損失。

（一）政府統計需盡快樹立大數據理念。目前電子商務、網絡社交和在線搜索等互聯網經濟快速發展，很多企業和部門都擁有大量的數據，并且在對數據進行挖掘分析，甚至與政府統計的某些指標重合。例如“淘寶CPI”就是一個成功應用大數據的案例。在大數據時代，政府統計部門不再是海量數據的唯一擁有者。這種情況會越來越多，也會有更多的數據擁有者進行統計分析和發布指標，大數據生產和使用將趨社會化。到時，政府統計將和民間統計并存。

（二）政府統計需提升專業工作能力。在大數據時代，一是數據處理難度加大。傳統的數據采集來源單一，且存儲、管理和分析數據量也相對較小，大多采用關系型數據庫和并行數據倉庫即可處理。但大數據環境下數據來源非常豐富且數據類型多樣，存儲和分析挖掘的數據量龐大，數據的采集和處理技術的要求都大大提高。二是對數據分析要求提高。目前的統計分析，或根據需要有針對性地收集信息；或對數據進行簡單的匯總分析，難度和門檻相對不是很高。然而大數據屬于總體數據，具有噪聲大、來源雜、價值密度低的特征。它不是按照我們的需求設計和產出的。數據中夾雜著大量無價值的數據，需要從海量數據中得到常規信息外，還要以專業的思維、專業的技術手段，客觀、認真地研究數據源，理解數據，從中深度挖掘以期得到更有價值的數據和指標，整理成為統計分析，這一過程需要更加專業化、細分化和精確化的數據分析技能，比傳統統計分析難度更大。

（三）政府統計需加強信息安全意識。大數據時代，保障信息安全極具挑戰，因為數據整合的關鍵是數據開放，而數據開放的基礎是信息安全。在數據開放的背景下，企業運行中涉及企業商業秘密和客戶隱私；政府行政數據涉及國家安全，以及社交網絡數據中涉及個人隱私等等。如何保護這些敏感信息成為大數據開發和使用的關鍵問題。對于政府統計機構而言，要實現對大數據的大規模應用和對大數量級數據的安全保護，亟待加強信息安全意識，并需考慮適量引進專業技術設備和人員。

五、杭州目前的大數據狀態：初具應用基礎

為迎接大數據時代的到來，2012年，國家統計局首次對“大數據時代”做出解讀。2013年，為打造大數據平臺，與阿里巴巴、百度等11家公司簽訂了大數據戰略合作框架協議，推進了大數據在政府統計中的應用。杭州統計局為此在創新統計服務方面，做了大量工作。

（一）統計信息化水平走在全國前列。通過建設綜合數據系統、社會經濟統計地理信息系統、經濟社會發展統計數據庫、基本單位名錄庫數據管理系統、統計基礎臺賬管理系統等數據電子處理平臺，有效地提高了統計信息化技術支撐和應用支撐能力，實現了統計工作從調查任務布置到數據采集、傳輸、加工、匯總、存儲和發布的全流程電子化、網絡化和智能化。

（二）創新了統計數據發布平臺。首次開發了“杭州統計”手機移動APP，開通了“杭州統計”的微博、微信，發布統計信息，使統計信息的查詢更加便利，使政府統計數據更加公開透明，數據影響力進一步增強。此外，還開發了宏觀數據庫圖表，實現了對全市主要經濟社會指標的實時查詢，使用戶能獲得更加具體、直觀并帶有趨勢性的統計數據。

（三）強化了統計分析服務。對杭州具有優勢和特色的文化創意、電子商務、物聯網等產業，創新性地制定了統計方法制度，以實現對重點產業發展成效的追蹤；開展了新常態下杭州經濟發展質量的變化及與同級別城市的橫向比較等政府重點關注課題的統計分析，為政府科學決策提供了有效的參考。

但是，當前統計數據質量還有待提高。如，數據橫向匹配性不夠、部分報表制度比較落后、數據發布時效難以滿足政府決策需要、前瞻性的數據預測缺失、沒有形成部門統計數據的管理和集中發布、微觀行業數據較少等。總的說，在提高統計服務水平工作上，我們還有很長的路要走。

六、大數據時代提升杭州統計服務的思考

大數據作為數據分析的前沿技術，已經風云世界。我們看：美國政府2012年宣布推出“大數據的

研究和發展計劃”，把大數據提到了國家戰略的高度。新加坡政府推進了大數據基礎設施、產業鏈、人才、技術、立法等全方位建設，并利用數據作為資源，打造了全球數據管理中心。

杭州和世界先進國家、地區比較，大數據研發工作起步不算早，但也已有不俗表現。杭州不僅擁有阿里巴巴這樣的互聯網巨頭、擁有產業鏈較為完整的信息產業，而且物聯網、云計算等技術也較為成熟。隨著智慧城市建設中電子傳感等基礎設施條件的完善，杭州完全有條件把大數據資源轉化為信息生產力，政府統計更應在第一時間擁抱大數據。

（一）從“干”統計到“管”統計——創新統計理念。大數據時代是一個政府統計和民間統計并存的時代。政府統計不能缺位，也不能失位，但要更加注重發揮政府統計的管理職能。調查主體要從以政府統計機構單兵作戰向社會上各機構單位聯合作戰轉變，并加強對源頭統計、部門統計和民間統計的指導和規范化管理，建立“統籌設計、規范運行、監督有效、信息共享、合作開放、互惠雙贏”的政府統計管理新格局。

（二）從數據“采集”到數據“挖掘”——轉變統計工作重點。大數據背景下，數據的采集變得更加智能，統計工作的重點要從依靠調查采集向大數據的分析挖掘轉變。具體說：

一是建立數據分析研究平臺。政府統計不僅要加強自身的統計分析，還要敞開統計的大門，讓更多企業、部門和個人，包括大專院校、科研機構和專家學者及科研人員，共同參與統計數據的分析研究，讓統計科研成果迅速轉化為統計生產力。

二是探索數據“挖掘”信息的社會管理應用。國外利用大數據獲得商業成功的企業案例不在少數，國內正處起步階段；發達國家政府統計中的大數據應有也有先例。國外的，如新加坡陸路交通管理利用大數據改善了巴士服務，成效顯著，首次獲得“世界地理空間卓越獎”。國內的，如阿里信用貸款和淘寶數據魔方對于大數據的利用和開發。貸款的大數據自動分析，大大降低了壞賬率；而消費和市場的大數據自動分析，則為阿里的生產和庫存決策提供了科學依據。

結合“民生”、“旅游”和“養老”等社會重點課題，建議在“智慧社區”“智慧旅游”“智慧養老”等方面利用大數據作出探索。

（三）從“小”統計到“大”統計——充分開發大數據資源。大數據時代要求數據融合，自主融合的前提是數據的開發。因為數據庫層面的開發，能使數據成片的共享。而當前的數據資源共享僅限于公開數據，遠遠不符合“數據融合”的要求。結合中國和杭州地區特點，本著先易后難原則，建議：

一是借鑒丹麥、芬蘭、挪威等國家的先行經驗，把行政記錄引入人口普查等領域，探索部門信息歸集運用新模式。

二是加強部門統計的統一管理，利用好財政國稅、地稅、人力社保等部門的業務優勢，分步建設全市統一的綜合數據管理平臺。

還可以探索與合作企業建立數據共享平臺，通過相關數據，預測、評估、修正傳統統計數據。

（四）從“單一”到“多元”——改進統計數據發布模式。建議一：通過微博、微信等新媒體增強與數據使用者的互動，增強輿論引導力和數據傳播力。

建議二：政府統計要通過大數據的整合和融合，逐步拓展統計數據的發布內容，增加數據的發布頻率，更加有效地對數據的關聯性、匹配性進行解讀，提高數據發布的客觀性、及時性和權威性提升官方統計數據的公信力。

建議三：增加數據發布形式，積極應用可視化技術發布居民收入、物價、房價等百姓關心指標提升數據發布效果。

[1]涂子沛.大數據.廣西師范大學出版社，2012.

[2]李金昌.大數據與統計新思維.統計研究.2014年第1期.

[3]楊家亮.大數據時代的政府統計.中國統計.2013年第11期.

[4]李學龍,龔海剛.大數據系統綜述.中國科學.2015年第1期.

[5]汪為,張雅雅.大數據革新官方統計.浙江經濟.2013年第10期.

[6]劉興遠.利用大數據改進和完善政府統計數據發布模式.中國統計.2014年3期.

（責任編輯：施越霞）