大數據(Big Data)
指一般的軟件工具難以捕捉、管理和分析的大容量數據,一般以“太字節”為單位,“大數據”之“大”,并不僅僅在于“容量之大”,更大的意義在于:通過對海量數據的交換、整合和分析,發現新的知識,創造新的價值,帶來“大知識”“大科技”“大利潤”和“大發展”。
——《大數據:正在到來的數據革命》,2012年7月1日出版。入榜《亞洲周刊》“年度十大好書”。作者涂子沛,被譽為“中國數據文化的首倡者”。
大數據思維
是指一種意識,認為公開的數據一旦處理得當,就能為千百萬人急需解決的問題提供答案。大數據時代最大的轉變就是,放棄對因果關系的渴求,而取而代之關注相關關系。也就是說只要知道“是什么”,而不需要知道“為什么”。
——《大數據時代:生活、工作與思維的大變革》,國外大數據系統研究的先河之作,2013年1月1日出版。入選《光明日報》、央視等多家媒體2013年度好書。作者維克托·邁爾-舍恩伯格,被譽為“大數據商業應用第一人”。
“大數據”正在以我們可以感知的方式撲面而來,盡管時至今日對于大數據的定義仍沒有統一的界定,但其所隱含的巨大的社會、經濟、科研價值已被人們所預見,大數據的浪潮正席卷全球。作為信息時代又一次偉大的技術變革,大數據將如同互聯網一樣,使人類的生活及理解世界的方式發生顛覆性的改變。從國家治理,到企業決策,再至個人生活服務,大數據都將以其巨大能量影響著我們的生活、工作與思維。因此,研究者們認為:“大數據,正開啟一次重大的時代轉型。”世界知名的管理大師德魯克說:“當前社會不是一場技術戰,也不是軟件的速度的革命,而是一場觀念上的革命。”大數據時代,數據是一種技術,是一種資源,更是一種思維。我們已經走在大數據的路上,身臨這場偉大的變革,我們該如何應對?思路決定出路,基于大數據的相關理論與技術研究已成為學界的熱點課題,其管理及應用也引起了政府部門、產業界和應用行業的高度關注。
國家層面:應盡快將大數據提升為國家戰略
數據的作用在大數據時代前所未有地凸顯,被視為國家競爭的前沿及企業創新的來源,很多國家更是將大數據提升至國家戰略高度。
發達國家的大數據戰略
一直處于世界經濟發展及信息技術發展與應用前沿的美國,視大數據為“未來的新石油”,給發展大數據賦予了非同一般的戰略意義。2012年3月29日,奧巴馬政府宣布投資2億美元啟動“大數據研究和發展計劃”,同時組建“大數據高級指導小組”,涉及美國國家科學基金、國家衛生研究院、能源部、國防部等6個聯邦政府部門,提高從大量數據中訪問、組織、收集發現信息的工具和技術水平。“大數據研究和發展計劃”的提出,是繼1993年美國宣布“信息高速公路”計劃后的又一次重大科技發展部署,意味著美國將大數據的研發與應用提升到保障美國國家安全、加速科學研究步伐、引發教育和學習變革的高度,美國也成為全球首個將大數據從商業行為上升至國家意志和國家戰略的國家。除在國家層面部署“大數據戰略”外,美國政府還倡議企業、科研院校和非盈利機構一起集中資源,共同促進大數據發展。例如,伯克利加州大學、迪肯大學等專門開設了研究大數據的相關課程,培養下一代的“數據科學家”。
2012年9月,日本總務省發布的2013年行動計劃,提出以復蘇日本為目的推進“活躍在ICT(信息通訊技術)領域的日本”ICT綜合戰,明確提出“通過大數據和開放數據開創新市場”。這些表明,日本政府在新一輪IT振興計劃中把大數據發展作為國家層面戰略提出,新ICT戰略將重點關注大數據應用技術。
2013年2月,法國發布的政府《數字化路線圖》,將大數據列為國家創新戰略重點實施領域之一。法國政府將以新興企業、軟件制造商、工程師、信息系統設計師等為目標,開展一系列的投資計劃,旨在通過發展創新性解決方案,并將其用于實踐,來促進法國在大數據領域的發展。
澳大利亞在2013年發布了《大數據戰略報告》,將“促進數據開放和大數據發展”列為重大領域之一。
盡快制定我國的大數據戰略
大數據已被視為是與自然資源、人力資源一樣重要的一大戰略資源。大數據時代,國家層面的競爭力將一定程度體現在一國所擁有的大數據的規模以及對數據的解釋、運用能力。2011年,麥肯錫公司曾以2010年度各國新增的存儲器為基準,對全世界大數據的分布進行了研究,結果發現:中國這一年新增數據量約為250拍(PB,1000TB=1PB),日本為400拍,歐洲2000拍,而美國則為3500拍,中國的新增數據量不及美國的十分之一。與此相對應的另一組數據:中國擁有4.8億互聯網用戶,幾乎是美國的2倍;擁有近9億部手機,是美國的3倍,而互聯網和手機正是產生數據的重要來源。這意味著中國并不缺乏可供收集的數據,而是缺乏收集數據的意識。
不可否認,目前在我國無論是在收集數據的意識與質量,還是使用數據的習慣,亦或是對開放數據的態度都相對落后。這種落后的根源在于,從文化到制度層面我們都一直缺乏“數據意識”。這里所說的“缺乏”更多的是指我們對數據的敬畏與精準管理的缺失。將“大數據”作為一種國家戰略,首先需要我們從意識上加以轉變,繼而在此層面形成一種文化——數據文化。在知名旅美信息技術專家、中國數據文化的首倡者涂子沛看來,美國之所以繁榮鼎盛,數據文化根基牢不可破概是主因之一。“中國要在大數據時代的全球競爭中勝出,必須把大數據從科技符號轉變為文化符號,形成一種文化話語體系,在全社會倡導數據文化。”
在數據的使用層面,目前我國還缺少國家層面的專門適合數據使用及共享的國家法律,只有相關的條例、法規、章程、意見等。而美國在2000年便通過了《數據質量法》,對政府所發布數據質量進行了規范:任何聯邦政府部門收集的數據,必須無償與其他部門共享。而在發布數據時,必須同時發布一系列的文檔,說明數據的來源、產生的方法,以及用戶復制過程當中可能出現的問題和錯誤。
在大數據領域的滯后與落后,就意味著失守產業戰略制高點,意味著數字主權無險可守,意味著國家安全將出現漏洞。盡快研究并制定我國的大數據戰略可謂迫在眉睫,時不我待。“如果說收集數據、使用數據是一種文化和習慣,開放數據則是一種態度。”涂子沛強調。收集數據、使用數據、開放數據,是大數據時代我們需要一一面對的挑戰,建立數據大國、數據強國更應成為大數據時代我們所追尋的目標。
企業層面:積極布局大數據存儲、處理及應用
“面對海量數據,誰能更好地處理、分析數據,誰就能真正搶得大數據時代的先機。”大到國家治理,小至企業經營管理,概莫如此。對任何行業中的企業,擁有了相對全面的行業數據,就等于奪取了行業制高點。當前,我們的企業正處于全面轉型升級的進程中,在新需求、新競爭格局的背景之下,大數據的應用正在改變著各行各業。大數據背后所隱藏的巨大價值,也引起了各行各業的高度重視,成為眾多世界500強企業追捧的對象。在我國企業界,目前只有很少的企業開始探索接受大數據,絕大多數的企業還未真正認識到大數據的價值或僅停留在概念層面,對于大數據的運用不知道從哪里著手。
在電力行業,大數據的研究與應用業已得到了國內外電企的重視。電力大數據也成為大數據應用的重點領域之一。在電力行業,數據無處不在。從電能計量到設備檢修、巡視記錄,從調控監控信號到生產報修數據,從營銷MIS記錄到GIS地理信息系統……這些海量數據按類別進行分類,大致可分為三類:一是電力企業生產數據,如發電量、電壓穩定性等方面的數據;二是電力企業運營數據,如交易電價、售電量、用電客戶等方面的數據;三是電力企業管理數據,如人力資源、ERP、一體化平臺、協同辦公等方面的數據。面對貫穿電力工業生產及管理等各環節的電力大數據,要充分利用其隱藏的巨大價值,需要從內部應用和外部應用兩條主線上進行分析與梳理,找到大數據與業務結合的突破口。
國際電企的大數據應用
意昂集團(E.ON),歐洲最大的電力集團公司之一,兼營石油、貿易、運輸等業務,2013年在世界500強榜單上排名第15位,英、德等30多個國家的電網與發電企業都屬于該集團旗下資產,用戶數量超過2600萬人。2013年4月,該集團宣布攜手瑞典愛立信公司探索“大數據”。愛立信將向意昂集團出售相應的電網應用設備和軟件,用來將意昂旗下電網的數據傳輸量提高3000%。愛立信將幫助意昂對這些數據進行管理和分析,從而為企業經營服務。這次“大數據”合作顯示出意昂集團在未來對數據的依賴。
電力設備制造商西門子公司也宣布攜手全球領先的數據分析平臺、應用和服務供應商天睿(Teradata)公司進行“大數據營銷”,將電力企業設定為目標客戶,提供從智能電表到電網運行系統的設備制造與數據分析服務。此前,天睿公司已經和美國南加州愛迪生電力公司等電力企業建立和合作,對停電、電力供應、電力需求、天氣對電力供需的影響等數據進行精確地分析,從而為電網安全運行提供更可靠的參考依據。
美國加州大學洛杉磯分校的研究者根據“大數據”理論設計了一款“電力地圖”,將人口調查信息、電力企業提供的用戶實時用電信息和地理、氣象等信息全部集合在一起,制作了一款加州地圖。該圖以街區為單位,展示每個街區在當下時刻的用電量,甚至還可以將這個街區的用電量與該街區人的平均收入和建筑物類型等相比照,從而得出更為準確的社會各群體的用電習慣信息。該“大數據”地圖也為城市和電網規劃提供了直觀有效的負荷數預測依據,也可以按照圖中顯示的停電頻率較高、過載較為嚴重的街區進行電網設施的優先改造。
國內電企的大數據建設
我國電力行業的數據建設工作并非近幾年才開始著手啟動。2006年,國家電網公司便與世界著名咨詢公司埃森哲公司攜手啟動實施“SGl86工程”,旨在構建由信息網絡、數據交換、數據中心、應用集成、企業門戶5部分組成的一體化企業級信息集成平臺:實現信息縱向貫通、橫向集成,支撐集團化運作;建設公司總部、網省公司兩級數據中心,共享數據資源,促進集約化發展;部署公司總部、網省公司、地市縣公司三層業務應用,優化業務流程,實現精細化管理。經過幾年的信息化建設,目前國家電網公司已初步建成了國內領先、國際一流的信息集成平臺。
華能集團于2008年制定信息化規劃,目標是建立集團統一的生產管理平臺;華電集團在華電國際信息化基礎上,逐步將信息化應用統一到集團層面,建立了統一的生產系統和多業務平臺。2009年,國電集團啟動了信息化“193”工程建設,建設國電集團信息一體化信息平臺。建立包括生產、財務、人事、物質、燃料、基建、營銷、環保、信息、科技、外事、黨建、綜合等業務關鍵數據指標體系。建立統一的數據中心和數據交換平臺,實現集團本部、分子公司、電廠的關鍵信息和資料的數據資源整合和數據及時有效的分析,為各級管理人員、領導科學決策提供技術支撐和手段,保證生產經營管理信息匯集、分析、預測的準確性和實效性。
各大電力集團和電網公司所籌劃的上述系統集成平臺或一體化平臺,從本質上來看,均屬于大數據背景下的數據集成和分析、處理平臺。隨著“十八大”提出的“推動信息化和工業化深度融合”,各大電力企業進一步開始積極采用信息化手段來改造和提升整個企業的核心業務模式。進入2013年,拉開了大數據開發應用的序幕。信息化建設的重點是對已有系統進行集成整合、深化應用、對數據的挖掘和利用及IT系統的效益進行提升。
隨著信息化建設的不斷深入,信息化數據的大數據特征日益明顯,大數據的應用需求日益迫切。國家電網公司高度重視大數據技術的研究和應用,啟動開展了相關工作。為進一步明確公司大數據應用的總體原則及發展目標,確定頂層設計、標準體系、技術研究、解決方案及業務應用提升等各項任務,推動大數據在電力行業的應用,有效支撐信息化及智能電網建設,提高公司資源利用效率和業務處理能力,國家電網公司制定了《國家電網公司大數據應用指導意見》。同時,在北京亦莊、上海、陜西建立了三大電力大數據中心,其中北京亦莊大數據中心已安裝超過10200個傳感器。這三個大數據中心已經覆蓋了我國北方、南方以及西部內陸地區。這些數據中心的建立,為我國電力安全與電力信息化的長足發展奠定了基礎。2013年南方電網公司啟動一體化信息平臺建設。發電側,配合集團運作管理模式,五大發電集團目前正重構其信息系統以建立新的管理與運營模式,將建立統一的信息平臺作為信息化建設的重點。
對電力行業來說,大數據是電力企業深化應用、提升應用層次、強化集團企業管控的有力技術手段,在推動企業轉型升級中具有重要作用。盡快強化數據意識,重視對大數據價值的深入分析與挖掘,建立自己的數據戰略,推動企業決策機制從“業務驅動”向“數據驅動”轉變是我們的電力企業參與國際市場競爭的一條必選之路。
“得大數據者得天下”是一些推崇大數據時代的變革者堅信不疑的判斷,突顯了“獲取”數據的重要。然而,立身于大數據時代的我們,還應該更加專注于數據背后所潛在的價值,如何轉化和激發它們的潛能,賦予這些數字新的生命,創造出更大的價值駕馭未來,這才是大數據時代的真正意義之所在。數量化思維,用數據而非感覺進行判斷與決策,已成為眾多國際企業的一種信條,應用量化思維進行科學管理也應成為中國及中國企業努力的方向。相信隨著大數據的價值被進一步挖掘,定會為社會的發展注入更多的活力。