四問(wèn)大數(shù)據(jù)

大數(shù)據(jù)火了起來(lái)，甚至在前不久召開(kāi)的2013夏季達(dá)沃斯論壇上還專(zhuān)門(mén)舉辦了一場(chǎng)關(guān)于“大數(shù)據(jù)概念是否被過(guò)度炒作”的辯論會(huì)，其火熱程度可見(jiàn)一斑。

根據(jù)計(jì)世資訊2013年3月發(fā)布的中國(guó)大數(shù)據(jù)市場(chǎng)調(diào)查報(bào)告顯示，相較2011年，2012年中國(guó)大數(shù)據(jù)市場(chǎng)規(guī)模增長(zhǎng)52.4%，達(dá)到3.2億元。預(yù)計(jì)到2017年，中國(guó)大數(shù)據(jù)市場(chǎng)的年增長(zhǎng)率都將超過(guò)60%，到2017年，達(dá)到37.9億元的市場(chǎng)規(guī)模，在經(jīng)濟(jì)、整體IT市場(chǎng)低迷的情況下，實(shí)現(xiàn)大幅逆勢(shì)增長(zhǎng)。

在日前由《計(jì)算機(jī)世界》報(bào)主辦的“大數(shù)據(jù)時(shí)代的商業(yè)智能高峰論壇”上，來(lái)自IT廠商的代表、業(yè)內(nèi)專(zhuān)家、資深分析師及用戶(hù)代表就大數(shù)據(jù)熱門(mén)話(huà)題展開(kāi)了激烈的討論。

焦點(diǎn)一：

大數(shù)據(jù)是不是大忽悠？

IT技術(shù)的每一次更新迭代都面臨同樣的問(wèn)題，前兩年的云計(jì)算、如今的大數(shù)據(jù)無(wú)不如此。實(shí)際上我們回過(guò)頭來(lái)看，所有的技術(shù)和產(chǎn)業(yè)的發(fā)展都有泡沫化的過(guò)程，包括互聯(lián)網(wǎng)、金融危機(jī)、云計(jì)算、大數(shù)據(jù)，都會(huì)有一個(gè)泡沫化的過(guò)程，而泡沫破滅的過(guò)程也正是這項(xiàng)技術(shù)落地的過(guò)程。

大數(shù)據(jù)熱起因是其可以產(chǎn)生更多的價(jià)值，而在當(dāng)前這個(gè)時(shí)間點(diǎn)熱，一方面是越來(lái)越多的人意識(shí)到了其中的價(jià)值，另一方面則與技術(shù)的發(fā)展成熟密不可分。戴爾云計(jì)算及大數(shù)據(jù)高級(jí)解決方案架構(gòu)師郝繼玖和EMC資深技術(shù)顧問(wèn)楊永波在這個(gè)問(wèn)題上所持的觀點(diǎn)基本相同，他們認(rèn)為并不是之前沒(méi)有大數(shù)據(jù)，而是沒(méi)有能力處理。當(dāng)下這個(gè)時(shí)間點(diǎn)一方面是數(shù)據(jù)規(guī)模確實(shí)越來(lái)越大，而另一方面計(jì)算能力也達(dá)到了一定的水平，當(dāng)這兩者都具備的時(shí)候，才催生了大數(shù)據(jù)時(shí)代的到來(lái)。

作為用戶(hù)代表，IDG集團(tuán)中國(guó)區(qū)副總裁、計(jì)世傳媒集團(tuán)董事許偉明表示認(rèn)同，他認(rèn)為主要是當(dāng)前IT系統(tǒng)的計(jì)算能力和成本都已經(jīng)降低到了可以負(fù)擔(dān)的水平，由此推動(dòng)了大數(shù)據(jù)的快速發(fā)展。

作為大數(shù)據(jù)領(lǐng)域的專(zhuān)家，北京理工大學(xué)計(jì)算機(jī)學(xué)院院長(zhǎng)助理、大數(shù)據(jù)搜索與挖掘?qū)嶒?yàn)室主任張華平副教授表達(dá)了他的看法。他表示，雖然當(dāng)前大數(shù)據(jù)還停留在泡沫階段，不過(guò)大數(shù)據(jù)的泡沫不會(huì)比云計(jì)算大，因?yàn)樵朴?jì)算更多涉及的是架構(gòu)問(wèn)題，業(yè)內(nèi)分歧比較多，而大數(shù)據(jù)關(guān)注的只是業(yè)務(wù)，更加專(zhuān)注，因此也會(huì)更快地實(shí)現(xiàn)落地。

焦點(diǎn)二：

上馬大數(shù)據(jù)要做哪些準(zhǔn)備？

根據(jù)計(jì)世資訊發(fā)布的大數(shù)據(jù)市場(chǎng)調(diào)研報(bào)告顯示，未來(lái)半數(shù)以上的企業(yè)會(huì)采用大數(shù)據(jù)解決方案。用戶(hù)如果真的要部署大數(shù)據(jù)解決方案，要做哪些準(zhǔn)備？

了解需求、獲得老板的認(rèn)可，是首先要考慮的。許偉明認(rèn)為，從公司角度來(lái)看，最大的問(wèn)題是如何獲得老板的支持；而從業(yè)務(wù)層面出發(fā)，則需要考慮實(shí)際的需求。比如你所處的企業(yè)如果數(shù)據(jù)量很大，則需要在IT架構(gòu)上做準(zhǔn)備，考慮包括數(shù)據(jù)是怎么收集的、從哪里收集、如何與其他數(shù)據(jù)進(jìn)行匹配等問(wèn)題。而在操作過(guò)程中，則可以首先嘗試一些開(kāi)源的工具進(jìn)行小范圍測(cè)試，做一些基本了解，然后再找相關(guān)的專(zhuān)家仔細(xì)進(jìn)行評(píng)估。

這僅僅是最基礎(chǔ)的部分，在此之上，企業(yè)還要將項(xiàng)目與整體業(yè)務(wù)緊密地聯(lián)系在一起。因?yàn)槿绻皇菃为?dú)考慮某一部分的業(yè)務(wù)，失敗的概率非常大。楊永波表示，從IT架構(gòu)層面來(lái)講，很多數(shù)據(jù)的獲取并不容易，打通所有層級(jí)、部門(mén)的數(shù)據(jù)是比較難的，但是只有把信息打通了，才擁有了真正的大數(shù)據(jù)。

郝繼玖則進(jìn)一步做了補(bǔ)充：“大數(shù)據(jù)相應(yīng)的IT架構(gòu)搭建完成后，還需要考慮服務(wù)的標(biāo)準(zhǔn)化，因?yàn)殡S著數(shù)據(jù)量、設(shè)備及人員的增加，如何分工、保證高質(zhì)量的運(yùn)維效果是需要迫切考慮的問(wèn)題，這個(gè)過(guò)程就需要建立統(tǒng)一的服務(wù)標(biāo)準(zhǔn)和流程。”

除了技術(shù)層面的問(wèn)題外，還有一個(gè)很大的問(wèn)題就是隱私問(wèn)題。張華平講到，現(xiàn)在有很多大數(shù)據(jù)隱私被濫用的問(wèn)題，無(wú)論從國(guó)家還是公司層面來(lái)講，要想把大數(shù)據(jù)做好，都面臨數(shù)據(jù)公開(kāi)的問(wèn)題，需要各個(gè)部門(mén)數(shù)據(jù)的融合。因此，利用大數(shù)據(jù)的時(shí)候，要考慮隱私的問(wèn)題。另外，還需要考慮數(shù)據(jù)本身的生命周期問(wèn)題，有一些老的或者過(guò)時(shí)的數(shù)據(jù)，可能對(duì)你最后的分析結(jié)果產(chǎn)生特別糟糕的影響。因此，專(zhuān)業(yè)的人才不可或缺，應(yīng)該有一些數(shù)據(jù)分析師，或者跟業(yè)務(wù)相關(guān)的數(shù)據(jù)科學(xué)家對(duì)數(shù)據(jù)進(jìn)行分析。

焦點(diǎn)三：

用開(kāi)源平臺(tái)還是商業(yè)軟件？

一提到大數(shù)據(jù)很多人會(huì)想到Hadoop。作為開(kāi)源平臺(tái)的忠實(shí)支持者，張華平認(rèn)為做開(kāi)源和共享平臺(tái)，從最終的情況來(lái)看，獲取的價(jià)值更大。因?yàn)殚_(kāi)源軟件參與的用戶(hù)多，反饋多，更容易改進(jìn)和完善。

不過(guò)，楊永波并不這么看，他認(rèn)為Hadoop不等于大數(shù)據(jù)，針對(duì)非結(jié)構(gòu)化數(shù)據(jù)的分析，Hadoop是比較好的平臺(tái)，也是現(xiàn)在被廣泛接受的平臺(tái)。但也正因?yàn)槠涫情_(kāi)源平臺(tái)，也存在一些弊端，比如服務(wù)質(zhì)量無(wú)法保證。另外，Hadoop有很多版本，要真正實(shí)現(xiàn)商用，需要用戶(hù)具備足夠高的技術(shù)水平。因此，用戶(hù)在選擇時(shí)并不能一味追求開(kāi)源，需要綜合考慮自己的情況。

對(duì)此，許偉明表示認(rèn)同楊永波的觀點(diǎn)，他認(rèn)為無(wú)論是開(kāi)源還是商業(yè)軟件，最重要的還是服務(wù)質(zhì)量、服務(wù)速度，不能一味考慮成本問(wèn)題。

郝繼玖表示：“大數(shù)據(jù)發(fā)展速度越來(lái)越快，給IT市場(chǎng)帶來(lái)的空間也越來(lái)越大。因此，在開(kāi)源平臺(tái)方面，我們一直在積極參與，推動(dòng)行業(yè)的發(fā)展。戴爾并不提供大數(shù)據(jù)運(yùn)行平臺(tái)，提供的只是其中的計(jì)算能力。”

焦點(diǎn)四：

大數(shù)據(jù)時(shí)代，安全如何保證？

大數(shù)據(jù)并沒(méi)有人排斥，但在記者采訪(fǎng)過(guò)程中，經(jīng)常有用戶(hù)問(wèn)這樣的問(wèn)題：如何保證我的信息安全，如果無(wú)法保證安全，大數(shù)據(jù)還上不上？對(duì)此，張華平一語(yǔ)中的，“我們不會(huì)因?yàn)楦哞F出事不坐高鐵，不會(huì)因?yàn)轱w機(jī)出事不坐飛機(jī)，大數(shù)據(jù)是科技發(fā)展的趨勢(shì)，但要把握好方向，這需要法律的完善。”

張華平的觀點(diǎn)得到了與會(huì)嘉賓的贊同。郝繼玖認(rèn)為，數(shù)據(jù)是把雙刃劍。消費(fèi)者網(wǎng)購(gòu)時(shí)需要提供家庭地址，才能給你運(yùn)過(guò)來(lái)，這是經(jīng)過(guò)同意獲取你的信息，因?yàn)橛辛己玫姆森h(huán)境進(jìn)行統(tǒng)一管理，所以買(mǎi)家不用那么擔(dān)心；而生活中很多時(shí)候是濫用信息的收集，是在用戶(hù)不知情的情況下搜集你的信息，這就需要相應(yīng)立法進(jìn)行保護(hù)。大數(shù)據(jù)也是類(lèi)似的，只讓適合的人利用我的數(shù)據(jù)。另外，關(guān)于大數(shù)據(jù)的報(bào)道，未來(lái)也要有嚴(yán)格的法律保護(hù)體系，保證我的數(shù)據(jù)不被泄露出去。

許偉明還在此基礎(chǔ)上提到了平衡，他講到，一個(gè)信息點(diǎn)傳播出去，對(duì)某個(gè)人而言，可能是隱私受到了侵犯，但從另一個(gè)角度來(lái)看，你把互聯(lián)網(wǎng)當(dāng)成是一個(gè)系統(tǒng)，你不斷地訓(xùn)練這個(gè)系統(tǒng)，讓其更好地為你服務(wù)，其實(shí)也不是壞事。“我們做媒體的，研究的大數(shù)據(jù)就包括精準(zhǔn)的廣告投放。比如在你閱讀的時(shí)候，獲得了你想要的廣告信息，對(duì)用戶(hù)而言也不是壞事。再比如你在研究旅行的時(shí)候，給你一些旅行社的信息，或者給你一些比較便宜的飛機(jī)票等，相信客戶(hù)還是愿意看的。實(shí)際上你可以有意識(shí)地泄露一些你的信息，這樣系統(tǒng)會(huì)分析你的數(shù)據(jù)，真正地幫助你，所以我覺(jué)得沒(méi)必要恐懼。而惡意的信息收集、未經(jīng)用戶(hù)允許收集的信息，都是違法的。這其中就需要平衡，不能因?yàn)橛锌赡鼙恍孤峨[私就不用大數(shù)據(jù)。”

鏈接

2013大數(shù)據(jù)平臺(tái)最佳創(chuàng)新產(chǎn)品獎(jiǎng)

Dell PowerEdge C8000

數(shù)據(jù)中心基礎(chǔ)設(shè)施解決方案獎(jiǎng)

Nutanix虛擬計(jì)算平臺(tái)

2013大數(shù)據(jù)優(yōu)秀解決方案

帝聯(lián)科技“云主機(jī)解決方案”

南大通用GBase 8a數(shù)據(jù)庫(kù)

Informatica PowerCenter大數(shù)據(jù)版

2013大數(shù)據(jù)優(yōu)秀產(chǎn)品獎(jiǎng)

華為12800交換機(jī)

浪潮云海大數(shù)據(jù)一體機(jī)

SAS可視化分析平臺(tái)

知意圖精準(zhǔn)推薦系統(tǒng)

2013大數(shù)據(jù)人才培養(yǎng)貢獻(xiàn)獎(jiǎng)

慧科教育

大數(shù)據(jù)時(shí)代的商業(yè)智能高峰論壇召開(kāi)

繼移動(dòng)互聯(lián)、云計(jì)算之后，大數(shù)據(jù)再次挑動(dòng)整個(gè)IT產(chǎn)業(yè)的神經(jīng)。9月12日，在《計(jì)算機(jī)世界》舉辦的“大數(shù)據(jù)時(shí)代的商業(yè)智能”高峰論壇上，來(lái)自大數(shù)據(jù)和商業(yè)智能領(lǐng)域的眾多專(zhuān)家、學(xué)者和用戶(hù)，圍繞大數(shù)據(jù)的基礎(chǔ)架構(gòu)與上層應(yīng)用的建設(shè)以及如何推動(dòng)大數(shù)據(jù)落地來(lái)激發(fā)企業(yè)的競(jìng)爭(zhēng)力和創(chuàng)造力進(jìn)行了深入的探討。作為IT行業(yè)的領(lǐng)導(dǎo)者，戴爾、EMC等知名廠商參加了本次大會(huì)并做了主題演講。

誘人的市場(chǎng)規(guī)模吸引了眾多廠商的加入，而越來(lái)越多的用戶(hù)也因?yàn)榭春闷鋸V闊的應(yīng)用前景而紛紛投身其中。為了鼓勵(lì)大數(shù)據(jù)相關(guān)廠商的技術(shù)和產(chǎn)品創(chuàng)新，推動(dòng)大數(shù)據(jù)技術(shù)的順利落地，本屆大會(huì)還為一批優(yōu)秀的產(chǎn)品及解決方案進(jìn)行了頒獎(jiǎng)，具體獲獎(jiǎng)名單如左表。