
毋庸置疑,“大數(shù)據(jù)”是時下最火熱的IT行業(yè)名詞。雖然與之相關(guān)的數(shù)據(jù)倉庫、數(shù)據(jù)安全、數(shù)據(jù)分析、數(shù)據(jù)挖掘等名詞外行云山霧罩,但不可否認(rèn)的是,大數(shù)據(jù)正在影響著我們的生活,而圍繞大數(shù)據(jù)的商業(yè)價值的顯示利用,也正成為當(dāng)前又一個利潤的競爭焦點(diǎn)。
來自美國互聯(lián)網(wǎng)數(shù)據(jù)中心的統(tǒng)計顯示,在互聯(lián)網(wǎng)上,數(shù)據(jù)每年會增長50%,每兩年便將翻一番,而目前世界上90%以上的數(shù)據(jù)都是最近幾年才產(chǎn)生的。
現(xiàn)實(shí)問題是,越來越接近天文數(shù)字的大數(shù)據(jù),該用什么樣的存儲能裝得下、存儲得好?來自英特爾中國研究院的科學(xué)家們,正在進(jìn)行一種分散式內(nèi)存池和存儲緩沖研究,力圖打造一個可擴(kuò)展的內(nèi)存池架構(gòu)并找到一種最佳方式,使其可以應(yīng)用于大型數(shù)據(jù)中心。
大數(shù)據(jù)時代需要最好的資源配置
大數(shù)據(jù)包含的內(nèi)容,并非單純指依托于互聯(lián)網(wǎng)的信息,目前全世界的各種工業(yè)設(shè)備、汽車、電表上的無數(shù)數(shù)碼傳感器,它們隨時測量和傳遞的有關(guān)位置、運(yùn)動、震動、溫度、濕度等變化產(chǎn)生的海量數(shù)據(jù)信息,也屬于大數(shù)據(jù)的范疇。特別是近年異軍突起的社交網(wǎng)絡(luò)和搜索,一度使得大數(shù)據(jù)除了海量的資源表現(xiàn)外,也更加具有現(xiàn)實(shí)的價值。
比如通過谷歌搜索、Facebook看到的帖子和微博消息,就能對人們的行為和情緒的細(xì)節(jié)化測量成為可能。挖掘用戶的行為習(xí)慣和喜好,凌亂紛繁的數(shù)據(jù)背后找到更符合用戶興趣和習(xí)慣的產(chǎn)品和服務(wù),并對產(chǎn)品和服務(wù)進(jìn)行針對性地調(diào)整和優(yōu)化,這就是大數(shù)據(jù)的價值。此外,物聯(lián)網(wǎng)上也會產(chǎn)生海量的數(shù)據(jù),從數(shù)據(jù)量來說,當(dāng)前硬件的發(fā)展明顯已跟不上數(shù)據(jù)擴(kuò)展的速度。
數(shù)據(jù)中心往往需要最好的資源配置,只有這樣,應(yīng)用程序才能在其中更為高效地運(yùn)行。同時,數(shù)據(jù)中心也需要最高的資源利用率,這樣才能降低運(yùn)營成本。而這些都需要一個經(jīng)濟(jì)劃算、可擴(kuò)展且可重組的計算、存儲或網(wǎng)絡(luò)資源池,它完全不同于目前獨(dú)立服務(wù)器所采用的單一服務(wù)器配置。對于大型數(shù)據(jù)中心來說,這一點(diǎn)甚至更加重要。
像搭積木一樣搭建數(shù)據(jù)中心
作為社交網(wǎng)絡(luò)的一面旗幟,F(xiàn)acebook這樣的行業(yè)領(lǐng)先者,正致力于定制化數(shù)據(jù)中心構(gòu)建模塊,來滿足以上種種要求。數(shù)據(jù)中心里的存儲和網(wǎng)絡(luò)也正接受重新檢查與設(shè)計。
目前的典型成品服務(wù)器一般有很多CPU、特定內(nèi)存容量、很多硬盤和一個以太網(wǎng)接口,而模塊構(gòu)建組建只要一到兩種設(shè)備資源和一個快速互聯(lián)。通過這種方法,用戶可以輕松拓展、替代或升級特定資源,如CPU,以此來滿足業(yè)務(wù)要求,而無需浪費(fèi)其他資源。不同于目前十分嚴(yán)重的資源浪費(fèi)現(xiàn)象,數(shù)據(jù)中心將可以像樂高積木一樣隨意搭建,同時還確保數(shù)據(jù)中心能為現(xiàn)在和未來業(yè)務(wù)提供支持,有了這樣的技術(shù),用戶便可以盡情享受身處其中的自由感。為了實(shí)現(xiàn)這一點(diǎn),未來還需要更高速、更高帶寬的互聯(lián),使這樣的資源解聚變?yōu)楝F(xiàn)實(shí)。
硅光電技術(shù)鋪路
20世紀(jì)60年代,激光器首次問世,它能產(chǎn)生、放大各種光線。發(fā)展到今天,人們已經(jīng)可以利用激光器產(chǎn)生各種超高帶寬、超長距離、免受電噪聲干擾的激光,以此推動了高速通信的巨大發(fā)展。自從1959年集成電路發(fā)明以來,大批量、低成本制造高集成、可擴(kuò)展的電路成為現(xiàn)實(shí),半導(dǎo)體行業(yè)不斷推動計算性能的提升和成本的降低。如果讓在硅材料中傳播接近真空光速的激光進(jìn)入高集成度的硅元件中,進(jìn)行數(shù)據(jù)與信號的傳輸,將會為計算與通信帶來怎樣的革命7這兩者的結(jié)合就是硅光電技術(shù)。
其實(shí)早在2010年,英特爾便研發(fā)成功了硅光電技術(shù)。硅光電技術(shù)的突破使其成為高速、高帶寬、低功率且具成本效益的互相連接的最佳候選技術(shù)。目前,這種技術(shù)能夠很好地以每秒100G比特的速度運(yùn)行,而且不會中止。它可以通過WDM(波分復(fù)用)技術(shù)達(dá)到每秒1TB的傳輸速率,而且10年內(nèi)這一數(shù)字還會更高。硅的特點(diǎn)使它在成本上非常有競爭力。所有這些加在一起,使得硅光電成為滿足大型數(shù)據(jù)中心互聯(lián)要求的最理想技術(shù)。