Cloudera：針對Hadoop的三大預測

陳曲

1月29日，正值Hadoop十周年生日，作為大數據技術創新的積極推動者和倡導者，Cloudera在京舉行了Hadoop十周年暨Cloudera新春媒體見面會。會上Cloudera全球副總裁大中華區總經理凌琦分享了Hadoop及其演變的歷史， 闡述了Cloudera商業模式和行業領先地位，以及Hadoop在2016年的展望。凌琦表示，Cloudera將致力于喚醒沉睡在中國的大數據商業價值，從而幫助企業通過大數據處理和分析加速洞察的獲取效率。

眾所周知，2015年又是Apache Hadoop標志性的一年。就在我們認為2015年就這樣過去了，真正的Hadoop時代卻來臨了，我們有很多事情需要繼續做下去。我們看到Apache Spark已經成為主流 ，Kudu（孵化中）的全新儲存能力也加入進來，安全也更加卓越。難以想像后面還會有什么，但這正是Hadoop的美妙之處：永不止步、無限可能。至于結果，我們總是驚奇地拭目以待。

2016年我們的期望是什么？當然，沒有人能未卜先知，但有幾件事我們認為將可能會發生。

Hadoop將更加隱形

這不是一個新的觀點，早在去年，Mike Olson（Cloudera聯合創始人兼首席戰略官）就在紐約Strata Hadoop世界大會的演講中提出這個說法（意思是用戶真正在乎基于Hadoop的平臺和能達到的業務結果，而不是Hadoop本身）。這一觀點有必要重新提起。Hadoop之初的用例定位就是一個經濟型的深度存儲和數據處理平臺，我們陸續看到如今大大小小的企業都在用這個平臺進行創新部署，涉及的應用也越發廣泛。

比如像包括True 和英國電信（BT）這樣的通信服務供應商正在致力于構建一些應用可以對客戶跨業務形成360度視角，重新調整了與客戶的交互行為方式;金融服務機構，就像Northern Trust，優化了其服務交付，對付款流程采取實時健康監測。一些跨行業的通用應用也在革新，比如Countertack，就在為各行各業為安全擔憂的企業提供創新的網絡安全解決方案。

技術將被廣泛使用

在Cloudera學術合作伙伴（CAP）中，Cloudera非常自豪已經有超過100名合作伙伴，這無疑是一個重要的里程碑，有助于Cloudera培養未來所需的Hadoop技術專家。隨著時間的推移，越來越多掌握Hadoop技術的人們進入工作崗位為他們帶來成功。這的確是朝著正確方向邁進的一大步，但并不是全部。

除了獲得必要的技能，對于企業來講，更大的挑戰是如何判斷和評估Hadoop的最佳適用。歲末年初，話題已經從“是什么”和“為什么”轉向“怎么做”。 使用Hadoop來進行平臺重構時，技術本身只是等式的一部分，眾多企業意識到他們同樣需要考慮人員及流程變動的因素，懂得如何去把握所有變化是一項十分艱巨的工作。

2016年，我們將看到成功之路上人們對教育的渴望。“今天的關鍵著手點是什么？”、“一旦實施，我將如何調整？”、“我如何從部門小項目提升為整個企業的計劃？”所有這些問題都需要解決。科技只是拼圖的一角，當越來越多的企業停下腳步自我審視，企業處在何地，將去向何方，經過一番深思熟慮，技術才會更加普及，過程才會更加流暢。

就自身而言，Cloudera將盡可能的簡化產品。Cloudera Navigator Optimizer 讓工作負載更加可視化，有助于客戶了解如何最大化利用Hadoop平臺，減少開發時間并提高性能。這樣的不斷提升，Cloudera的技術也會更容易被客戶接納。

物聯網機遇下的云

談到最火爆的流行詞，“物聯網”據稱是大數據時代以來出現頻率最高的詞匯之一。無論是否言過其實，“物聯網”會隨著時間的推移而越發火爆，“云”也是一樣。對于Hadoop而言，“云”將繼續走在前沿，因為數據越來越多地從本地遷移到云上。

在最近的一次網絡研討會上，Cloudera問參會者他們中有多少數據是存儲在云上而不是本地的，結果不出所料，45%的人回答到他們的所有數據都是本地存儲的，大概一些企業也是如此。相反，只有33%的人希望在2020年前，他們的數據可以實現云存儲。很難預見什么時候所有的數據都會存儲在云上。但是這個調研清晰地告訴我們，數據對混合云模式的轉變，我們認為Hadoop部署也是同樣。

在一個專門討論如何在AWS上成功部署生產環境的網絡研討會上，54%的調查者表示在云上Hadoop的復雜性是導致他們不用云部署的原因。這也是為什么Cloudera要投資開發Cloudera Director這樣的工具來簡化云部署技術，我們也會持續提高整個平臺的易用性。

“物聯網”會是我們在將來聽到更多的詞。Cloudera的客戶長期以來一直活躍于物聯網領域。舉個例子，Vivint使用Cloudera為用戶提供物聯網解決方案，提升了家居聯網的同時也改進了服務體驗。另一個例子，Omneo推動工業化物聯網領域，實時優化供應鏈，通過這種方法節省了1500-2000萬美元。無論是升級用戶體驗，還是數據驅動產品，預計物聯網在未來都會是各個領域人們的熱門話題。