大數(shù)據(jù)服務(wù)無處不在 Cloudera又該如何應(yīng)變？

IT業(yè)界有兩大發(fā)展潮流，一個是大數(shù)據(jù)產(chǎn)業(yè)將顛覆傳統(tǒng)的商業(yè)模式，另一個是云計算將改變傳統(tǒng)的IT架構(gòu)服務(wù)方式。那么當大數(shù)據(jù)“邂逅”云計算，它們會擦出怎樣的“愛情”火花呢？
　　
大數(shù)據(jù)服務(wù)無處不在 Cloudera又該如何應(yīng)變？

 

　　2016年11月10日，筆者有幸采訪到Cloudera云計算工程副總裁Vikram Makhija先生，就大數(shù)據(jù)與云計算如何結(jié)合這個問題進行了探討，通過此次采訪，使得我對Cloudera的云策略有了更深層次的了解。
　　
　　大數(shù)據(jù)時代急需Hadoop平臺
　　
　　對于大數(shù)據(jù)這個概念，相信現(xiàn)在對于任何人都不陌生。我們生活在一個數(shù)據(jù)爆炸的時代，據(jù)預(yù)測，到了2020年，全球人口將達到77億，移動終端能夠達到1000億，產(chǎn)生的數(shù)據(jù)量將更是達到40ZB。
　　
　　當然，現(xiàn)在人們談到大數(shù)據(jù)，總會講到大數(shù)據(jù)的4個"V"，而人們最看重的是大數(shù)據(jù)Value(價值)，但同樣要想得到大數(shù)據(jù)中的數(shù)據(jù)價值，成為企業(yè)商業(yè)模式的推動力，那么就需要解決大數(shù)據(jù)另外3個"V"的挑戰(zhàn)，他們包括Volume(大量)、Velocity(高速)、Variety(多樣)。
　　
　　那么如何從龐大、復(fù)雜、多樣數(shù)據(jù)中挖掘出重要的商業(yè)價值呢？Hadoop相信大家都聽說過了。在大數(shù)據(jù)產(chǎn)業(yè)發(fā)展過程中，以Hadoop為代表的開源大數(shù)據(jù)生態(tài)成為大數(shù)據(jù)和云計算的重要技術(shù)支撐，有效推動了開源社區(qū)的用戶和貢獻者，帶動了大數(shù)據(jù)行業(yè)的技術(shù)進步與商業(yè)發(fā)展。
　　
　　由于Hadoop深受客戶歡迎，許多公司都推出了各自版本的Hadoop，也有一些公司則圍繞Hadoop開發(fā)產(chǎn)品。在Hadoop生態(tài)系統(tǒng)中，規(guī)模最大、知名度最高的公司則是Cloudera，其最早的Hadoop商業(yè)刊發(fā)版CDH廣為人熟知。
　　
　　云計算讓大數(shù)據(jù)服務(wù)無處不在
　　
　　從2008年創(chuàng)建成立，到2014年進入中國，到如今開始為大量中國客戶提供大數(shù)據(jù)處理服務(wù)，Cloudera發(fā)展非?？焖佟Ｖ档米⒁獾氖?，Cloudera還和Intel在開源方面進行合作，在基于開放的Intel平臺硬件上做大量優(yōu)化，讓Cloudera產(chǎn)品在英特爾硬件平臺發(fā)揮更佳的作用。
　　
　　Hadoop版對于企業(yè)客戶的價值是什么？Vikram Makhija先生表示："并不是所有的客戶都有能力去自己研發(fā)Hadoop產(chǎn)品，但是對Hadoop需求的用戶卻非常多，我們對針對這些沒有能力自己研發(fā)Hadoop產(chǎn)品的客戶，給他們提供一個安全、穩(wěn)定、可靠的Hadoop平臺，讓他們可以輕松的使用Hadoop版本來為自己服務(wù)。"
　　
　　在云計算時代，Cloudera也推出了適合用戶采用的結(jié)合云的方案，Cloudera可以讓客戶無論在什么樣的云的環(huán)境上都可以接受成功?？蛻舨捎玫臒o論是公有云或者是私有云，Cloudera都有關(guān)于對Hadoop工作運行的支持選擇。而且無論是在哪種選擇上，客戶都能產(chǎn)生最好的結(jié)果。
　　
　　目前，Cloudera逐漸在加強生態(tài)建設(shè)方面的合作，無論客戶在什么云上面Cloudera都能提供服務(wù)能力，Cloudera在生態(tài)建設(shè)方面做了很大努力。目前，Cloudera跟國外的AWS，微軟等都有密切的合作，這種合作也會在中國繼續(xù)為中國客戶提供服務(wù)。同時，Cloudera也正在與國內(nèi)的云服務(wù)提供商商談合作。
　　
　　Cloudera已為云時代準備就緒
　　
　　值得一提的是，Cloudera在今年又發(fā)布了大數(shù)據(jù)部署和管理工具Cloudera Director 2.0。Vikram Makhija先生表示，新版Cloudera Director簡化了在云端執(zhí)行Hadoop的工作。
　　
　　Cloudera Director有助于客戶更方便地跨各種云環(huán)境部署和管理Cloudera Enterprise集群生命周期?？蛻艨梢赃x擇用于AWS、谷歌云平臺(Google Cloud Platform)和Microsoft Azure的模板，以快速完成配置、增大/縮小集群規(guī)模以及終止集群，客戶還能夠從一個統(tǒng)一的界面監(jiān)控和管理所有集群。
　　
　　據(jù)Vikram Makhija先生介紹，相對于Cloudera競爭的友商，Cloudera認認為他們在云上管理的工具比他們更加的完善，類似于Cloudera Director這樣的部署，Cloudera都是在這里面提供比他們更有競爭能力的管控工具，能夠幫助到我們的企業(yè)客戶去部署自己的大數(shù)據(jù)平臺。
　　
　　對于很多用戶對云的懷疑態(tài)度，Vikram Makhija先生表示，其實很多客戶對遷移到云都是小心翼翼的，通常是先把一些并不太重要的系統(tǒng)先往云上去遷。但Cloudera的很多客戶已經(jīng)過了那個時期，很多很重要的客戶已經(jīng)把自己核心的業(yè)務(wù)遷移到云上面，依賴于云和Cloudera公司的服務(wù)來支撐他們的核心業(yè)務(wù)。Cloudera已經(jīng)為客戶上云準備就緒。
　　
　　關(guān)于安全這一塊， Cloudera一直是在安全性這方面有很大的投入。大家可以看到Cloudera Navigator一直以來在數(shù)據(jù)的審計和數(shù)據(jù)的溯源方面都可以提供這樣的功能，包括Cloudera Kerberos驗證工具，Cloudera在安全方面提供了全棧的能力。做好大數(shù)據(jù)平臺的安全管控，這也是Cloudera優(yōu)勢的所在。
　　
　　總結(jié)：
　　
　　可以說，沒有大數(shù)據(jù)的信息，則云計算的計算能力再強大，也難以找到用武之地;沒有云計算的處理能力，則大數(shù)據(jù)技術(shù)再出色，也終究難以更好的服務(wù)客戶。Cloudera將云和大數(shù)據(jù)很好的結(jié)合起來，為客戶帶來更出色的服務(wù)，必將成為大數(shù)據(jù)行業(yè)的首選。