Cloudera是2008年成立的大數據分析公司，在許多人還不知道大數據和云計算的概念的時候，Cloudera就已經開始提供基于開源Hadoop的企業大數據服務了。2018年，在新的發展形勢下，Cloudera與同樣基于Hadoop的開源大數據公司Hortonworks宣布合并，開源大數據服務市場變天了。

近兩年時間以來，Cloudera和Hortonworks在不斷融合，也樹立了要成為成為一家企業數據云公司的新定位，兩條產品線在不斷借鑒和打磨中迎來了全新一代產品，Cloudera Data Platform，簡稱CDP，在產品融合中，Cloudera使用了容器技術，讓大數據架構變得非常現代化，容器化技術的加入，為Cloudera的新品帶來了諸多方面的優勢。

Cloudera CDP，合二為一的企業數據平臺

Cloudera大中華區總經理徐晉在介紹CDP時說，它結合了Cloudera原來的CDH跟Hortonworks原來的HDP，并且選取兩個產品當中最精華的部分融為一體，它被稱之為Cloudera Runtime，它集成了Apache開源社區將近30多個開源項目，經過研發測試、整合，最后提供一個可靠的基礎的大數據運行環境。

基于這樣一個平臺，Cloudera可提供六方面的能力。

第一個是Data Hub的數據接入能力，它可以提供一個用來集中存放數據、管理數據的能力。第二個是Data Flow & Streaming的數據收集傳輸能力，CDP有一系列實時數據處理方案，常見比如有Apache Kafka。

第三塊是Cloudera Data Engineering的批處理能力，顧名思義主要就是用來做批量數據處理。

第四塊是Cloudera Data Warehouse的數據倉庫服務，它可以替換原有的傳統數據倉庫，類似于一些在銀行等領域經常可以看到的MPP類型的數據倉庫。

第五塊是Operational Database，是包括Hbase在內的一些實時的非結構化數據庫，能夠提供互聯網級別的對外服務能力。

最后一塊是機器學習平臺，將AI能力賦能給用戶，幫助企業將AI在企業內部里面真正的推廣開來，讓企業作出基于數據驅動的決策。

在六大核心能力之上，CDP還有一個獨特的數據管理層——SDX，即共享數據體驗，在SDX的幫助下，所有存放在Cloudera平臺上的數據，無論是在做批量處理，還是做報表，還是用于機器學習，所有數據的使用都會提供統一的數據管理、統一的數據目錄、統一數據的安全管控，提供同一套數據治理控制的機制。

Cloudera CDP優化了使用體驗，首先它上手非常簡單，可以像使用公有云服務一樣使用該平臺，通過按紐配置就能部署上線應用，值得一提的是，它的一些用戶界面是面向業務部門來設計的，非常界面友好，甚至業務部門可以做自主服務。

Cloudera CDP推出了私有云版本和公有云PaaS服務兩種形式，支持混合云的部署方式，既可以部署在企業自己的數據中心、私有云環境，也可以部署在AWS、Azure等公有云以及多云環境，即使用戶在不同環境下，也能有近乎一致的使用體驗。

容器為Cloudera CDP帶來了諸多方面的優勢

在真實的企業環境中，部署和應用數據系統其實是非常復雜的一件事，常常面臨諸多方面的問題，這些問題因為新的容器技術的引入在很大程度上得到了解決。由于歷史原因，用戶內部經常會有許多過去已經設立的項目，這些項目中有很多都有重復性，久而久之，系統中的數據冗余現象就越來越明顯，數據使用效率也是越來越低。由于容器技術的引入，全新的CDP可以很好地從技術層面解決這一問題。

作為非常現代化的方案，在技術架構上，Cloudera CDP采用了容器技術，由于Hadoopp包含的組件非常多，部署非常麻煩，以前需要幾個星期才能完成的部署，現在用了容器化之后大概只需要幾分鐘。

不僅如此，由于采用了容器技術，所以，平臺還可以為某個應用設定特定該版本的計算引擎，而無需關注別的應用對應的計算引擎，當用戶喜歡新版本的計算引擎的某些新特性的時候，可以自由升級到新版本，無需關注別的計算引擎的版本。

容器不僅能讓系統承載不同的軟件版本，而且還能提供彈性伸縮能力。當系統中運行著來自多個租戶的不同應用時，如果沒有好的資源隔離，應用之間會相互搶占資源，如果有些關鍵工作負載的SLA受到影響的話，運維人員就會采取一些簡單粗暴的方法，比如把非關鍵型工作負載關停，而有了容器技術后，它帶來的彈性伸縮能快速靈活作出響應。

作為一款企業級數據平臺，Cloudera非常重視數據安全性和管控的機制。Cloudera追求的是無論用戶在哪里運行其數據資產，都能確保一致的數據安全性，能對數據進行有效的治理，對數據的來龍去脈以及血緣關系進行跟蹤，對數據進行加密等等，可以在整個企業范圍內確保數據的安全。

作為一款全球范圍內都非常有影響力的大數據平臺，Cloudera CDP發布前在全球范圍內有許多用戶試用，在中國，Cloudera與上海的浦發銀行的聯合實驗室也在做相關驗證。全球范圍內，有許多與Cloudera在產品層面有深入合作的客戶，這些用戶會率先嘗試許多新產品，Cloudera CDP目前也得到了許多積極反饋。

100%代碼開源

作為一個融合了Cloudera CDH和Hortonworks HDP平臺的產品，原來的用戶都可以升級到新的CDP平臺上，用戶不需要做遷移，可以直接在本地原地升級到CDP，保持了產品層面上的連續性。而CDH跟HDP將在未來某個時間段內停止更新。

與以往不同的是，Cloudera CDP此次推行的是100%代碼開源策略，不過，由于開源策略的修改，只有付費的用戶才能夠下載到這些軟件，100%的開源也只是面向付費用戶。此外，徐晉還表示，Cloudera后續的產品也會保證所有的源代碼都是100%開源，承諾將繼續為開源社區項目做貢獻。

之所以有這樣的調整，徐晉表示這是為了能夠更好地服務到用戶，希望付費客戶所獲得的價值要與免費使用的用戶有所區別。最后，對于Hadoop的未來發展也是充滿了信心，徐晉認為Hadoop已經過了泡沫期，現在進入了一個緩步增長的過程當中。從市場用戶的實際反映來看，Hadoop是一個默認的事實標準，大量客戶新建大數據平臺的時候，默認會使用Hadoop技術，Hadoop是一個最成熟、最理性的選擇。

Hadoop本身已經比較成熟，但作為一個有40個開源項目組成的集合體，Cloudera把很多的新的開源的項目納入到CDP里，不斷豐富以Hadoop為起點的大數據開源社區，社區的生命力，社區的運作模式，客戶的接受度，都是處于一個非常好的勢頭。

fqj