CDH 和Ambari之间的优缺点

￡神魔★判官ぃ 2021-12-11 16:43 1519阅读 0赞

1 、什么是CDH，Ambari？

Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。

Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理。也是5个顶级hadoop管理工具之一。Ambari能够安装安全的（基于Kerberos）Hadoop集群，以此实现了对Hadoop 安全的支持，提供了基于角色的用户认证、授权和审计功能，并为用户管理集成了LDAP和Active Directory。

CDH简介

• Cloudera's Distribution, including Apache Hadoop  
　　• 是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建  
　　• 提供了Hadoop的核心  
　　　　– 可扩展存储  
　　　　– 分布式计算  
　　• 基于Web的用户界面

![183233-20160318223819693-1571871661.png][]

CDH的优点

• 版本划分清晰  
　　• 版本更新速度快  
　　• 支持Kerberos安全认证  
　　• 文档清晰  
　　• 支持多种安装方式（Cloudera Manager方式

2 、为什么需要他们

• 1000台[服务器][Link 1]的集群，最少要花费多长时间来搭建好Hadoop集群，包括Hive、Hbase、Flume、Kafka、Spark等等  
　　• 只给你一天时间，完成以上工作？  
　　• 对于以上集群进行hadoop[版本升级][Link 2]，你会选择什么升级方案，最少要花费多长时间？

• 新版本的Hadoop，与Hive、Hbase、Flume、Kafka、Spark等等兼容？

大数据集群管理方式分为**手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH）**。

**手工部署呢**，需配置太多参数，但是，好理解其原理，建议初学这样做，能学到很多。该方式啊，均得由用户执行，细节太多，切当设计多个组件时，用户须自己解决组件间版本兼容问题。

**工具部署呢**，比如Ambari或Cloudera Manger。（当前两大最主流的集群管理工具，前者是Hortonworks公司，后者是Cloudera公司）使用工具来，可以说是一键操作，难点都在工具Ambari或Cloudera Manger本身部署上。

手工方式和工具方式比较：

<table> 
 <tbody> 
 <tr> 
 <td>比较点</td> 
 <td>手工方式</td> 
 <td>工具方式</td> 
 </tr> 
 <tr> 
 <td>难易度</td> 
 <td>难，几乎不可能成功</td> 
 <td>简单，易行</td> 
 </tr> 
 <tr> 
 <td>兼容性</td> 
 <td>自己解决组件兼容性问题</td> 
 <td>自动安装兼容组件</td> 
 </tr> 
 <tr> 
 <td>组件支持数</td> 
 <td>支持全部组件</td> 
 <td>支持常用组件</td> 
 </tr> 
 <tr> 
 <td>优点</td> 
 <td>对组件和集群管理深刻</td> 
 <td>简单、容易、可行</td> 
 </tr> 
 <tr> 
 <td>缺点</td> 
 <td>太复杂，不容易成功</td> 
 <td>屏蔽太多细节，妨碍对组件理解</td> 
 </tr> 
 </tbody> 
</table>

工具比较：

![20190307203228580.png][]

详细对比情况如下：

出版商:

hortonworks研发了Ambari和hdp的大数据分析集成平台  
cloudera研发了cloudera manger和cdh大数据分析集成平台  
稳定性:

cloudera相对来说比较稳定  
ambari相对来说不稳定(页面打开速度慢)  
资源消耗:

cloudera manager的server端Xmx是2G,agent是1G,但是有host monitor和service monitor总共大概1G  
ambari的server端Xmx是2G,metric的ams和hbase的env大概也就是2G  
集群重启:

cloudera支持滚动重启(hdfs需要设计成ha,才能滚动重启)  
ambari支持滚动重启(hdfs需要设计成ha,才能滚动重启)  
集群升级(一般来讲不要轻易升级集群):

cloudera不支持滚动升级服务  
ambari支持滚动升级服务(这个是ambari的优点,hdfs必须是ha)  
二次开发:

cloudera不支持  
ambari支持  
服务版本:

cloudera较老  
ambari较新  
服务集成性:

cloudera较弱  
ambari较强,支持es、redis、presto、kylin等  
体验效果:

cloudera好  
ambari相对差  
安装过程:

cloudera复杂  
ambari简单  
邮件报警:

cloudera支持不好  
ambari支持很好  
安装包:

cloudera是parcel包  
ambari是rpm包

[183233-20160318223819693-1571871661.png]: /images/20211211/e42f781b070c4565b1cc4693c7deaf91.png
[Link 1]: https://www.baidu.com/s?wd=%E6%9C%8D%E5%8A%A1%E5%99%A8&tn=24004469_oem_dg&rsv_dl=gh_pl_sl_csd
[Link 2]: https://www.baidu.com/s?wd=%E7%89%88%E6%9C%AC%E5%8D%87%E7%BA%A7&tn=24004469_oem_dg&rsv_dl=gh_pl_sl_csd
[20190307203228580.png]: /images/20211211/663696017159458086c503d3e85fac69.png