大数据平台比较-CDH,HDP

Posted kdy

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了大数据平台比较-CDH,HDP相关的知识,希望对你有一定的参考价值。

主要的不同点apache AmbariClouderaManager Express(免费版)
配置版本控制和历史记录 支持 不支持
二次开发 支持 不支持
集成 支持 no (不支持redis、kylin、es)
维护 依靠社区力量 cloudera做了一些定制开发,自行维护或打patch会离社区越来越远
权限控制 ranger(相对简单) sentry(复杂)
视图定制 支持创建自己的视图,添加自定义服务 不支持

出版商:

  • hortonworks研发了Ambari和hdp的大数据分析集成平台
  • cloudera研发了cloudera manger和cdh大数据分析集成平台

稳定性:

  • cloudera相对来说比较稳定
  • ambari相对来说不稳定(页面打开速度慢)

资源消耗:

  • cloudera manager的server端Xmx是2G,agent是1G,但是有host monitor和service monitor总共大概1G
  • ambari的server端Xmx是2G,metric的ams和hbase的env大概也就是2G

集群重启:

  • cloudera支持滚动重启(hdfs需要设计成ha,才能滚动重启)
  • ambari支持滚动重启(hdfs需要设计成ha,才能滚动重启)

集群升级(一般来讲不要轻易升级集群):

  • cloudera不支持滚动升级服务
  • ambari支持滚动升级服务(这个是ambari的优点,hdfs必须是ha)

二次开发:

  • cloudera不支持
  • ambari支持

服务版本:

  • cloudera较老
  • ambari较新

服务集成性:

  • cloudera较弱
  • ambari较强,支持es、redis、presto、kylin等

体验效果:

  • cloudera好
  • ambari相对差

安装过程:

  • cloudera复杂
  • ambari简单

邮件报警:

  • cloudera支持不好
  • ambari支持很好

安装包:

  • cloudera是parcel包
  • ambari是rpm包

总结:

  1. 不要轻易升级组件版本

  2. 如果对集成性要求高,稳定性相对弱点的,可以选择ambari

  3. 如果对稳定性要求高,集成性相对弱点的,可以选择cloudera

以上是关于大数据平台比较-CDH,HDP的主要内容,如果未能解决你的问题,请参考以下文章

从大数据平台CDP的架构看大数据的发展趋势

2021 最新 Cloudera 大数据平台 CDP 升级指南白皮书完整版开放下载!(中文版)...

一文看懂 Cloudera 对 CDH/HDP/CDP 的产品支持策略

一文看懂Cloudera对CDH/HDP/CDP的产品支持策略

过往记忆大数据 USDP 实测搭建,可替代CDH的免费大数据套件平台

过往记忆大数据 USDP 实测搭建,可替代CDH的免费大数据套件平台