签到成功

知道了

CNDBA社区CNDBA社区

CDH 官方推荐的集群节点和角色配置

2019-04-29 21:40 6579 0 原创 Hadoop
作者: dave

在上篇我们看了Hadoop的集群节点配置:
Hadoop 集群角色和节点数规划建议
https://www.cndba.cn/dave/article/3372https://www.cndba.cn/dave/article/3373

CDH 官方文档有一份更详细的节点和角色配置,官网将主机分成以下四种类型:
1) Master hosts run Hadoop master processes such as the HDFS NameNode and YARN Resource Manager.
2) Utility hosts run other cluster processes that are not master processes such as Cloudera Manager and the Hive Metastore.
3) Gateway hosts are client access points for launching jobs in the cluster. The number of gateway hosts required varies depending on the type and size of the workloads.
4) Worker hosts primarily run DataNodes and other distributed processes such as Impalad.https://www.cndba.cn/dave/article/3373

根据不同节点,角色分配也不一样。https://www.cndba.cn/dave/article/3373https://www.cndba.cn/dave/article/3373

1、 3 - 10 Worker Hosts without High Availability

https://www.cndba.cn/dave/article/3373

2、 3 - 20 Worker Hosts with High Availability

https://www.cndba.cn/dave/article/3373
https://www.cndba.cn/dave/article/3373https://www.cndba.cn/dave/article/3373

3、 20 - 80 Worker Hosts with High Availability

4、 80 - 200 Worker Hosts with High Availability

https://www.cndba.cn/dave/article/3373

5、 200 - 500 Worker Hosts with High Availability

https://www.cndba.cn/dave/article/3373

6、 500 -1000 Worker Hosts with High Availability

版权声明:本文为博主原创文章,未经博主允许不得转载。

用户评论
* 以下用户言论只代表其个人观点,不代表CNDBA社区的观点或立场
dave

dave

关注

人的一生应该是这样度过的:当他回首往事的时候,他不会因为虚度年华而悔恨,也不会因为碌碌无为而羞耻;这样,在临死的时候,他就能够说:“我的整个生命和全部精力,都已经献给世界上最壮丽的事业....."

  • 2258
    原创
  • 3
    翻译
  • 578
    转载
  • 191
    评论
  • 访问:7944775次
  • 积分:4337
  • 等级:核心会员
  • 排名:第1名
精华文章
    最新问题
    查看更多+
    热门文章
      热门用户
      推荐用户
        Copyright © 2016 All Rights Reserved. Powered by CNDBA · 皖ICP备2022006297号-1·

        QQ交流群

        注册联系QQ