如何在不使用Cloudera管理器的情况下在100节点群集上安装Cloudera CDH?

时间:2015-11-20 20:03:45

标签: hadoop hdfs cloudera cloudera-cdh

如何在不使用Cloudera管理器的情况下在100节点群集上安装Cloudera CDH?在群集中的每个节点上手动安装和配置CDH是一项艰巨的任务。使用哪些工具和技术来自动化生产任务?

1 个答案:

答案 0 :(得分:1)

CDH支持基于Parcel和基于Package的安装。如果您愿意,可以使用Puppet / Chef这些类型的配置管理工具来执行基于软件包的安装。但是,建议的方法是使用Cloudera Manager进行基于Parcel的安装。 Cloudera Manager提供许多功能OOTB,包括监控,配置版本控制,基于向导的安全配置,滚动升级等。如果您不使用Cloudera Manager的原因是因为它不是开源的,请注意

  1. 有一个免费版本的CM(某些企业功能不是 可用)
  2. CM只是一种管理工具。您的数据仍然存储 在HDFS和您的大数据应用程序(蜂巢脚本,spark / MapReduce 应用程序等)仍然适用于标准的开源Hadoop 平台并没有供应商锁定。