使用cloudera quickstartVM错误创建Hadoop集群

Question

我想使用快速启动虚拟机映像创建Cloudera集群，您可以直接从cloudera的网页（http://www.cloudera.com/downloads/quickstart_vms/5-8.html）下载。

我有三个虚拟机，我想拥有一个主服务器和两个服务器。我已经配置了它们，以便在3个虚拟机之间拥有不同的主机名和DNS连接。但是当我尝试添加新主机时，我通常会从其他计算机上丢失心跳，或者当它没有发生时，我会发现版本不匹配和HDFS错误。

那么，在尝试添加新主机之前，是否还有其他配置设置？

Answer 1

如果您想使用3个快速入门来做到这一点...就不要了。与从头开始创建所有内容相比，您将花费更多的时间。

不过，操作方法：

1. Cloudera quickstart首次删除将FQDN与真实IP相关联的任何网络硬配置。如果重新启动计算机，则取决于启动网络的速度，您将把FQDN重新映射到localhost。您必须停用此功能。
2. 在所有节点上将默认RPM安装转换为Parcel。桌面上有一个图标。为什么在所有节点上？因为您将要使用宗地添加节点，并且RPM和宗地之间会引发冲突。另一种方法是从Cloudera distrib中删除所有RPM软件包，但是有可能忘记其中的一个...
3. 从您的奴隶中删除cloudera-manager-server和cloudera-manager-agent。
4. 使用宗地中的“将主机添加到群集”按钮将您的从属主机添加到主机。

完成所有这些操作后，您需要优化Cloudera配置以查看所有绿色。

我个人更喜欢使用Centos 7而不是Centos 6创建一个新模板，在模板上实现3 Vm，然后从头开始安装Cloudera。