一台机器上的多个单节点集群

Question

Hadoop 提供了用于测试目的的迷你集群 CLI。但是，在我需要 2 个集群进行测试的情况下，是否可以在一台机器上运行这个迷你集群的多个实例？还是我需要使用虚拟机或其他机器？

Answer 1

根据 Hadoop

<块引用>

使用 CLI MiniCluster，用户只需一条命令即可启动和停止单节点 Hadoop 集群，无需设置任何环境变量或管理配置文件。 CLI MiniCluster 启动 YARN/MapReduce 和 HDFS 集群。

由于MiniCluster对Datanode、Namenode等使用默认端口，建议使用其他机器或运行在不同的虚拟机上。但是，如果您更改第二个迷你集群的 bin 目录和所有默认端口，则可以在一台机器上运行多个迷你集群，这非常混乱，不推荐。