HDFS高可用性的行为

时间:2018-05-01 14:54:35

标签: hadoop high-availability

当NameNode(NN)在高可用性(HA)配置中失败时,distributed copydistcp)如何在两个群集之间工作。

由于名称节点和备用节点的IP地址不同,该作业是否会失败?

2 个答案:

答案 0 :(得分:0)

根据HDFS HA的配置以及是否Automatic Failover已实施,它可能有效(我个人在故障转移期间未测试过特定命令)。

另一个重要的部分是您using names for the services并且为所有涉及的节点正确设置和配置了DNS(您永远不应该使用直接IP地址)。

答案 1 :(得分:0)

Yashwanth, 在HA Hadoop集群中,建议不要在distcp命令中使用活动名称节点。如果您在distcp命令中对Namenode IP或DNS进行硬编码,则可以回答您的问题。在HA hadoop集群中,您需要在distcp命令中使用IP中的集群名称。