当NameNode(NN)在高可用性(HA)配置中失败时,distributed copy(distcp
)如何在两个群集之间工作。
由于名称节点和备用节点的IP地址不同,该作业是否会失败?
答案 0 :(得分:0)
根据HDFS HA的配置以及是否Automatic Failover已实施,它可能有效(我个人在故障转移期间未测试过特定命令)。
另一个重要的部分是您using names for the services并且为所有涉及的节点正确设置和配置了DNS(您永远不应该使用直接IP地址)。
答案 1 :(得分:0)
Yashwanth, 在HA Hadoop集群中,建议不要在distcp命令中使用活动名称节点。如果您在distcp命令中对Namenode IP或DNS进行硬编码,则可以回答您的问题。在HA hadoop集群中,您需要在distcp命令中使用IP中的集群名称。