如果名称节点崩溃,我们是否必须停止所有数据处理,然后手动启动它(如果我们没有辅助名称节点),或者我们是否正在使用Cloudera最新版本。如果它崩溃然后它自动命名一个辅助名称节点,数据处理在此崩溃期间的任何时间停止。(我们已经有一个辅助名称节点
答案 0 :(得分:0)
根据您的描述,似乎namenode HA(高可用性)是您所追求的设置:
HDFS高可用性功能通过提供在具有热备用的主动/被动配置中的同一群集中运行两个冗余NameNode的选项来解决上述问题。这允许在机器崩溃的情况下快速故障转移到新的NameNode,或者为了计划维护而进行正常的管理员启动的故障转移。
在Hadoop doc上查看更多详细信息:HDFS High Availability Using the Quorum Journal Manager