Hadoop中的辅助名称节点

时间:2020-01-14 04:37:18

标签: namenode hadoop3

假设检查点的默认时间为1小时。 如果从最后一个检查点经过55分钟后名称节点发生故障。 我们丢失了最后55分钟的数据(fsImage中未添加编辑日志文件数据)?

1 个答案:

答案 0 :(得分:0)

取决于您的 dfs.namenode.checkpoint.txns

的Checkpoint节点配置参数
  • dfs.namenode.checkpoint.period :两个定期检查点之间的秒数。
  • dfs.namenode.checkpoint.txns :这将为每个“ dfs.namenode.checkpoint.txns”事务创建一个名称空间的检查点,而不管是否是“ dfs.namenode.checkpoint.period”已过期。

假设您每1个小时有一次 dfs.namenode.checkpoint.period ,每500笔交易就有一次 dfs.namenode.checkpoint.txns ,则可以在其中创建下一个检查点一小时或每500笔交易