hadoop集群中的namenode和edits_xxxxxx文件

时间:2020-01-29 22:08:22

标签: hadoop hdfs hdp namenode

我们有2个名称节点的hdp集群

每个名称节点包括以下文件夹

/var/hadoop/hdfs/namenode/current

此文件夹包含2736个文件edits_xxxxxxxfsimage.ckpt_xxxx个文件

示例:

fsimage.ckpt_0000000001706732378
fsimage.ckpt_0000000001706822458
edits_0000000001794804572-0000000001794838163
edits_0000000001794838164-0000000001794838275

第二个文件夹

/hadoop/hdfs/journal/hdfsha/current 

包括2365个edits_xxxxxxx文件

文件夹/var/hadoop/hdfs/namenode/current的大小为542G 文件夹/hadoop/hdfs/journal/hdfsha/current的大小是498G

我的问题是两个文件夹中edits_xxxxxxxxxxxx数量巨大的原因是什么?在名称节点

第二个–是否可以在HDFS CONFIG中添加一些设置以减少edits_xxxxxxxxxxxxxx文件的数量?

0 个答案:

没有答案