HDFS空间释放 - 最佳解决方案

Question

我想在HDFS中释放一些空间，所以我需要找出一些不需要/未使用的HDFS块/文件，需要删除或存档。那么到目前为止，什么才算是最佳解决方案？我正在使用Clouder发行版。 （我的群集HDFS容量为900 TB，使用700 TB）

Answer 1

如果您运行的是Cloudera的许可版本，则可以使用Cloudera Navigator查看一段时间内未使用的文件，并可以指定删除它们的策略。

如果没有，您可能正在编写脚本以识别尚未使用的文件，您必须手动删除它们。