Kafka日志压缩主题分区和磁盘空间

时间:2018-08-27 21:39:37

标签: apache-kafka

当日志压缩的主题分区在其所在的物理磁盘上空间不足时,我无法找到有关Kafka如何处理情况的信息。

Kafka经纪人(以及所有数据)会生存还是失败?

1 个答案:

答案 0 :(得分:1)

与其他任何OS进程一样,Kafka将说由于空间不足而无法打开文件。

Kafka代理和其他操作系统进程将开始停止和/或出错。

您需要对磁盘卷进行至少80%的阈值监视,具体取决于增长率。如果达到90%以上,您可能需要使代理脱机以添加更多存储或添加更多代理并自己重新分配一些分区

某些监控工具甚至允许您使用线性回归来预测何时达到容量。