Kafka 日志压缩的主题分区和磁盘空间

Question

我找不到有关 Kafka 将如何处理日志压缩主题分区在其所在物理磁盘上的空间不足时的情况的信息。

在这种情况下，Kafka 代理(以及所有数据(会生存还是失败？

Answer 1

像任何其他操作系统进程一样，Kafka 会说它无法打开文件，因为它空间不足。

Kafka 代理和其他操作系统进程将开始停止和/或出错。

您需要监视磁盘卷至少 80% 的阈值，具体取决于增长率。如果达到 90% 以上，则可能需要使代理脱机以添加更多存储或添加更多代理并自行重新分配某些分区

一些监视工具甚至允许您使用线性回归来预测何时达到容量。