kafka关于日志清理的配置无效的问题

发表于: 2020-12-02   最后更新时间: 2020-12-02 13:53:58   2,304 游览

kafka日志清理无效的问题

  1. 生产环境下,kafka的logs目录高达1.5T
  2. 感觉kafka的日志自动清理清理配置无效
  3. 以下是我配置的关于log的配置
    log.retention.hours=168
    log.segment.bytes=1073741824
    log.retention.check.interval.ms=300000
    #今天出现问题以后我新增了下面两行配置
    log.cleaner.delete.retention.ms=86400000
    log.cleaner.backoff.ms=15000
    

不知道如何去处理自动清理的问题,想让logs目录的占用减下去,不然的话我的/home目录要满了。。。

发表于 2020-12-02
添加评论

可以看看log/log-cleaner.log清理日志。

log.retention.hours=168

默认7天,改为默认3天(根据你情况自定义)。

log.retention.hours=72

注意:kakfa节点的配置要保持一致。
参考来自:https://www.orchome.com/472

-> 半兽人 4年前

大佬您好,我刚才使用日志大小的方式清除了日志,但是现在报分区找不到了。。。请问还有的救吗,应该就是清除了日志的缘故

半兽人 -> 4年前

你得把错误贴出来我才能看。

你的答案

查看kafka相关的其他问题或提一个您自己的问题