kafka-configs.sh --zookeeper hdp3:2181 --alter --entity-name __consumer_offsets --entity-type topics --add-config cleanup.policy=delete
这样设置的,这样__consumer_offsets
下面的log日志默认是100M,但是现场观察到了100M并不是接着删除,而是到了7天后才进行删除的。
我现在的策略是将消费很慢的程序直接停掉了,然后磁盘使用率就降低下来了,但至于是不是__consumer——offsets
是删除策略还是压缩策略导致的,这个目前无法得知。
我今天中午排查了以下确实是__consumer_offsets
下面某个分区的确实是按照7天默认进行删除的,那照这么说,我其他配置的参数对__consumer_offsets
这个主题无用啊。
奇怪,我刚才算错了?
这个显示数据保留7天呀
log.retention.hours=168
过期时间是2022.12.31啊。
时间戳
1672478327662
毫秒(ms)
2022-12-31 17:18:47
北京时间