实际生产环境中kafka topic leader倾斜怎么解决？

想喝好几罐八宝粥的男孩 发表于: 2022-03-02   最后更新时间: 2022-03-02 17:38:44   905 游览

之前查看到kafka消费者组消费数据挤压很严重，一直在排查原因，最后也没找出什么原因，最近发现kafka大部分主题leader倾斜，但是在实际生产环境中，应该如何拯救倾斜呢？我用的是kafka-manager查看的，我们实际业务数据量较大，有什么 好的建议进行拯救吗？？

kafka
发表于 2022-03-02
想喝好几罐八宝粥的男孩
  • 补充一下describe那个倾斜严重的topic，看看具体。半兽人 2年前 回复
添加评论

最好的方式肯定是合理化分区数量，但是一般用户都会存在不合理使用的情况。
linkin 有一个侵入式的工具CC可以实现按需负载均衡，也可以从broker拉jmx指标，手动实现根据紧缺的资源（我们一般是网络出口流量）进行reblance的操作。

回复
回答于 2年前
M.s ALl
你的答案

查看kafka相关的其他问题或提一个您自己的问题。
提问

找不到想要的答案？提一个您自己的问题。