实际生产环境中kafka topic leader倾斜怎么解决?

想喝好几罐八宝粥的男孩 发表于: 2022-03-02   最后更新时间: 2022-03-02 17:38:44   180 游览

之前查看到kafka消费者组消费数据挤压很严重,一直在排查原因,最后也没找出什么原因,最近发现kafka大部分主题leader倾斜,但是在实际生产环境中,应该如何拯救倾斜呢?我用的是kafka-manager查看的,我们实际业务数据量较大,有什么 好的建议进行拯救吗??

发表于 2022-03-02
  • 补充一下describe那个倾斜严重的topic,看看具体。半兽人 2月前 回复
添加评论

最好的方式肯定是合理化分区数量,但是一般用户都会存在不合理使用的情况。
linkin 有一个侵入式的工具CC可以实现按需负载均衡,也可以从broker拉jmx指标,手动实现根据紧缺的资源(我们一般是网络出口流量)进行reblance的操作。

你的答案

查看kafka相关的其他问题或提一个您自己的问题
提问