kafka Shrinking ISR后,集群某个节点打开文件数剧增

﹏随遇而安ヾ 发表于: 2019-06-26   最后更新时间: 2019-06-27  

提问说明

kafka集群打开文件数突然剧增,原来一直很稳定在2K左右,突然飙升到3W多,然后导致kafka集群无法写入。偶尔就会出现一次,需要重启节点才能恢复。

目前观察到的日志如下

Shrinking ISR for partition [__consumer_offsets,49] from 232,236,234 to 234
Shrinking ISR for partition [__consumer_offsets,44] from 234,236 to 234
Shrinking ISR for partition [FlowStatisticsTopic,3] from 234,233 to 234 
Shrinking ISR for partition [LinkTrackingTopic,4] from 232,236,234,233 to 234

这种的比较集中,然后接着,就出现

Connection to 233 was disconnected before the response was read
Connection to 234 was disconnected before the response was read
Connection to 232 was disconnected before the response was read

这样的错误,但是其它都自定连接上了234这就会报出Too many open files。

请问下,这种问题是由什么导致的。



您需要解锁本帖隐藏内容请: 点击这里
本帖隐藏的内容





发表于: 1月前   最后更新时间: 1月前   游览量:237
上一条: 从kafka2.3 降级到1.0 版本,有这方面的文档吗?网上都是升级的文档。
下一条: kafka消费topic过程中出现的个别bug情况如何处理?

  • 往上找找看看其他的错误信息,这个故障是被其他故障引起的 还是主动触发的。