Kafka socket通道阻塞

啃蘋果的壞蛋 发表于: 2018-11-22   最后更新时间: 2018-11-22  

getting “org.apache.kafka.common.network.InvalidReceiveException: Invalid receive (size = 1195725856 larger than 104857600)”



您需要解锁本帖隐藏内容请: 点击这里
本帖隐藏的内容





发表于: 8月前   最后更新时间: 8月前   游览量:2443
上一条: kafka 消费者异常:Error reading field 'brokers': Error reading array of size 65535,
下一条: kafka-clients 0.8版本是不是有问题?

  • 默认socket.request.max.bytes=104857600 (100M) 我知道调大这个值可以短暂解决问题,但是要长久解决有没有好的方法?

    • 要怎么做?我在kafka配置里有一个集群配了advertised.listeners=PLAINTEXT://ii-wabd-03:9092

       listeners = PLAINTEXT://ii-wabd-03:9092

      有一个集群两个参数都没配置,应该跟这两个参数无关吧?

        • 我准备把这几个值都调大:

           socket.request.max.bytes=104857600 --->1.8G, 上限2G

           queued.max.requests=500 ---> 1000

           num.io.threads=8 ---> 16

           num.network.threads=3 ---> 6

           jvm_heap=36G

          这几个参数都有上限吗?