kafka异常问题

小夕夕 发表于: 2020-06-18   最后更新时间: 2020-06-18 17:39:14   2,238 游览

提问说明

  1. 今天线上应用服务器报了很多关于kafka的异常问题
  2. kafka版本kafka_2.11-1.1.1
  3. 以下为错误信息

    org.apache.kafka.common.errors.TimeoutException: Expiring 2 record(s) for FrmsFlowLogQueue-0: 31037 ms has passed since last append
    2020-06-18 16:06:11.058 [kafka-producer-network-thread | producer-1] ERROR o.s.k.s.LoggingProducerListener 15605658202006181027527955 - Exception 
    thrown when sending a message with key='null' and payload='[{"@type":"cn.com.bs.fr.credit.pojo.WorkflowDataLog","createTime":1592467496323,"d
    ataType":1,"e...' to topic FrmsFlowLogQueue:
    

    4.看了下kafka集群,也没有问题呢,实在是不知道问题出在哪儿。

发表于 2020-06-18
添加评论

超时呀

org.apache.kafka.common.errors.TimeoutException: Expiring 2 record(s) for FrmsFlowLogQueue-0: 31037 ms has passed since last append
小夕夕 -> 半兽人 4年前

看了kafka的进程,都是存在的,现在是2个节点。

小夕夕 -> 半兽人 4年前

又细看了下错误日志,发现有以下信息:
org.apache.kafka.common.errors.RecordTooLargeException: The request included a message larger than the max message size the server will accept.

半兽人 -> 小夕夕 4年前

消息过大了,你要调整。max.message.bytes

小夕夕 -> 半兽人 4年前

你好,我说说我的情况,麻烦您帮我看看:当前我们kafka集群是2个节点,zk是3个节点,最近线上总是会出现org.apache.kafka.common.errors.TimeoutException,这个问题不知道从哪里开始排查。

你的答案

查看kafka相关的其他问题或提一个您自己的问题