kafka消费问题处理记录

r囧r小猫 2022-04-12 13:48 223阅读 0赞

发表评论

表情:
评论列表 (有 0 条评论,223人围观)

还没有评论,来说两句吧...

相关阅读

    相关 kafka消费延迟问题查找

    最近线上偶尔爆出kafka消费延迟,但是系统的数据量并不大,为什么会延迟呢? 具体分析如下。 基本思路: 1.查看机器中数据积压情况,是否是因为数据量过大导致的消费延

    相关 Kafka消费失败重试处理

    默认情况下,Spring-Kafka 达到配置的重试次数时,【每条消息的失败重试时间,由配置的时间隔决定】Consumer 如果依然消费失败 ,那么该消息就会进入到死信队列。

    相关 Kafka重复消费数据问题

      kafka重复消费的问题,主要的原因还是在指定的时间内,没有进行kafka的位移提交,导致根据上一次的位移重新poll出新的数据,而这个数据就是上一次没有消费处理完全的(

    相关 kafka-重复消费问题分析

    问题 我们的系统在全量初始化数据时,需要大量发送消息到kafka,观察发现消费者出现重复消费,甚至出现持续消费但队列里的消息却未见减少的情况。虽然consumer的处理逻辑已