Kafka消息数据积压，Kafka消费能力不足怎么处理？

微言记

 关注

阅读 53

2022-04-29

  1. 如果是Kafka消费能力不足，则可以考虑增加Topic的分区数，并且同时提升消费组的消费者数量，消费者数=分区数；
  2. 如果是下游的数据处理不及时，提高每批次拉取的数量。批次拉取数量太少，即拉取数量/处理时间<生产速度，使处理的数据小于生产的数据，也会造成数据挤压。

参考：https://www.cnblogs.com/lidabo/p/13671557.html

相关推荐

Kafka顺序消费以及消息积压问题

兽怪海北 10 0 0

kafka 线上消费积压问题

攻城狮Chova 28 0 0

【Kafka】Kafka解决消费积压：Kafka的多线程消费者实现

巧乐兹_d41f 43 0 0

shell脚本---监控kafka消息积压

进击的铁雾 47 0 0

Kafka消息消费流程

Xin_So 62 0 0

kafka 如果丢了消息怎么处理？

互联网码农 16 0 0

Flink消费kafka消息实战

龙毓七七 62 0 0

kafka入门(一)：kafka消息发送与消费

冶炼厂小练 32 0 0

Kafka如果丢了消息，怎么处理的?

查拉图斯特拉你和他 82 0 0

Kafka入门，漏消费和重复消费， 消费者事务，数据积压（二十四）

Resin_Wu 78 0 0

精彩评论（0）

0 0 举报