Kafka Consumer Group模型详解:消费者组与广播机制.pdfVIP

  • 1
  • 0
  • 约小于1千字
  • 约 2页
  • 2026-07-06 发布于北京
  • 举报

Kafka Consumer Group模型详解:消费者组与广播机制.pdf

每个consumer都要属于一个consumer.group,就是一个消费组,topic的一个分区只会分

配给一个消费组下的一个consumer来处理,每个consumer可能会分配多个分区,也有可

能某个consumer没有分配到任何分区。

分区内的数据是保证顺序性的。

group.id=“会员消费者组”

如果你希望实现一个广播的效果,你的每台机器都要消费到所有的数据,每台机器启动的时候,

group.id可以是一个随机生成的UUID也可以,你只要让不同的机器的KafkaConsumer的

group.id是不一样的。

如果consumergroup中某个消费者挂了,此时会自动把分配给他的分区交给其他的消费者,

如果他又重启了,那么又会把一些分区重新交还给他,这个就是所谓的消费者rebalance的

过程。

每个consumer都要属于一个consumer.group,就是一个消费组,topic的一个分区只会分配

给一个消费组下的一个consumer来处理,每个consumer可能会分配多个分区,也有可能某

个consumer没有分配到任何分区

分区内的数据是保证顺序性的

group.id=“membership-consumer-group”

如果你希望实现一个广播的效果,你的每台机器都要消费到所有的数据

文档评论(0)

1亿VIP精品文档

相关文档