Kafka实战
01、Kafka：为什么要使用消息队列
02、Kafka：消息队列的流派
03、Kafka：安装Kafka服务器
04、Kafka：实现生产者和消费者
05、Kafka：消息的偏移量和顺序消费原理
06、Kafka：单播和多播消息的实现
07、Kafka：主题和分区的概念
08、Kafka：搭建Kafka集群
09、Kafka：副本的概念
10、Kafka：集群消费问题
11、Kafka：Java中Kafka生产者的基本实现
12、Kafka：生产者端的同步发送和异步发送
13、Kafka：生产者中的ack配置
14、Kafka：发送消息的缓冲区机制
15、Kafka：消费者消费消息的基本实现
16、Kafka：Offset的自动提交和手动提交
17、Kafka：消费者poll消息的细节与消费者心跳配置
18、Kafka：指定分区和偏移量，时间消费
19、Kafka：新消费组的消费offset规则
20、Kafka：SpringBoot中使用Kafka的基本实现
21、Kafka：消费者的配置细节
22、Kafka：Kafka中Controller，Rebalance，HW，LEO的概念
23、Kafka：Kafka优化之防止消息丢失和重复消费
24、Kafka：Kafka优化之顺序消费的实现
25、Kafka：Kafka优化之解决消息积压问题
26、Kafka：Kafka优化之实现延时队列
27、Kafka：Kafka-eagle监控平台
28、Kafka：Linux部署Kafka集群
29、Kafka：Docker-compose部署Kafka集群
本文档使用 MrDoc 发布
-
+
home page
10、Kafka：集群消费问题
### **集群消费问题** ------------ **向集群发送消息** ```python ./kafka-console-producer.sh \ --broker-list 172.16.253.38:9092,172.16.253.38:9093,172.16.253.38:9094 \ --topic myreplicated-topic ``` **从集群中消费消息** ```python ./kafka-console-consumer.sh \ --bootstrap-server 172.16.253.38:9092,172.16.253.38:9093,172.16.253.38:9094 \ --from-beginning \ --topic my-replicated-topic ``` **指定消费组来消费消息** ```python ./kafka-console-consumer.sh \ --bootstrap-server 172.16.253.38:9092,172.16.253.38:9093,172.16.253.38:9094 \ --from-beginning \ --consumer-property group.id=testGroup1 \ --topic my-replicated-topic ``` **分区分消费组的集群消费中的细节**  - ⼀个partition只能被⼀个消费组中的⼀个消费者消费，⽬的是为了保证消费的顺序性，但是多个partion的多个消费者消费的总的顺序性是得不到保证的，那怎么做到消费的总顺序性呢？ - partition的数量决定了消费组中消费者的数量，建议同⼀个消费组中消费者的数量不要超过partition的数量，否则多的消费者消费不到消息 - 如果消费者挂了，那么会触发rebalance机制（后⾯介绍），会让其他消费者来消费该分区
李智
March 17, 2025, 1:29 p.m.
转发文档
Collection documents
Last
Next
手机扫码
Copy link
手机扫一扫转发分享
Copy link
Markdown文件
share
link
type
password
Update password