当消费者组内的成员发生变化(新增、宕机、订阅变更、分区数变化)时,Kafka 会触发 Rebalance 重新分配分区。请说明 Rebalance 的过程、Eager 与 Cooperative 两种协议的区别,以及如何减少其对业务的影响。
1. 触发与过程
session.timeout.ms)、两次 poll() 间隔超过 max.poll.interval.ms、订阅主题分区数变化。group.id 哈希 __consumer_offsets 分区选定)主导 JoinGroup → 选 leader 计算分配 → SyncGroup 下发新分配。2. Eager(饥饿式,旧默认)vs Cooperative(协作式,Kafka 2.4+)
3. 优化手段
CooperativeStickyAssignor 协作式分配器;group.instance.id 静态成员身份:重启在 session.timeout.ms 内重新加入可不触发 Rebalance,对滚动发布至关重要;session.timeout.ms、合理设置 heartbeat.interval.ms(≤ 1/3 session),避免慢处理被踢出;ConsumerRebalanceListener.onPartitionsRevoked 中手动提交偏移,防止自动提交在重平衡时丢/重复偏移;max.poll.records,避免处理超时触发 Rebalance 风暴。题目与答案就在本页;收藏、批注和错题重练在应用内