请分别从生产端、服务端、消费端三个环节,分析消息丢失与重复的可能原因,并给出对应的配置/编码对策。
一、生产端
acks=0(发完即忘)、acks=1 且 leader 宕机未同步到 follower。 - 对策:acks=all + 设置 min.insync.replicas>=2,确保写入 ISR 才返回。
- 对策:开启 enable.idempotence=true(PID+序列号去重)。
二、服务端(Broker)
- 对策:提高副本因子(replication.factor>=3)、min.insync.replicas=2、unclean.leader.election.enable=false。
三、消费端
commitSync 再处理,处理中崩溃 → 已提交偏移但消息未处理。(自动提交 enable.auto.commit=true 最易丢) - 对策:关闭自动提交,采用先处理、后手动提交(处理成功才 commitSync/commitAsync)。
- 对策:业务做幂等(数据库唯一索引/去重表/状态机),必要时上 EOS 事务。
总结口诀:生产 acks=all+幂等,消费「处理后提交」+业务幂等。
题目与答案就在本页;收藏、批注和错题重练在应用内