IT 面试题库

Kafka 如何实现精确一次语义(EOS)?在流式处理中怎样落地?

高级场景题大数据工程师大数据开发工程师实时计算工程师KafkaEOS幂等事务

题目

面试常问:Kafka 宣称支持 Exactly-Once。请结合幂等生产者、事务、以及 isolation.level=read_committed 解释端到端 EOS 的实现原理,并说明其代价与适用边界。

参考答案

内容深度:详细 · 含示例/代码 · 来源:外部链接 · 未复核 · 75 天前更新 · 技术内容可能随版本变化,建议结合官方文档理解

1. 三种投递语义

2. EOS 的两大支柱

3. 端到端落地(consume-transform-produce)

producer.initTransactions();
while (true) {
  producer.beginTransaction();
  // 处理并 send 输出
  producer.sendOffsetsToTransaction(currentOffsets); // 偏移随事务一起提交
  producer.commitTransaction();
}

Kafka Streams 只需 processing.guarantee=exactly_once_v2 即可获得端到端 EOS。

4. 代价与边界

练这道题

同分类 · 高频题

题目与答案就在本页;收藏、批注和错题重练在应用内

这道题看完了?连刷同类题,趁热打铁效果最好 进入刷题