I IT 面试题库
一个实时指标需求,该用 Spark 还是 Flink?请从批/流模型、时延、状态管理说明选型。
中级场景题大数据开发工程师后端开发工程师SparkFlink流处理选型
题目
场景题:对比两者计算模型与适用场景,给出选型结论。
参考答案
内容深度:适中 · 无代码示例 · 来源:外部链接 · 未复核 · 48 天前更新 · 技术内容可能随版本变化,建议结合官方文档理解
要点:
- 计算模型:Spark 以微批(mini-batch)模拟流,批处理是强项(RDD/DataFrame、MLlib 生态成熟);Flink 是原生流(事件驱动、逐条处理),流是一等公民。
- 时延:Spark Streaming 秒级;Flink 毫秒级、低延迟更稳定。
- 状态与容错:Flink 有成熟的内置状态管理(Keyed State/RocksDB)与事件时间、Watermark、窗口机制,擅长乱序/迟到数据处理;Spark 结构化流也有状态但流语义弱于 Flink。
- 选型:离线批处理 + 机器学习 → Spark;实时指标、实时数仓、CEP、低延迟 → Flink。两者可共存于 Lambda/Kappa 架构。
题目与答案就在本页;收藏、批注和错题重练在应用内