I
IT 面试题库
Flink 的整体架构由哪些核心组件构成?各自职责是什么?
中级
简答题
大数据开发工程师
后端开发工程师
Flink
架构
JobManager
TaskManager
题目
考察点:理解 Flink 的分布式架构与作业提交流程,区分 JobManager 与 TaskManager 的职责边界。
参考答案
内容深度:适中 · 无代码示例 · 来源:外部链接 · 未复核 · 26 天前更新
要点
:
JobManager(Master 节点)
:负责作业调度、协调 Checkpoint 与容错、管理 Task 的分配。核心子组件包括 Dispatcher(接收作业提交并启动 JobMaster)、JobMaster(管理单个作业的执行生命周期)、ResourceManager(负责 slot 资源申请与释放,对接 YARN/K8s 等资源管理层)。
TaskManager(Worker 节点)
:真正执行任务的进程,以
Task Slot
为资源单位。一个 TaskManager 可含多个 slot,每个 slot 是一组独立的内存资源切片;算子子任务(subtask)被调度到 slot 中并行执行。
客户端(Client)
:把用户代码编译成 JobGraph/StreamGraph 并提交给 Dispatcher,本身不参与运行。
部署差异
:Standalone 模式下 ResourceManager 管理本地 slot;在 YARN/K8s 模式下由对应集群资源管理器分配容器来启动 TaskManager。
练这道题
复制链接
同分类 · 高频题
Flink 如何保证端到端 exactly-once?Checkpoint 与两阶段提交(2PC)分别是怎么配合的?
新题
Flink 的 Watermark 是怎么处理乱序数据的?event time 与 processing time 的取舍是什么?TwoPhaseCommitSink 如何实现 Exactly-Once?
新题
Flink 有哪三种时间语义?Watermark 解决了什么问题,常见窗口类型有哪些?
新题
Flink 如何保证精确一次(exactly-once)语义?Checkpoint 与状态后端原理是什么?
新题
题目与答案就在本页;收藏、批注和错题重练在应用内
这道题看完了?
连刷同类题
,趁热打铁效果最好
进入刷题
✕