IT 面试题库

Hadoop 生态核心组件(HDFS/MapReduce/YARN)各自职责?

初级简答题大数据工程师大数据开发工程师HadoopHDFSYARNMapReduce

题目

说明 Hadoop 三大基石的分工。

参考答案

内容深度:基础 · 无代码示例 · 来源:外部链接 · 未复核 · 72 天前更新 · 技术内容可能随版本变化,建议结合官方文档理解

HDFS:分布式文件系统,把大文件切块多副本存于廉价机器,提供高吞吐存储。

MapReduce:分布式批处理计算模型,把任务拆成 map(映射)与 reduce(归约)两阶段并行执行。

YARN:资源管理与调度层,负责为各计算框架分配集群资源,使 Hadoop 能跑 MapReduce、Spark、Flink 等多种引擎。三者构成“存储—计算—调度”基础,是大数据批处理的起点。

练这道题

同分类 · 高频题

题目与答案就在本页;收藏、批注和错题重练在应用内

这道题看完了?连刷同类题,趁热打铁效果最好 进入刷题