I IT 面试题库
什么场景需要引入大数据技术栈?它和单机处理本质区别在哪?
初级简答题大数据开发工程师后端开发工程师大数据分布式Hadoop
题目
说明大数据适用的典型场景,以及分布式“分而治之 + 数据本地化”的核心思想。
参考答案
内容深度:基础 · 无代码示例 · 来源:外部链接 · 未复核 · 48 天前更新 · 技术内容可能随版本变化,建议结合官方文档理解
要点:
- 适用场景:数据量大到单机存不下/算不动(TB~PB 级)、离线批处理与分析、海量日志/行为埋点处理、机器学习训练等,典型如日志分析、用户画像、报表。
- 本质区别:单机是“纵向扩展”(加内存/CPU)有上限;大数据是“横向扩展(分布式)”——把数据分片到多台廉价机器并行计算,通过分而治之突破单机瓶颈。
- 核心思想:移动计算比移动数据更划算(数据不动、任务分发到数据所在节点),并配合容错(任务失败自动重试到其他节点)。
题目与答案就在本页;收藏、批注和错题重练在应用内