I IT 面试题库
HBase 写入变慢、RegionServer 频繁 Full GC,你会怎么排查?常见原因有哪些?
中级故障排查题数据库工程师后端开发工程师大数据开发工程师HBaseGCMemStoreCompaction性能调优
题目
故障排查题:线上 RegionServer 响应飙升、GC 时间占比高。作为负责人,你的排查思路和最可能的根因是什么?
参考答案
内容深度:适中 · 无代码示例 · 来源:外部链接 · 未复核 · 25 天前更新
要点:
- 先看写入路径瓶颈:写入先写 WAL(顺序写,受磁盘/副本影响)再写 MemStore。若 MemStore 持续不刷写或刷写太慢,会逼近
hbase.hregion.memstore.flush.size 触发阻塞写(Region 级写阻塞甚至全局阻塞);同时 MemStore 过大又会让老年代膨胀触发 Full GC。
- GC 根因多为内存与 Compaction:① Region 过多/过大导致 MemStore 总内存超阈值;② Major Compaction 风暴在业务高峰合并大 HFile,吃满 IO 与 CPU;③ BlockCache 配置过大挤压 MemStore 堆空间;④ 大 Cell / 宽行导致单 KeyValue 巨大。
- 排查步骤:看 RegionServer 日志与 GC 日志确认 CMS/G1 停顿;用
hbase hbck2 与 Web UI 看 Region 分布是否均衡、是否有热点 Region;监控 MemStore/BlockCache 占用、刷写与 Compaction 队列长度;调参方向是合理设置 MemStore 上限、开启 BucketCache 把 BlockCache 移出堆外、错峰 Compaction、必要时预分区 + 散列 RowKey 消除热点。
题目与答案就在本页;收藏、批注和错题重练在应用内