I IT 面试题库
引入混沌工程后,某次实验引发了雪崩(连锁故障),复盘时该从哪些维度归因?
中级故障排查题SRE站点可靠性工程师后端开发工程师云计算工程师混沌工程雪崩连锁故障熔断复盘
题目
故障排查题:混沌本是为了发现脆弱点,结果把服务打挂了。作为复盘主持人,你从哪些维度定位为什么会发生连锁故障?
参考答案
内容深度:适中 · 无代码示例 · 来源:外部链接 · 未复核 · 25 天前更新
要点:
- 依赖与调用链维度:连锁故障往往源于同步调用扇出 + 无超时/无熔断。检查被注入服务的下游依赖是否同步阻塞、重试是否放大流量(重试风暴)、是否缺熔断/降级,导致一个节点变慢拖垮整条链路。
- 容量与资源维度:故障节点下线后,剩余节点流量陡增是否超过容量上限触发级联超时;线程池/连接池是否被打满;是否存在缓存击穿把压力传到数据库。
- 爆炸半径控制维度:复盘实验本身是否半径过大、无自动护栏(没设自动停止阈值)、是否在高峰或依赖方已脆弱时执行,违背「最小爆炸半径」原则。
- 改进闭环:补齐超时/限流/熔断/降级、做依赖隔离(舱壁模式)、给混沌实验加SLO 护栏与自动回滚、把关键路径依赖画成依赖拓扑优先治理最脆弱环;并把这次事故转化为新的稳态假设反例。
题目与答案就在本页;收藏、批注和错题重练在应用内