展品 006 · 回车键画廊
一条命令输错,S3 宕机约 4 小时
影响 4.8/10
- 1工程师排查一个变慢的计费系统,执行一条已审批的操作手册命令
- 2一个参数输错,移除的服务器远多于预期
- 3us-east-1 的两个 S3 子系统需要完全重启
- 4它们多年没有完全重启过,花了好几个小时
- 5大片网站宕机,AWS 自己的状态面板也在其中 ✕
不管命令怎么输,工具都应该拒绝一次移除太多、太快的容量。
来源:AWS service disruption summary, March 2017
展品 006 · 回车键画廊
影响 4.8/10
不管命令怎么输,工具都应该拒绝一次移除太多、太快的容量。
来源:AWS service disruption summary, March 2017
五个维度各 0 到 10 分,总分 4.8/10 是它们的平均值。影响分怎么算
| 维度 | 分数 | 依据 |
|---|---|---|
| 范围 | 4 | 一个区域(us-east-1)的 S3 |
| 时长 | 6 | 约 4 小时 |
| 损失 | 0 | 来源未提及永久损失 |
| 恢复难度 | 6 | 两个子系统需要完全重启,多年来第一次 |
| 连锁 | 8 | 大片网站宕机,AWS 自己的状态面板也在其中 |
AWS S3 宕机事件(2017 年 2 月)。持续时间:约 4 小时。从第一个改动到故障,共 5 跳。