案例库 · 软件与 IT · 运营决策 · 2023
Optus 断网 14 小时,1000 万澳大利亚人被切断一切通信
一次软件升级触发了 BGP 路由崩溃,导致澳大利亚第二大电信公司瘫痪了半天。
Singtel
怎么回事
2023 年 11 月 8 日,澳大利亚第二大电信公司遭遇全面网络故障,持续 12 到 14 小时,影响超过 1000 万人和 40 万家企业。断网导致全国范围内的手机、家庭宽带、固话、EFTPOS 终端、医院交换机和 Triple Zero 紧急呼叫服务全部瘫痪。
原因是一次由新加坡电信(Singtel)北美交换中心的软件升级触发的 BGP 路由故障。当一台路由器因防止路由更新过载的保护机制断开连接后,约 90 台边缘提供商路由器先后跟进,引发了连锁关闭,而网络的自动化防护措施无法阻止。断网从澳大利亚东部夏令时间凌晨 4:05 持续到下午,部分服务直到次日才恢复。
经济损失严重。新加坡母公司 Singtel 在新加坡交易所的股价下跌 4.8%,市值蒸发超过 20 亿澳元。Optus CEO Kelly Bayer Rosmarin 因公司在危机期间沟通迟缓、含糊其辞而面临严厉批评。她在一周后辞职,公司向受影响客户提供了 200 GB 的额外数据作为补偿。
澳大利亚政府委托 Richard Bean 博士领导的独立审查发布了 18 项建议。参议院也举行了公开质询。审查报告呼吁制定新的客户沟通规则、建立 Triple Zero 测试制度,并设立专门的 Triple Zero 维护机构以防止类似事件重演。
为什么会这样
- 一次软件升级演变成全国性断网,因为网络的自动化保护措施依次触发,没有人为干预的余地
- Optus 没有能够在 BGP 崩溃时绕过的快速备份或故障切换方案,导致 1000 万客户半天内完全无法使用服务
- 公司的危机沟通含糊且迟缓,在网络仍然瘫痪的情况下进一步削弱了公众信任
代价市值蒸发超过 20 亿澳元;CEO 辞职代价高昂
教训
一次网络变更就能瘫痪整个国家的通信——在隔离环境中测试路由更新,并保留能够在大规模故障中起效的手动应急机制。
资料来源
- 2023 Optus outage — Wikipedia
- A major shakeup: the Optus outage investigation — The Conversation
- BBC News — Millions hit by Australian phone network failure (8 November 2023)
发现哪里写错了?告诉我们。
类似的案例
这家公司栽倒的地方,别处有人漂亮地解开过。 第二意见 →

Comments · 0
登录 后就能评论。