NTT Docomo 一次迁移回滚引发 12 小时大规模通信中断

2021 年 10 月 14 日，日本最大移动运营商 NTT Docomo 遭遇大规模通信中断，约 200 万用户无法打电话、无法使用数据业务。核心故障持续了约 12 小时，部分依赖老旧 3G 连接的服务更是最长拖了 29 小时。语音、数据甚至紧急呼叫都受到影响。

起因是计划性维护中的一次工程失误。Docomo 正在把用户注册功能迁移到新系统，迁移遇到问题后，公司尝试回滚。回滚让网络的信令系统承受了意料之外的负载，导致信令系统宕机，涉事用户的服务随之中断。

日本总务省（MIC）反应严厉。在已经看到日本各运营商接连出现通信中断之后，监管机构于 2021 年 11 月 26 日对 Docomo 下发严重警告和行政指导，要求该公司加强变更管理流程、防止再次发生，并要 Docomo 汇报整改措施。

决策问题出在变更管理：一个关键网络功能的迁移，用了让信令系统过载的方式来回滚，而回滚失败又把核心服务带垮。决定进行、然后又仓促反悔这次变更的操作决策，正是把一次例行维护变成全国性故障的东西。