何が起きたか
2023年10月3日、カナダ国鉄(CN)のネットワーク全体のシステム障害により、GOトランジットの全回廊で運行が停止し、トロントのUPエクスプレスも運休した。CNは従業員に対し、障害は「内部システムのアップグレードに起因し、CNのインターネット接続能力に影響を与えた」と伝えた。GOとViaの列車はいずれもユニオン駅を通過して運行するためにCNのシステムへのインターネット接続を必要とする。
CNがGOと協力して列車の運行指令を一時的に引き継ぎ、GOとViaのサービスを部分的に再開させた後、列車は夕方にかけて徐々にしか再開しなかった。あるViaの乗客のロンドン発トロント行きの旅は午前10時50分に出発し、午後1時10分到着予定だったが、午後4時20分に到着した。3時間以上遅れ、オンタリオ州議会議員や州首相との会合に間に合わなかった。この停止により、配車アプリのサージ料金も発生し、TTCは地下鉄の運行を増やすことになった。
CNは自社の列車には遅延がなく、データへの影響もなく、サイバーセキュリティ上の問題を示す兆候はなかったと述べた。同社のウェブサイトと顧客ポータルは午後の一部の時間帯に自らオフラインになっていた。CNは影響について謝罪し、原因は依然として調査中であると述べ、GOトランジットとともにレビューを行うことを約束した。
何を犠牲にしたか
2023年10月3日の大半の時間帯に全GO回廊とUPエクスプレスが停止。Viaの列車は数時間遅延。1件の旅は3時間以上余分にかかった。再開は夕方になってからに過ぎなかった。
なぜ起きたか
CNは内部アップグレードを実施し、その障害モードはネットワーク全体のシステムのインターネット接続喪失であった。
GOトランジットとViaは運行指令のためにCNシステムへのライブ接続に依存しているため、CNの障害によりトロント全域で両社の列車が停止した。
この障害により、CN自身のウェブサイトと顧客ポータルも一日の一部の時間帯にオフラインになった。
復旧には、通常運行を再開する前にGOの運行指令をCNに引き継ぐことを即興で行う必要があった。
教訓
ある鉄道会社のシステムが他社すべての運行指令を担っている場合、接続を切断しうるアップグレードは地域全体を巻き込んで停止させる。フェイルオーバーは保守の前にテストする必要があり、保守中にテストするものではない。
その後
2023年10月4日の朝までに「最小限の混乱」で運行が再開した。CNはGOと協力してこのインシデントをレビューし、さらなる混乱を避けるためのプロセスを整備すると述べた。報告時点で根本原因は公表されていない。
出典をたどる