2023년 11월 8일, 호주 2위 통신사가 12~14시간 동안 지속된 전면적인 네트워크 장애를 겪으며 1,000만 명이 넘는 개인과 40만 개 기업에 영향을 미쳤다. 이 장애로 전국에서 휴대전화, 가정용 인터넷, 유선전화, EFTPOS 단말기, 병원 교환대, 트리플 제로(Triple Zero) 긴급 통화 서비스가 모두 중단됐다.
원인은 싱텔(Singtel) 북미 교환국에서의 소프트웨어 업그레이드로 촉발된 경계 게이트웨이 프로토콜(BGP) 라우팅 장애였다. 라우팅 업데이트 과부하에 대한 보호 조치로 라우터 한 대가 연결을 끊자 약 90대의 엣지 제공자 라우터가 뒤따라 연결을 끊었고, 네트워크의 자동 안전장치가 막을 수 없는 연쇄적인 셧다운이 시작됐다. 장애는 호주 동부 서머타임(AEDT) 오전 4시 5분부터 늦은 오후까지 이어졌으며, 일부 서비스는 다음 날에야 복구됐다.
재정적 피해도 심각했다. 싱가포르의 모회사인 싱텔은 싱가포르 거래소에서 주가가 4.8% 하락하면서 시가총액 20억 호주달러 이상을 잃었다. Optus CEO 켈리 베이어 로즈마린은 위기 상황에서 회사의 느리고 모호한 소통으로 거센 비판을 받았다. 그녀는 일주일 뒤 사임했고, 회사는 피해 고객에게 보상으로 200GB의 보너스 데이터를 제공했다.
호주 정부는 리처드 빈(Richard Bean) 박사를 책임자로 한 독립 검토를 의뢰했고, 이 검토는 18개의 권고안을 발표했다. 상원도 공개 조사를 실시했다. 검토는 재발 방지를 위해 새로운 고객 소통 규칙, 트리플 제로 테스트 체계, 그리고 트리플 제로 전담 관리 기구의 신설을 촉구했다.
무엇을 치렀나
라우터 한 대의 연결 끊김이 90대의 연결 끊김을 촉발했고, 수동 개입 수단이 없어 연쇄 작용이 모든 것을 마비시켰으며, 그 결과 시가총액 20억 호주달러의 손실과 CEO의 퇴진을 초래했다.
왜 일어났나
소프트웨어 업그레이드 하나가 전국적인 장애로 이어진 것은 네트워크의 자동 보호 조치가 사람의 개입 없이 연쇄적으로 작동했기 때문이다.
Optus에는 BGP 붕괴를 우회할 수 있는 신속한 백업이나 페일오버 수단이 없어, 1,000만 고객이 반나절 동안 서비스를 받지 못했다.
회사의 위기 소통은 모호하고 느렸으며, 네트워크가 여전히 중단된 상황에서 대중의 신뢰를 더욱 훼손했다.
교훈
네트워크 변경 하나가 한 나라 전체의 통신을 마비시킬 수 있다 — 라우팅 업데이트는 격리된 환경에서 테스트하고, 대규모에서도 작동하는 수동 개입 수단을 마련해야 한다.
근거 확인하기
출처
- 2023 Optus outage — Wikipedia en.wikipedia.org
- A major shakeup: the Optus outage investigation — The Conversation theconversation.com
- BBC News — Millions hit by Australian phone network failure (8 November 2023) bbc.com