El 8 de noviembre de 2023, la segunda mayor compañía de telecomunicaciones de Australia sufrió un fallo total de red que duró entre 12 y 14 horas y afectó a más de 10 millones de personas y 400.000 empresas. La caída dejó fuera de servicio los teléfonos móviles, el internet doméstico, la telefonía fija, los terminales EFTPOS, las centralitas de los hospitales y el servicio de llamadas de emergencia Triple Zero en todo el país.
La causa fue un fallo de enrutamiento del Protocolo de Puerta de Enlace Fronteriza (BGP) desencadenado por una actualización de software en un intercambio de Singtel en Norteamérica. Cuando un router se desconectó como medida de protección contra la sobrecarga de actualizaciones de enrutamiento, lo siguieron aproximadamente 90 routers de proveedores de borde, lo que desencadenó un apagado en cascada que las salvaguardas automatizadas de la red no pudieron detener. La caída duró desde las 4:05 AM AEDT hasta bien entrada la tarde, y algunos servicios solo se recuperaron al día siguiente.
El daño financiero fue grave. Singtel, la empresa matriz singapurense, perdió más de 2.000 millones de dólares australianos en valor de mercado, ya que el precio de sus acciones cayó un 4,8 % en la Bolsa de Singapur. La consejera delegada de Optus, Kelly Bayer Rosmarin, recibió fuertes críticas por la comunicación lenta e imprecisa de la empresa durante la crisis. Dimitió una semana después, y la compañía ofreció a los clientes afectados 200 GB de datos de bonificación como compensación.
El gobierno australiano encargó una revisión independiente dirigida por el Dr. Richard Bean, que publicó 18 recomendaciones. El Senado también celebró una investigación pública. La revisión pidió nuevas normas de comunicación con los clientes, un régimen de pruebas de Triple Zero y la creación de un custodio dedicado de Triple Zero para evitar que se repita.
La desconexión de un router provocó la de otros 90 y, sin posibilidad de anulación manual, la cascada lo dejó todo fuera de servicio, con un coste de 2.000 millones de dólares australianos en valor de mercado y el puesto de la consejera delegada.
Una sola actualización de software se convirtió en una caída a escala nacional porque las medidas de protección automatizadas de la red se activaron unas a otras en secuencia sin posibilidad de intervención humana.
Optus no disponía de un respaldo rápido ni de una conmutación por error que pudiera sortear el colapso del BGP, lo que dejó a 10 millones de clientes sin servicio durante medio día.
La comunicación de crisis de la empresa fue imprecisa y lenta, lo que erosionó aún más la confianza pública mientras la red seguía caída.
Un solo cambio en la red puede dejar sin comunicaciones a todo un país: hay que probar las actualizaciones de enrutamiento de forma aislada y mantener una anulación manual que funcione a escala.
CONSULTA LAS PRUEBAS
Las fuentes
- 2023 Optus outage — Wikipedia en.wikipedia.org
- A major shakeup: the Optus outage investigation — The Conversation theconversation.com
- BBC News — Millions hit by Australian phone network failure (8 November 2023) bbc.com