El fallo de refrigeración de Vipshop costó 100 millones de yuanes y le costó el puesto a un vicepresidente

El 29 de marzo de 2023, la plataforma de comercio electrónico de Vipshop sufrió una interrupción catastrófica cuando un fallo en el sistema de refrigeración de su IDC (Centro de Datos de Internet) de Nansha provocó un aumento rápido de la temperatura en la sala de servidores, lo que desencadenó una cascada de apagados de equipos. La interrupción duró más de 12 horas, afectó a más de 8 millones de clientes y causó a la empresa pérdidas directas superiores a los 100 millones de yuanes. Vipshop clasificó el incidente como un fallo de nivel P0 (el más grave).

La respuesta de la empresa fue rápida y pública: se despidió al responsable del departamento de la plataforma de infraestructura y se exigieron responsabilidades a los gerentes directos de los equipos afectados. El incidente también afectó a Tencent, que alojaba servicios en el mismo centro de datos y clasificó internamente el suceso como un «accidente de nivel 1», lo que se saldó con críticas, degradaciones y despidos de varios ejecutivos. El fallo puso de manifiesto los riesgos de una arquitectura de centro de datos único y de una planificación inadecuada de la recuperación ante desastres.

Vipshop operaba en un único centro de datos sin conmutación por error, por lo que un solo fallo de refrigeración costó más de 100 millones de yuanes y le costó el puesto al vicepresidente.

Vipshop operaba toda su plataforma en un único centro de datos sin conmutación por error en tiempo real: un fallo de refrigeración en una sala tumbó a toda la empresa

La interrupción duró 12 horas, lo que sugiere que ni siquiera los procedimientos básicos de recuperación ante desastres estaban implementados o no pudieron activarse con la suficiente rapidez

Un único centro de datos es un único punto de fallo, y un fallo de refrigeración no es un suceso excepcional: es un riesgo previsible que toda plataforma debería poder superar