La défaillance du refroidissement de Vipshop a coûté 100 M¥ et son poste à un vice-président

Le 29 mars 2023, la plateforme de commerce électronique de Vipshop a subi une panne catastrophique lorsqu'une défaillance du système de refroidissement de son IDC (centre de données Internet) de Nansha a fait monter rapidement la température des salles serveurs, déclenchant une cascade d'arrêts d'équipements. La panne a duré plus de 12 heures, touché plus de 8 millions de clients et causé à l'entreprise plus de 100 millions de ¥ de pertes directes. Vipshop a classé l'incident au niveau P0 (le plus grave).

La réaction de l'entreprise a été rapide et publique : le responsable du département de la plateforme d'infrastructure a été licencié et les managers directs des équipes concernées ont été tenus responsables. L'incident a également touché Tencent, qui hébergeait des services dans le même centre de données et a classé l'événement en interne comme un « accident de niveau 1 », ce qui a entraîné des critiques, des rétrogradations et des licenciements de plusieurs dirigeants. La défaillance a mis en évidence les risques d'une architecture à centre de données unique et d'une planification de reprise après sinistre inadéquate.

Vipshop fonctionnait sur un seul centre de données sans basculement, si bien qu'une seule panne de refroidissement a coûté plus de 100 M¥ et son poste au vice-président.

Vipshop exploitait toute sa plateforme sur un seul centre de données sans basculement en temps réel — une défaillance du refroidissement dans une salle a fait tomber toute l'entreprise

La panne a duré 12 heures, ce qui suggère que même les procédures de base de reprise après sinistre n'étaient pas en place ou ne pouvaient pas être activées assez rapidement

Un centre de données unique constitue un point de défaillance unique, et une panne de refroidissement n'est pas un événement exceptionnel — c'est un risque prévisible que toute plateforme devrait pouvoir surmonter