OVHcloud : un incendie a mis hors ligne deux centres de données de Strasbourg et 3,6 millions de sites web

À 00h47 le 10 mars 2021, un incendie s'est déclaré dans une salle de la halle SBG2 du campus de centres de données d'OVHcloud à Strasbourg, dans une zone industrielle au bord du Rhin. Les pompiers n'ont pas pu maîtriser les flammes : SBG2 a été entièrement détruite à 04h09, une partie de SBG1 a été emportée avec elle, et l'électricité a été coupée sur tout le site — si bien que SBG3 et SBG4, épargnées par les flammes, se sont également retrouvées hors ligne. Personne n'a été blessé.

La panne a été massive parce qu'OVHcloud est massif : premier hébergeur d'Europe et troisième mondial. Netcraft a compté 3,6 millions de sites web répartis sur 464 000 domaines distincts mis hors ligne, dont 184 000 sites français sur 59 600 domaines en .fr. Les victimes allaient du serveur d'échecs Lichess au jeu Rust et à la plateforme d'échange de cryptomonnaies Deribit, jusqu'au Centre Pompidou, à l'Agence spatiale européenne et au club de football de Villarreal — et les clients qui n'avaient aucune copie de leurs données en dehors de Strasbourg ont trouvé bien vide le conseil de recourir à la reprise après sinistre.

La réponse s'est étalée sur des mois. OVH a promis 10 000 nouveaux serveurs sous trois à quatre semaines et une infrastructure de remplacement sur ses sites de Roubaix et Gravelines ; plus de 100 pompiers, dont une pompe flottante sur le Rhin, ont mis plus de six heures à éteindre le feu. Le nettoyage d'une seule baie a pris sept heures. En avril, le directeur financier a qualifié la restauration de « véritable cauchemar » et Klaba de « gigantesque Tetris ». OVH a cessé de facturer les services touchés et a confié la cause à la police et aux assureurs : l'onduleur UPS7 avait été entretenu par son fournisseur ce matin-là, et UPS7 comme UPS8 brûlaient tous deux à l'arrivée des pompiers.

L'ampleur des dégâts a scellé le sort de SBG1 : elle était si gravement endommagée qu'elle ne serait jamais remise en service. Ses baies ont été nettoyées et transférées vers les halles survivantes SBG3 et SBG4 ou vers Roubaix et Gravelines — tout un centre de données mis au rebut. Un seul incendie dans un seul bâtiment avait coûté à OVHcloud deux halles, des mois de restauration en « véritable cauchemar », et la découverte qu'un campus n'est sûr qu'à hauteur de son bâtiment le moins redondant.

L'incendie a détruit SBG2, contraint à l'abandon de SBG1 et mis hors ligne 3,6 millions de sites web.

Un seul campus, un seul point de bascule : quatre centres de données partageaient un seul site, et une coupure d'électricité par précaution les a tous mis hors ligne — SBG3 et SBG4 n'ont pas brûlé et se sont pourtant retrouvées hors ligne.

Le déclencheur suspecté était banal : l'onduleur UPS7 avait été entretenu par son fournisseur ce matin-là, et UPS7 comme UPS8 étaient en flammes à l'arrivée des pompiers — une maintenance sur un point unique de défaillance.

Le produit supposait que le client avait un plan : la première consigne d'OVH était d'activer les plans de reprise après sinistre — pour les clients dont les données n'existaient qu'à Strasbourg, cette dernière ligne de défense était vide.

La restauration est devenue la seconde facture : des baies nettoyées à la main, sept heures chacune, sous confinement lié à la COVID, le directeur financier parlant encore de « véritable cauchemar » un mois plus tard.

Un seul incendie a mis hors ligne tout un campus parce que tout se trouvait au même endroit. L'onduleur avait été entretenu ce matin-là même — et pour les clients sans sauvegarde, le cloud s'est révélé n'être qu'un bâtiment.