Auteur Sujet: Retour d'expérience de l'incendie OVH Strasbourg de mars 2021: Les actions d'OVH  (Lu 10822 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Les retours d'expérience de l'incendie OVH Strasbourg de mars 2021 : Les actions concrètes mises en place par OVH pour que cela ne se reproduise pas

Le 10 mars 2021, à 0 h 35, départ de feu sur un onduleur de la salle d’énergie n°2 de SBG2 : (c'est un onduleur seul, les batteries sont dans une autre salle)


Les pompiers arrivent sur les lieux à 00 h 59. Il y a alors d’importants dégagements de fumée au rez-de-chaussée et les secours constatent la présence d’arcs électriques de plus d'un mètre autour de la porte extérieure du local énergie. Les pompiers notent la présence de "flashs impressionnants et bruits assourdissants". Il faut couper le 20 000 volt pour intervenir... mais la coupure du 20 000 volts se fait dans le local énergie en question...

Une lance à eau est déployée en attente de la coupure électrique du site. Il a fallu attendre 1 h 50 pour que le 20 000 volt soit coupé en amont du site, mais trop tard : le feu s'est propagé à la totalité du 1er étage et la propagation aux étages supérieurs ne peut plus être enrayée. Le feu est éteint à 10 h 02 par de nombreux pompiers français et allemands.

SBG2 serait totalement détruit, SBG1 est détruit à 42% et SBG3 endommagé par les fumées :


Deux sujets ont été consacrés sur le forum :
- Incendie OVH à Strasbourg : SBG2 complètement détruit. SBG1 détruit à 42%
- Rapport d’enquête du BEA-RI sur l’incendie du data center SBG2 OVH de Strasbourg du 10 mars 2021

Ce sujet se focalise sur le retour d'expérience et les nombreux changements réalisés par OVH...⁣



vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Quelles sont les actions qu'OVH a réalisé pour qu'un tel incendie ne puisse plus se reproduire ?

OVH a investi 50 millions d'euros sur 4 ans pour changer radicalement la résilience de ses datacenter face au risque d'incendie, mais aussi d'autres risques comme le risque d'explosion des locaux batterie ou de pollution des sols.

Les changements sont nombreux et visent à proposer un haut niveau de résilience :

- Extinction incendie : OVH qui n'avait pas déployé en France d'extinction incendie se dote d'une extinction automatique à eau (Sprinkler) et à gaz (IEAG dans la diapositive ci-dessous, pour "Installation d'extinction automatique à gaz"). L'extinction à GAZ est limitée aux salles batterie, énergie (onduleurs) et réseau (routeurs).

- Déplacement à l'extérieur des datacenter, partout où cela est possible, des locaux à risque, avec création à l'extérieur de salles batteries et salles onduleur séparées du datacenter.

- Coupe-feu deux heures, murs et planchers pour les salles batterie (c'est obligatoire et ce n'était pas le cas sur SBG2), mais aussi coupe-feu deux heures pour les salles énergie, les salles réseau et les salles serveur.

- Système de désenfumage des locaux (extraction mécanique en cas d'incendie), clapet coupe-feu.

- Détecteurs de H2 pour les risques d'explosions (coupure de charge des batteries automatiques en cas de détection de H2 ou de coupure de la ventilation permanente des salles batterie).

- Aire de dépotage pour la livraison du fioul destiné aux groupes électrogène.


Une des salles batterie d'OVH Gravelines :


vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
La présentation d'OVH au  Secrétariat Permanent pour la Prévention des Pollutions Industrielles (SPPPI) de juillet 2022 :

On note que de nombreuses actions sont "en cours".





vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Autres nouveautés mises en place par OVH :

Des plans d'intervention interne sont mis en place sur tous les sites, mais il y a un travail préparatoire avec les pompiers (SDIS ci-dessous, pour Service départemental d'incendie et de secours) au cas où...

Cela fait nul doute que l'électricité pourra être coupé rapidement si c'est nécessaire.



vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Le programme Hyper-Résiliance d'OVH, en résumé :


vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Un autre sujet a été réalisé avec la présentation : Présentation du datacenter d'OVH Gravelines

Les slides complets d'OVH au Secrétariat Permanent pour la Prévention des Pollutions Industrielles (SPPPI) de juillet 2022 :


(cliquez sur la miniature ci-dessous - le document est au format PDF)

bolemo

  • AS2027 MilkyWan
  • Professionnel des télécoms
  • *
  • Messages: 1 616
  • Grandcamp Maisy (14)
Je poste donc ma réponse ici (en continuation du fil divergeant depuis le fil sur l'incendie du DC Maxnod) :

Comme le dit @fansat70, il y a le risque vis-à-vis des assureurs, et le risque réel d'incendie. On pense trop au premier au détriment du second…

Cloisonnement ne veut pas dire confinement. Confiner des groupes de batteries, c'est en effet donner plus de potentiel à ce qui sont de facto des petites bombes (Li-XX).
Mais des cloisons verticales entre des groupes de batteries pour empêcher la propagation thermique et mécanique horizontalement (donc entre groupes) d'un feu ou d'une explosion, avec une ventilation/extraction commune par le haut pourrait aider je pense…

Après, aller plus loin serait stérile, car seules des simulations ou des expériences en laboratoire pourraient permettre d'établir le bon type de cloisonnement, mais pour moi, la logique de si une batterie brûle, alors laissons les toutes brûler (sans risque pour le reste du DC, ce qui est déjà très bien), ne va pas assez loin…
Certes, si l'assurance rembourse toutes les batteries, et qu'en cas d'incident, au final je me retrouve avec tout un lot de batteries neuves, le calcul financier est vite-fait (et on rejoint les propos de fansat70)…
Mais le bon sens voudrait que perdre 5 ou 10 batteries reste mieux qu'en perdre la totalité…

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Concernant les batteries au plomb, vu que c'est la technologie utilisée par OVH, je me demande le confinement que tu préconises n'accroît pas le risque de concentration d'hydrogène pendant le cycle de charge, et donc le risque d'explosion...

Quand je vois une salle batterie de Interxion en région parisienne, je vois un volume d'air pour le nombre de batteries très important, alors que le mettre carré coute très cher, on est au porte de Paris. J'imagine que cela doit avoir une utilité vis-à-vis du risque d'explosion ou d'incendie (je ne vois pas de système d'extinction incendie, toutefois je note que de nombreux datacenter n'ont pas de système d'extinction incendie dans les locaux batterie)


Le temps que les générateurs se lancent et se synchronisent, ce sont des batteries qui permettent aux serveurs d’être alimentés :


Crédit photo : Interxion France

bolemo

  • AS2027 MilkyWan
  • Professionnel des télécoms
  • *
  • Messages: 1 616
  • Grandcamp Maisy (14)
Concernant les batteries au plomb, vu que c'est la technologie utilisée par OVH, je me demande le confinement que tu préconises n'accroît pas le risque de concentration d'hydrogène pendant le cycle de charge, et donc le risque d'explosion...

Quand je vois une salle batterie de Interxion en région parisienne, je vois un volume d'air pour le nombre de batteries très important, alors que le mettre carré coute très cher, on est au porte de Paris. J'imagine que cela doit avoir une utilité vis-à-vis du risque d'explosion ou d'incendie (je ne vois pas de système d'extinction incendie, toutefois je note que de nombreux datacenter n'ont pas de système d'extinction incendie dans les locaux batterie)


Alors oui, comme indiqué dans l'autre fil, les batteries au plomb sont différentes de celles au lithium… Et comme le risque pour celles au plomb se trouve surtout à la charge avec l'émission d'hydrogène, si ce risque est réduit drastiquement avec ventilation et espace, la cloisonnement n'est peut-être pas nécessaire (les batteries en soi n'étant pas particulièrement inflammables comme celles au Lithium).

Mais pareil, seules des simulations et expériences en lab incendie pourrait répondre à cela.

butler_fr

  • Client Bbox adsl
  • Modérateur
  • *
  • Messages: 3 607
  • FTTH orange
tu pourrais rajouter dans le retour d'expérience ignifugation des différents câblage à intervalle régulier :)

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Pour infuger à intervalle réguliers ?

172sp

  • Abonné Orange Fibre
  • *
  • Messages: 333
  • Le Cannet (06)
Concernant les batteries au plomb, vu que c'est la technologie utilisée par OVH, je me demande le confinement que tu préconises n'accroît pas le risque de concentration d'hydrogène pendant le cycle de charge, et donc le risque d'explosion...

Quand je vois une salle batterie de Interxion en région parisienne, je vois un volume d'air pour le nombre de batteries très important, alors que le mettre carré coute très cher, on est au porte de Paris. J'imagine que cela doit avoir une utilité vis-à-vis du risque d'explosion ou d'incendie (je ne vois pas de système d'extinction incendie, toutefois je note que de nombreux datacenter n'ont pas de système d'extinction incendie dans les locaux batterie)


En tout cas, ils pourraient mieux faire au niveau continuité des masses, la câblette de terre n'entre pas dans l'armoire métallique et les chemins de câble métalliques n'arrivent ni à l'armoire ni aux tableaux électriques des groupes de batteries.