Auteur Sujet: 28/03/2023 Incendie dans le datacenter Maxnod  (Lu 54359 fois)

0 Membres et 1 Invité sur ce sujet



Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter

alf084

  • Abonné Starlink
  • *
  • Messages: 379
  • Paris 75

Optix

  • AS41114 - Expert OrneTHD
  • Abonné Orne THD
  • *
  • Messages: 4 667
  • WOOHOO !
    • OrneTHD
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #16 le: 28 mars 2023 à 23:58:37 »
Autant, l'incendie d'OVH, bof. Mais là, j'avoue que ça m'a fait qq chose dans mon p'tit coeur  :'(

Un petit DC neutre, monté par la main d'un mec qui a monté un petit opérateur, qui a poussé LyonIX, etc. Tout ce travail bousillé en qq heures.

Une pensée émue pour Lionel et ses salariés, j'espère qu'ils sauront se relever de cette épreuve, apprendre de cela et repartir d'une façon ou d'une autre.

sweet77

  • Abonné Free fibre
  • *
  • Messages: 92
  • Vaux-le-Pénil (77)
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #17 le: 29 mars 2023 à 00:07:42 »
Bonsoir,

Cest là qu'on voit la compétence et le professionalisme des gens comme nico, hugues, optix et bien dautres...

Bravo messieurs ! Vous méritez la confiance que nous portons à des gens de bonne volonté comme vous !
Il faut en avoir dans le pantalon pou remettre en ordre un DC aprrès un grave incendie tel quel celui là.

De tout coeur avec vous.

xp25

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 5 938
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #18 le: 29 mars 2023 à 00:18:46 »
Les normes vont elles être revues pour éloigner drastiquement l'alimentation électrique et sa redondance des baies réseaux ?

Ça va peut être devenir une condition "sine qua non" que TGBT/Batteries/arrivées électriques soient dans un local bétonné et éloigné de plusieurs centaines de mètres sans communication avec les salles serveur maintenant pour héberger son matos !

vivien

  • Administrateur
  • *
  • Messages: 47 183
    • Twitter LaFibre.info
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #19 le: 29 mars 2023 à 00:25:17 »
Certains acteurs se mettent à mettre les batteries dans un bâtiment extérieur, séparé du datacenter.

Certains font de même pour les onduleurs, suite à l'incendie d'OVH, a vu que les batteries ne sont pas les seuls éléments à risque.

Pour le TGBT je ne pense pas que cela soit nécessaire.

Le rapport rapporte "une mesure hygrométrique singulière vers 23h15 et une nouvelle augmentation de celle-ci un peu après 0h30 [...] Il n’est pas possible, à ce stade, d’établir la cause de la défaillance au niveau de l’ASI qui pourrait s’expliquer par différentes hypothèses (présence de liquide ou d’humidité liée à la présence du système de refroidissement situé à proximité, dysfonctionnement lié à l’opération de maintenance réalisée le matin même, exploitation de l’onduleur en dehors des plages normales de fonctionnement, …)."

Le 10 mars 2021, a 0h35, départ de feu sur un onduleur de la salle d’énergie n°2 de SBG2 (source : image extraite de la vidéosurveillance OVH, publiée par le BEA-RI)


caaptusss

  • AS197922 Officiel Techcréa
  • Expert
  • *
  • Messages: 115
  • Valenciennes (59)
    • FirstHeberg
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #20 le: 29 mars 2023 à 01:20:46 »
arf cette image me met toujours la chair de poule Vivien...
Maxnode a un peu la même histoire que ma boite, comme d'autres ici d'ailleurs. Une petite infra qui grossit, et qui s'installe dans un DC de conception "interne" et construit par nos petites mains.
Quand je vois le résultat sur les photos de Hugues, je reste... stoïque. Ca me fait vraiment mal de voir ça, car je m'identifie énormément à ce qui est arrivé. On était passé pas loin d'un évènement similaire dans notre dernier DC, ce qui m'a poussé à faire des choix assez drastique sur le DC qu'on exploite à Marly, notamment en matière d'extinction automatique.

Mais quand on voit la puissance calorifique dégagé par les matériaux isolant, et les batteries en elles même, on se dit qu'on peut mettre toute la sécurité qu'on veut, on restera impuissant face à ça.
La seule solution est effectivement de déplacer le risque à l'extérieur des salles, dans un bâtiment annexe. C'est ce que j'ai dessiné pour notre prochain DC qui sortira de terre dans les années à venir. TGBT, transfo, batteries, onduleur, tout ça à part, et à au moins 10 Mètres du bâtiment principal.

Les réflexes vis à vis de la suie sont d'ailleurs les bons. Le matériel, bien que "sauf", est mort. Seul les données peuvent avoir du sens en terme de récupération. Décontaminer les serveurs, c'est toujours possible, mais terriblement long, et souvent incertain, y a qu'à voir le taux de panne des serveurs transférés de Strasbourg sur OVH, le forum est plein d'exemples.

Espérons que ce type d'évènement fera surtout progresser les stratégies de sauvegarde, et faire prendre conscience aux DSI et passionnés, qu'un datacenter, ça brule, et ça brule même bien.
« Modifié: 29 mars 2023 à 02:09:40 par caaptusss »

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 446
  • Lyon (69) / St-Bernard (01)
    • Twitter
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #21 le: 29 mars 2023 à 01:23:59 »
Pour info, l'incident a eu lieu pendant le raccordement du pack de batteries a un onduleur du circuit photovoltaïque du batiment (tout ce matériel était neuf et pas encore en prod)
Donc extinction manuelle a la seconde ou ça a pris feu, ils ont passé 5 extincteurs mais ça n'a pas suffi.

acontios

  • AS34019 - Hivane Network
  • Professionnel des télécoms
  • *
  • Messages: 191
  • Paris (75)
    • Hivane
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #22 le: 29 mars 2023 à 01:34:44 »
Ce sont des images qui sont difficiles à voir :(

Tout mon soutien à Lionel et ses équipes, et si je peux faire quelque chose pour aider, n'hésitez pas à me contacter. Faut rester solidaire sur ce genre de coup dur !


burger hans

  • Abonné Orange vdsl
  • *
  • Messages: 386
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #23 le: 29 mars 2023 à 06:44:20 »
Je suis de tout cœur avec vous et je reste admiratif du travail accompli pour faire repartir la machine, chapeau ! Hans.👍🏻