Auteur Sujet: 28/03/2023 Incendie dans le datacenter Maxnod  (Lu 66047 fois)

0 Membres et 1 Invité sur ce sujet

fansat70

  • Abonné Free fibre
  • *
  • Messages: 5 221
  • 70 - St Loup-sur-Semouse
    • Carte ZANRO/ZASRO-PM Haute Saône
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #240 le: 17 mai 2023 à 15:28:21 »
Je t’invite à parcourir le site de Maxnod, lire le nombre d’occurences du mot « tier 4 » et d’en déduire si a ton avis c’est une petite blague ou si c’était très sérieux :)
Là, rien que sur une seule page, mon deuxième neurone a déjà disjoncté...  ;)

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 6 178
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #241 le: 18 mai 2023 à 09:38:51 »
Tiens, un autre sujet qu'on n'a pas encore abordé à propos de l'incendie.
MaxNod était équipé, dans la salle informatique, d'un système d'extinction d'incendie automatique à gaz.

Avec la détection automatique de fumées, le système s'est très probablement déclenché.
Est-ce que quelqu'un peut confirmer?

Dans ce cas, le système aurait du fermer l'arrivée d'air des "centrales de traitement d'air", donc empêcher la surpression d'air dont parle Vivien.
L'arrivée d'air sur la photo (chaine de traitement d'air vers salle IT) ne semble pas équipée de volets /registres incendie automatique, c'est surprenant, car il me semble que c'est obligatoire avec une extinction par gaz. A moins que le système d'isolation incendie ne se base sur des volets / registres en amont dans la chaine de traitement d'air...
Le système aurait du à minima couper la ventilation, mais c'est sans doute insuffisant pour étouffer un début d'incendie dans la salle informatique.


Pendant l'incendie, est-ce que le gestionnaire du datacenter aurait volontairement coupé cette action anti incendie automatique (gaz + arrêt circulation air extérieur), pour maintenir volontairement la surpression d'air dans la salle IT?

Leon.

vivien

  • Administrateur
  • *
  • Messages: 47 922
    • Twitter LaFibre.info
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #242 le: 18 mai 2023 à 09:50:56 »
Tout est expliqué sur le site (actuellement en ligne) : Il n'y a pas de détection de fumée, mais la chaleur de l'incendie doit faire fondre un tube PVC rempli de CO2 en basse pression.

J'imagine qu'il a effectivement fondu en haut des baies quand la chaleur est montée haut et que le CO2 est parti.

En ayant fait le choix de la technologie de CO2 sous pression, MAXNOD garantit la continuité d’exploitation. Cette technique permet un traitement anti-feu unitaire sur chaque serveur présent dans une baie, sans que l’exploitation de celle-ci soit neutralisée, et par la même, stopper l’exploitation des autres serveurs.

Principe : un tube PVC rempli de CO2 en basse pression serpente au cœur de la baie et éclate par la chaleur dégagée lors du départ d’un feu. Est ainsi libéré sur le ou les serveurs incriminés le gaz nécessaire à l’extinction d’un feu. Prévenue par les nombreux systèmes de monitoring qui équipent les baies et les serveurs, une équipe de technicien intervient afin de s’assurer de la continuité de service.

D’une manière générale, il est extrêmement rare qu’un dégagement de fumée dans une baie ait pour conséquence un départ de feu. Les protections électriques amonts, disjoncteurs 30mlh et autres disjonctions permettent de parer bien souvent en amont au pire. Pourquoi noyer une baie (gaz ou eau) et stopper l’exploitation de nombreux clients pour un simple dégagement de fumée ?...

Dans un DATACENTER traditionnel, la détection de fumée débouche généralement par l’utilisation massive de produits conditionnés dans des bonbonnes de 50 à 200 bars, hynergènes, FM200 ou gaz sous haute pression.
Le seul problème de ce type de produit est que la salle complète est arrêtée, et que les disques durs des serveurs seront abimés ! Sur ce site, nous avons une extinction automatique à  base de CO2 sous faible pression directement injecté au plus près du départ de feu et isolé à une seul baie.

Aucun arrêt électrique, ni coupure de salle ne sont engendrés pas la détection ou l'extinction d'un départ de feu.
Afin de palier à ce type de risque nous contrôlons chaque jour la présence de papier et de carton dans les baies ainsi que les séparations (câches en métal fournis) Votre activité ne peut en aucun cas souffrir d’un arrêt d’exploitation quelle que soit sa durée ?

La restauration de vos données en cas de crash disque occasionnera une procédure de restauration comprise entre 24 et 96 heures, même si votre PRA a pris la main en secours d’exploitation. Fuyez les systèmes anti-feu sous pression non sélectifs ou par brouillard d’eau. (Il suffit de lire les conditions d'exploitation de vos serveurs. Généralement l'humidité relative est comprise entre 20% et 80% HR en fonctionnement)

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 6 178
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #243 le: 18 mai 2023 à 10:11:44 »
Ca semble être un produit comme celui ci
https://www.indiamart.com/proddetail/data-centre-fire-gas-suppression-system-24150078055.html

Appréciez la procédure de test avec le briquet, très représentatif.
Donc ça doit fonctionner correctement dans une armoire électrique fermée. Mais dans une baie ouverte aux 4 vents, comme à feu Maxnod (SIC!), je ne vois pas trop...

Le système semble être sur les côté des baies. Vous confirmez, ceux qui connaissaient le datacenter?
La photo ci dessous est prise depuis le couloir chaud (=arrière des serveurs).


Leon.

buddy

  • Expert
  • Abonné Free fibre
  • *
  • Messages: 15 509
  • Alpes Maritimes (06)
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #244 le: 18 mai 2023 à 13:04:06 »
Donc ça doit fonctionner correctement dans une armoire électrique fermée. Mais dans une baie ouverte aux 4 vents, comme à feu Maxnod (SIC!), je ne vois pas trop...
Pour moi c'est fait selon moi, comme c'est écrit, pour quand tu as des flammèches sur 1 serveur et que c'est la source du feu. Là pour l'incendie qu'il y a eu ce système est inefficace.
1) le feu venait de l'extérieur
2) La salle étant ouverte aux 4 vents de toute façon même si le gaz s'était répandu, 1 min après au vu des mouvements de convection l'air serait redevenu 'normal'.

Mais c'est +/- pareil avec tous les systèmes des datacenters, c'est fait pour contenir / étouffer un feu naissant non ?
Si c'est le bâtiment qui brule, tu peux mettre le gaz que tu veux dans la pièce, dès que la porte / le plancher / le mur a été "percé" par le feu, c'est fini. le gaz sort et ça brule. d'où l’intérêt d'avoir des murs / planchers / porte coupe feu.

vivien

  • Administrateur
  • *
  • Messages: 47 922
    • Twitter LaFibre.info
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #245 le: 18 mai 2023 à 13:59:08 »
On va dire que depuis OVH Strasbourg, il y a des changements et que de nombreux acteurs s'équipent de sprinkler pour être en mesure de faire face à un feu important.

Le risque est faible du côté serveur : un serveur brule très mal et propage peu l'incendie. Le risque est là où il y a de la puissance : batteries, onduleurs, transformateurs.

L'incendie Global Switch Clichy a fait beaucoup parler de lui à cause des impacts importants pour Google, mais il a été pas si mal géré que ça : L'incendie a été contenu dans la salle énergie et bien que la communication a longtemps laissé entendre que le bâtiment serait éteint, cela n'a pas été le cas. Si du matériel était HS, c'est à cause de la chaleur dans les salles (panne de clim). Je ne sais pas si on aura le détail, mais l'incident de climatisation semble lui bien moins géré : plusieurs heures de pannes et il serait à l'origine du départ d'incendie.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 6 178
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #246 le: 18 mai 2023 à 14:12:40 »
Pour moi c'est fait selon moi, comme c'est écrit, pour quand tu as des flammèches sur 1 serveur et que c'est la source du feu. Là pour l'incendie qu'il y a eu ce système est inefficace.
Tu as mal compris mon propos. Je jugeait juste ce système d'extinction en soi. Je ne le jugeais pas vis à vis de l'incendie qu'il y a eu.
Je ne vois pas comment un dispositif qui crache du CO2 sur le côté d'un serveur peut éteindre un incendie qui partirait dans le serveur... Il y a une logique qui m'échappe.

Citer
Mais c'est +/- pareil avec tous les systèmes des datacenters, c'est fait pour contenir / étouffer un feu naissant non ?
Si c'est le bâtiment qui brule, tu peux mettre le gaz que tu veux dans la pièce, dès que la porte / le plancher / le mur a été "percé" par le feu, c'est fini. le gaz sort et ça brule. d'où l’intérêt d'avoir des murs / planchers / porte coupe feu.
Pour les feux qui ont besoin de "combustible + comburant", les systèmes d'extinction à gaz sont diablement efficaces, et arrêtent totalement l'incendie. Même un gros truc. Réellement. C'est très utilisé dans l'industrie. Il y a des vidéos de cas réels qui montrent comment ça fonctionne. J'ai pu voir 2 vidéos "privées" d'incendie d'huile, bien violents. Et bien le dispositif d'extinction automatique fonctionne.
Evidemment, pour que ça fonctionne, il faut que l'installation soit bien conçue:
 - murs et porte résistants au feu.
 - câblage et tuyauterie du dispositif résistants au feu
 - isolation à l'air de la pièce via des volets/registres par feu, déclenchés en automatique juste avant l'injection de gaz, coupure automatique du renouvellement d'air (arrêt de la soufflerie).
 - Le dispositif laisse 20 secondes à un éventuel humain pour sortir de la pièce, avec des flash lumineux, et une grosse sirène

Ces dispositifs ne fonctionnent évidemment pas sur des feux de batterie Li-Ion, car les feux de batterie Li-Ion n'ont pas besoin de comburant (oxygène). Mais encore une fois, ça n'est pas mon propos. Je ne parle pas de l'efficacité d'un quelconque dispositif sur un feu de batterie Li-Ion.

Le risque est faible du côté serveur : un serveur brule très mal et propage peu l'incendie. Le risque est là où il y a de la puissance : batteries, onduleurs, transformateurs.
Attention, il y a un autre risque qu'un vrai départ d'incendie : quand une alimentation serveur crame, et ça n'est pas si rare, elle dégage beaucoup de fumée en se consumant de l'intérieur. Les condensateurs qui crame, la gaine du câblage en sur-intensité qui fond. Fumées qui vont pouvoir polluer l'environnement de manière bien violente, encrasser les filtres et radiateurs des serveurs. Bien sur, pour un datacenter qui rejette tout son "air chaud" à l'extérieur, c'est moins un problème, mais même les datacenters en freecooling ouvert (MaxNod, Facebook, Scaleway DC5) ont un mode de recyclage partiel d'air chaud, quand il fait froid dehors.

L'incendie Global Switch Clichy a fait beaucoup parler de lui à cause des impacts importants pour Google, mais il a été pas si mal géré que ça : L'incendie a été contenu dans la salle énergie et bien que la communication a longtemps laissé entendre que le bâtiment serait éteint, cela n'a pas été le cas. Si du matériel était HS, c'est à cause de la chaleur dans les salles (panne de clim). Je ne sais pas si on aura le détail, mais l'incident de climatisation semble lui bien moins géré : plusieurs heures de pannes et il serait à l'origine du départ d'incendie.
+1 là dessus. Je pense aussi que cet incident a été bien maitrisé par GlobalSwitch et par les pompiers.

Leon.
« Modifié: 18 mai 2023 à 15:00:59 par Leon »

Minasu

  • Abonné Free fibre
  • *
  • Messages: 4
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #247 le: 13 juin 2023 à 21:27:23 »
- isolation à l'air de la pièce via des volets/registres par feu, déclenchés en automatique juste avant l'injection de gaz, coupure automatique du renouvellement d'air (arrêt de la soufflerie).
 
Bonsoir,

L'isolation à l'air doit avoir lieu après et non avant, le gaz inerte devant prendre la place de l'oxygène. Le plus simple, c'est probablement le volet de surpression.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 6 178
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #248 le: 13 juin 2023 à 22:11:23 »
Bonsoir,

L'isolation à l'air doit avoir lieu après et non avant, le gaz inerte devant prendre la place de l'oxygène. Le plus simple, c'est probablement le volet de surpression.
Ce que j'avais vu dans un milieu industriel, c'était clairement une fermeture des volets/registres d'aération (arrivée d'air plus évacuation), avant le remplissage au gaz inerte. Il y avait en plus des évents/volets de surpression, comme tu le dis, oui.
Il faut bien voir que c'est des salles où le renouvellement d'air est très rapide en situation normale, avec une grosse soufflerie, pour du refroidissement. Donc le gaz inerte serait en grande partie perdu si on faisait l'isolation après le remplissage au gaz inerte.

Je ne dis pas que c'est pareil en datacenter, je ne sais pas.

Leon.

Minasu

  • Abonné Free fibre
  • *
  • Messages: 4
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #249 le: 14 juin 2023 à 07:44:07 »
Bonjour Leon,

Par isolation, j'avais compris (à tord) le fait qu'il n'y ait ni entrée d'air, ni de sortie d'air de la salle.

Vous avez totalement raison.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 6 178
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #250 le: 14 juin 2023 à 12:08:15 »
Est-ce que des membres du forum vont au GIGA BARBECUE MAXNOD pour conjurer le sort... qui se tient demain soir, jeudi 15 Juin, à l'emplacement de MaxNod?
Ca serait sympa de nous faire un retour, pour savoir dans quel état d'esprit est Lionel Drevon, suite à tous ces événements.
Est-ce qu'il se repentit? Est-ce qu'au contraire il planifie déjà la reconstruction de son datacenter sur un autre site? Et surtout, est-ce qu'il maintient ses délires autour du Tier-4-by-Adeli ?

https://www.linkedin.com/feed/update/urn:li:activity:7057656534658379779/
Et comme dit l'adage, il faut "Battre le fer quand il est chaud".
Alors LyoNAP a l'immense plaisir de vous inviter à sa troisième et dernière édition de la saison au Gigabarbecue organisé par Maxnod le Jeudi 15 Juin 2023 à partir de 18h30.
[...]
Rassemblés avec l'équipe de Maxnod, venez conjurer le sort, moquer la loi de Murphy et partager un moment de convivialité.


Leon.

Channels

  • AS209097 Officiel NetSyst
  • Expert
  • *
  • Messages: 240
  • St Bernard (01)
    • AS209097
28/03/2023 Incendie dans le datacenter Maxnod
« Réponse #251 le: 14 juin 2023 à 12:19:42 »
Cet événement est une farce de haut niveau et un manque de respect le plus total pour les victimes qui n’ont toujours aucune nouvelle de la moindre indemnisation.
Lionel Drevon et ses "experts assurances" ne donne aucun signe de vie, et ce permette meme des « choses » au dela du foutage de gueule que je n’évoqueraient pas ici.
En tout cas, il n’a pas l’air bien repenti pour cautionner ce genre d’événement morbide.......
Bref, par respect pour les victimes qui ont, pour certains, fermé leurs business, je pense qu’il vaut mieux enterrer le sujet de « cette sauterie ».

Personnelement, j'ai du faire un énorme pret dont je suis 100% caution perso, stopper l'ensemble de mes investissements, et revoir mon business model a la baisse pour sauver mon entreprise a cause d'un mec qui fait a joujou avec 3 tonnes de batterie chinoise a moins de 10 metres de la salle it.
Excusez moi donc de l'avoir mauvaise.

Edit: Cet évènement aurais pu etre mieux apprécié si Lionel Drevon avait indemnisé correctement l'ensemble de ses clients et que l'incident etait "clos". Faire cela 3 mois apres, c'est bof.