Auteur Sujet: Incendie OVH à Strasbourg: SBG2 complètement détruit. SBG1 détruit à 42%.  (Lu 284956 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Octave a publié le nettoyage des serveurs de SBG1.

Les serveurs SBG1 61E / 62E sont en cours de nettoyage. La vitesse est de 3 racks par jour. Nous avons 32 racks. Nous cherchons comment l'accélérer. Certains racks ont déjà été renvoyés à DC.

La dernière étape du processus est la détection des restes de «chlorure».









chtitux

  • Abonné Orange Fibre
  • *
  • Messages: 8
  • La Possession (974)
Je suis curieux de connaître la fiabilité des serveurs après un tel nettoyage. Que ce soit pour les composants actifs ou passifs.

Les serveurs vont redémarrer, mais doit-on s'attendre à une avalanche de pannes dans 1 semaine, 1 mois, 1 an ? Je pense que si j'avais un serveur dans ce cas, je me dépêcherai de migrer toutes les données vers un "neuf".

Ça me fait penser à Scaleway qui avait testé grandeur nature le brouillard d'eau. Aucun serveur n'est tombé en panne pendant le test, mais est-ce que leur durée de vie a été réduite ? Et est-ce que ça n'est pas cette peur qui fait que Scaleway n'a jamais réussi à convaincre ses clients de l'utiliser ? En ayant en tête que des gouttelettes d'eau, ça reste très différent de la suie et d'un nettoyage au pinceau.

Question bonus : comment OVH va gérer le retrofit de ces serveurs ? Est-ce qu'on doit s'attendre, si on loue un serveur chez OVH dans les prochains 6 mois, à avoir une pièce (RAM, CPU, disque, etc.) qui était présente lors de l'incendie ?

netswitch

  • Abonné Proximus (Belgique)
  • *
  • Messages: 21
  • Jodoigne - Wallonie - Belgique
    • Behostings.com - Hébergement de Sites Internet
Je suppose que si l'assurance couvre le sinistre, ils vont tout mettre au container et que là ils se font chier à nettoyer pour pouvoir remettre en service le plus vite possible sans attendre la cie d'assurance ni être contraint par l'approvisionnement qui est difficile pour le moment.

Par contre le nettoyage est bien efficace, ça ressort nickel :D

Douks

  • Abonné Orange Fibre
  • *
  • Messages: 190
Je suis curieux de connaître la fiabilité des serveurs après un tel nettoyage. Que ce soit pour les composants actifs ou passifs.

Les serveurs vont redémarrer, mais doit-on s'attendre à une avalanche de pannes dans 1 semaine, 1 mois, 1 an ? Je pense que si j'avais un serveur dans ce cas, je me dépêcherai de migrer toutes les données vers un "neuf".

Ça me fait penser à Scaleway qui avait testé grandeur nature le brouillard d'eau. Aucun serveur n'est tombé en panne pendant le test, mais est-ce que leur durée de vie a été réduite ? Et est-ce que ça n'est pas cette peur qui fait que Scaleway n'a jamais réussi à convaincre ses clients de l'utiliser ? En ayant en tête que des gouttelettes d'eau, ça reste très différent de la suie et d'un nettoyage au pinceau.

Question bonus : comment OVH va gérer le retrofit de ces serveurs ? Est-ce qu'on doit s'attendre, si on loue un serveur chez OVH dans les prochains 6 mois, à avoir une pièce (RAM, CPU, disque, etc.) qui était présente lors de l'incendie ?
Pas de problèmes, ils vont mettre ces serveurs quelques jours dans un container avec du riz  ;D

C'est parfait, ça fera du stock de Kimsufi dans les semaines à venir 👍🏻👍🏻

La technique de nettoyage ne m'étonne pas, mais le fait que ça soit un séchage à la soufflette, c'est étrange ...D'autant plus si la RAM et tout le reste resté dans leur emplacement

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 991
Je suppose que si l'assurance couvre le sinistre, ils vont tout mettre au container et que là ils se font chier à nettoyer pour pouvoir remettre en service le plus vite possible sans attendre la cie d'assurance ni être contraint par l'approvisionnement qui est difficile pour le moment.
Ils remettent en route l'existant "le plus vite possible" surtout pour que les clients puissent accéder de nouveau à leurs données. C'est clairement la raison principale.
Même si évidemment ça évite de devoir réapprovisionner des dizaines de milliers de serveurs.
Donc ça n'est pas qu'une histoire d'assurance qui prend en charge des frais ou non.

La technique de nettoyage ne m'étonne pas, mais le fait que ça soit un séchage à la soufflette, c'est étrange ...D'autant plus si la RAM et tout le reste resté dans leur emplacement
Le séchage approximatif à la soufflette, ça ne me choque pas du tout.
Pour avoir vécu un après-incendie dans un laboratoire d'électronique, les cartes électroniques des racks étaient nettoyées, séchées rapidement à la soufflette, puis passée dans une étuve à 50 ou 60°C (je sais plus) pour séchage complet.

Par contre, ils déconnectaient évidemment tous les connecteurs. Là, comme toi, ça me surprend.

Leon.

xp25

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 5 940
Attend attend, ils nettoient ça à l'eau savonneuse ?

On fait pas ça à l'alcool isopropylique normalement pour les circuits électronique ?

PeGGaaSuSS

  • Abonné Free fibre
  • *
  • Messages: 498
  • Saint-Ouen (93) - Paris (75)

J'ai de gros doutes sur le fait qu'il s'agit d'eau (H2O) de type eau de distribution. Il y a quelques années, le SAV d'un fabricant de carte mère testait systématiquement et refusait le passage sous garantie s'il y avait trace d'eau. J'imagine que suivant la composition il reste toujours un risque de contact électrique avec les résidus.

Cryptage

  • Abonné Free fibre
  • *
  • Messages: 297
  • Dijon
C'est quasi certain que ce n'est pas de l'eau savonneuse mais aucune idée de ce que c'est ?

Je partage les avis précédents... Je serai curieux de voir ce qu'il reste d'opérationnel dans quelques mois.

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Point journalier.

La remisse en route des serveurs de SBG1 décale encore...
- Communication du 22 mars 2021 : ETA 24 mars
- Communication du 23 mars 2021 et 24 mars 2021: ETA à partir du 24 mars
- Communication du 25 mars 2021 : ETA 29 mars
- Communication du 26 mars 2021 : ETA début de la semaine du 29 Mars.

Sinon 100% des serveurs de SBG4 sont enfin accessibles.



Les bulletins précédents :
- 25 mars 2021
- 24 mars 2021
- 23 mars 2021
- 22 mars 2021
- 21 mars 2021
- 20 mars 2021
- 19 mars 2021
- 18 mars 2021
- 17 mars 2021
- 16 mars 2021
- 15 mars 2021
- 14 mars 2021
- 13 mars 2021
- 12 mars 2021
- 11 mars 2021
- 10 mars 2021

Vidéos :
- Vidéo du 11 mars 2021
- Vidéo du 16 mars 2021
- Vidéo du 22 mars 2021

hwti

  • Abonné Orange Fibre
  • *
  • Messages: 2 237
  • Chambly (60)
Attend attend, ils nettoient ça à l'eau savonneuse ?

On fait pas ça à l'alcool isopropylique normalement pour les circuits électronique ?
Ca peut très bien être du savon, en rinçant bien (alcool isopropylique ou similaire, éventuellement eau distillée).
L'essentiel est de très bien sécher ensuite (avec les produit volatils c'est plus simple, mais pour l'eau certaines personnes conseillent de laisser au four à 70-80°).

Mais c'est étrange de le faire avec tout qui est encore monté.
Et je vois la pile CMOS sur la dernière photo, elle semble être là aussi sur celle avec la soufflette.

hwti

  • Abonné Orange Fibre
  • *
  • Messages: 2 237
  • Chambly (60)
La remisse en route des serveurs de SBG1 décale encore...
La communication dit au contraire que la cadence de nettoyage s'améliore.
Peut-être qu'ils ont sous-estimé le nombre de serveurs à nettoyer, et qu'ils en découvrent au fur et à mesure des tentatives de rallumage.

vivien

  • Administrateur
  • *
  • Messages: 47 184
    • Twitter LaFibre.info
Sur SBG1, on classe les serveurs dans 4 catégories :

Je met à jour ma répartition. Sur SBG1 on a donc :

- 27% - 60 baies (3 containers de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs. La restauration des données a le statut "Recoverable".

- 22% - 50 baies (2 containers de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs. La restauration des données est "Under investigation".

- 9% - 21 baies (1 container de 21 baies - 62D). ESXi avec le disque système mais toutes les VM sont sur le datastore (NAS) dans une baie en 62C qui elle est brûlée. Statut "Non-recoverable".

- 42% - 93 baies (4 containers de 20 baies et 1 container de 13 baies - 60C, 61B, 61C, 62B et 62C) détruites entièrement par l'incendie. Statut "Non-recoverable".


Ceux qui sont peu endommagés, ce sont les salles 61A, 61D et 62A. Ces serveurs étaient remis en service avant que survienne le second incendie. Ils sont de nouevau up ? Je n'ai pas l'impression d'avoir lu qu'ils sont up sur SBG4 (leur destination après l'abandon de SBG1).

Je pense que le nettoyage minutieux pris en photo concerne les serveurs où il avait été dit qu'il fallait changer la carte mère, soit les salles 61E et 62E. Visiblement ils ont décidés de tenter de sauver les cartes mères.




Pour la salle 62D, pas d'urgence, il n'y a pas de données et pour 60C, 61B, 61C, 62B et 62C les serveurs ont compétemment brûlés, rien n'est récupérable.