Auteur Sujet: Incendie OVH à Strasbourg: SBG2 complètement détruit. SBG1 détruit à 42%.  (Lu 311578 fois)

0 Membres et 1 Invité sur ce sujet

hwti

  • Abonné Orange Fibre
  • *
  • Messages: 2 237
  • Chambly (60)
SBG3 on a des nouvelles du 3ème étage, l'étage le plus affecté de SBG3 par l'incendie :  Ce sont de nouveaux serveurs pour un lancement de nouveau produit qu'OVH avait pévu dans .. 10 jours. Il n'y a donc aucun client sur ces serveurs. OVH dit travailler sur ce nouveau produit "depuis 18 mois et maintenant tout doit être nettoyé".
Ça confirme indirectement qu'ils veulent conserver les serveurs nettoyés en prod, et pas uniquement pour que les clients récupèrent leurs données ou un service au plus vite.
Je suppose que l'assurance préfère payer le nettoyage que le remplacement (enfin, si OVH est bien couvert), mais en cas de problème de fiabilité par la suite ce sera délicat...

mmickael

  • Abonné FAI autre
  • *
  • Messages: 35
  • Liège (Belgique)
Problématique: le mercredi 30/03 n'existe pas. C'est soit mardi 30/03, soit mercredi 31/03 !

C'est par-ce qu'il y a un Mercredi 30/03 en 2022.  ;D

alf084

  • Abonné Starlink
  • *
  • Messages: 391
  • Paris 75

vivien

  • Administrateur
  • *
  • Messages: 47 817
    • Twitter LaFibre.info
L'étage 5  pas le 3.
J'ai corrigé mon message. C'est bien sur l'étage le plus haut de SBG3 qui est le plus touché par l'incendie.

Pour résumer l'article de Journal du net https://www.journaldunet.com/web-tech/cloud/1499203-six-choses-qu-ovh-ne-dit-pas-sur-l-incendie-de-ses-datacenters-a-strasbourg/, voici le "Six choses qu'OVH ne dit pas sur l'incendie de Strasbourg" avec les citations en liens avec sur ce forum, les informations ayant déjà été discutées ici :

1/ SBG1 et SBG4 devaient être fermés (annonce de novembre 2017 qui n'a pas été réalisée)

2/ SBG4 n'était pas indépendant énergétiquement (annonce en novembre 2017 du fait que cela serait corrigé, ce qui n'a pas été fait)

Saluons le message d'Octave, qui donne une partie des piéces du puzzle pour comprendre comment l'impossible est arrivé.

Je le reprend ici pour mémoire :
[...] Même si l’incident de ce matin a été causé par un automate tiers, nous ne pouvons nous dédouaner de la responsabilité de la panne. A cause du déploiement initial basé sur les containers maritimes, nous avons un historique à rattraper sur SBG pour atteindre le même niveau de normes que sur les autres sites d’OVH.

Cet après-midi, nous avons décidé du plan d’actions suivant :
1) la mise en place de la 2ème arrivée électrique, totalement séparée, de 20MVA ;
2) la séparation du réseau électrique de SBG2 vis-à-vis de SBG1/SBG4, ainsi que la séparation du futur SBG3 vis-à-vis de SBG2 et SBG1/SBG4;
3) la migration des clients de SBG1/SBG4 vers SBG3 ;
4) la fermeture de SBG1/SBG4 et la désinstallation des containers maritimes.

Il s’agit d’un plan d’investissement de 4-5 millions d’euros, que nous mettons en route dès demain, et qui, nous l’espérons, nous permettra de restaurer la confiance de nos clients envers SBG et plus largement OVH.

3/ SBG3 n'avait pas sa propre salle réseau (Je suis étonné que JDN ne parle pas de SBG4, qui n'a pas non plus de salle réseau: il y avait deux salles réseaux avant l'incendie : SBG1 et SBG2. Aujourd'hui une nouvelle salle réseau a été construite dans le futur SBG5 pour SBG3 et SBG4)

4/ Des backups étaient réalisés sur le même datacenter (Il faut partir de la base que si un hébergeur ne précise pas que c'est sur un second site, c'est que c'est sur le même site. OVH n'est pas le seul pour le coup à faire ça)

5/ Les planchers du datacenter SBG2 étaient en bois. "Les planchers (du datacenter SBG2, ndlr) sont en bois", a indiqué à l'AFP dans la nuit du sinistre Damien Harroué, commandant des opérations de secours et adjoint au chef de la sous-direction opérations-prévention au Service Départemental d'Incendie et de Secours 67.

Le sol est bien en bois :

#Ovh #SBG les échangeurs du watercooling de serveurs sont installés sur chaque étage.


Source : twitter OLES OVH

6/ absence de système d'extinction automatisé sur SBG2
Voici la façon dont OVH protège les serveurs contre des incendies au Canada. C'est la première fois que l'on voit OVH parler de protection incendie, donc il est probable que les autres datacenters ne soient pas encore équipés.

vivien

  • Administrateur
  • *
  • Messages: 47 817
    • Twitter LaFibre.info
Rappelons que SBG2 est la tour jumelle de Roubaix 4 :

Annonce d'Octave sur twitter le 28 mars 2013 :
#Ovh #SBG #SBG2 will look like #RBX4


Construction de Roubaix 4 :

Dans le cas de Roubaix 4, le Datacenter est fait avec beaucoup de bois :

Il serait intéressant de savoir les évolutions qui seront apportées à Roubaix 4 et d'autres data center OVH sur :
- La possibilité de couper le 20 000 volts sans entrer dans le bâtiment (pour rappel, c'est ce qui a fortement retardé les pompiers, car il ne peuvent éteindre un incendie avec des équipements encore alimentés en 20 000 volts)
- Un système de détection incendie précoce pour pouvoir intervenir avant que la situation soit dégradée
- Un système d’extinction automatique d'incendie, si possible qui ne détruise pas les serveurs

vivien

  • Administrateur
  • *
  • Messages: 47 817
    • Twitter LaFibre.info
Point journalier.

Pour la remise en services des baies de SBG1 arrêtées après le second incendie, c'est finalement planifié mercredi 31.



Les bulletins précédents :
- 29 mars 2021
- 28 mars 2021
- 27 mars 2021
- 26 mars 2021
- 25 mars 2021
- 24 mars 2021
- 23 mars 2021
- 22 mars 2021
- 21 mars 2021
- 20 mars 2021
- 19 mars 2021
- 18 mars 2021
- 17 mars 2021
- 16 mars 2021
- 15 mars 2021
- 14 mars 2021
- 13 mars 2021
- 12 mars 2021
- 11 mars 2021
- 10 mars 2021

Vidéos :
- Vidéo du 11 mars 2021
- Vidéo du 16 mars 2021
- Vidéo du 22 mars 2021

dj54

  • Abonné Free fibre
  • *
  • Messages: 924
  • Nancy (54)
    • La passion des ondes
Du neuf sur la gratuité de 3 ou 6mois

aurel32

  • Abonné Free fibre
  • *
  • Messages: 5
Du neuf sur la gratuité de 3 ou 6mois
     

Perso j'ai même reçu l'avoir correspondant au mois de mars. En fait c'est une facture d'un montant négatif, et le mail n'est pas super clair, il présente ça comme un avoir également d'un montant négatif.

vivien

  • Administrateur
  • *
  • Messages: 47 817
    • Twitter LaFibre.info
Point journalier.

Le gros du travail a été fait. Les services restaurable qui n'ont pas été restaurées seront up dans les prochains jour. Il ne restera que quelques cas complexes.

Je parie sur une vidéo d'Octave vendredi pour expliquer les différents progrès.



Les bulletins précédents :
- 30 mars 2021
- 29 mars 2021
- 28 mars 2021
- 27 mars 2021
- 26 mars 2021
- 25 mars 2021
- 24 mars 2021
- 23 mars 2021
- 22 mars 2021
- 21 mars 2021
- 20 mars 2021
- 19 mars 2021
- 18 mars 2021
- 17 mars 2021
- 16 mars 2021
- 15 mars 2021
- 14 mars 2021
- 13 mars 2021
- 12 mars 2021
- 11 mars 2021
- 10 mars 2021

Vidéos :
- Vidéo du 11 mars 2021
- Vidéo du 16 mars 2021
- Vidéo du 22 mars 2021

py92

  • Abonné Free fibre
  • *
  • Messages: 62
  • Connected city
"
pCS
0.5% of the servers were destroyed. we checked and rebuilt data, but we can’t recover all data. There is small part, we don’t have 3 copies since the 3 copies were on 0.5% servers

It means, for the paid backup, we have 18251 backups on 19486.

On 1235 backups on 19486 backups, 6%, a small part of the file isn’t there. Since all files are encrypted, we can’t partially rebuild 1235 backup with the data we have. We continue to check, but .. :/

All 18251 backups (VPS / PCI) are in progress."


La loose ...... 3 copie qui se trouvent malheuresement chacune dans les 0,5% detruite ...
comment 0,5% represente au final 6% des cas......

Vive le mode block ...........

tu as un fichier de 3GO ....... reparti en N block de 50MB...... il te manque un block de 50MB et c'est fini ton fichier de 3GB poubelle ...

fmermoz

  • Abonné Sosh fibre
  • *
  • Messages: 26
  • Forges les bains (91)
Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
« Réponse #886 le: 01 avril 2021 à 09:41:10 »
Encore un UPS:

Update April,1 7:15am
In the SBG3 we have the security guard walking and checking if everything is okey. This morning at 6am, they felt something strange in the air and found out it’s coming from UPS11T3. We immediately bypass/shutdown the UPS and we called the firefighter
The firefighters came and checked the temp everywhere: no smoke, no fire. They left the site.
On the front of this UPS, we see that the small filter is burnt. I won’t give any fast conclusion.

No impact on the services.

The incident is over. We called the supplier to check this UPS.

The teams are back in SBG3. We continue the operations.

Source: Twitter Octave Klaba

Cryptage

  • Abonné Free fibre
  • *
  • Messages: 297
  • Dijon
Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
« Réponse #887 le: 01 avril 2021 à 09:49:35 »
Encore un UPS:

Et ce n'est sûrement pas fini... C'était obligé que ça fasse ça (ça avait déjà commencé à SBG1).