La Fibre

Hébergeurs et opérateurs pro / entreprises => Hébergeurs et opérateurs pro / entreprises => OVH OVHcloud => Discussion démarrée par: alain_p le 10 mars 2021 à 07:28:06

Titre: Incendie OVH à Strasbourg: SBG2 complètement détruit. SBG1 détruit à 42%.
Posté par: alain_p le 10 mars 2021 à 07:28:06
Des informations sont parues ce matin sur un incendie qui s'est déclenché sur un site OVH à Strasbourg. Reste à savoir si c'est un datacenter ou un site plus administratif.

Edit: Les autres sujets en lien sur le forum
- OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/) qui date de 2013 et met l'accent sur l'absence de protection incendie dans certains sites OVH
- Lutte contre les incendie à DC5 Scaleway (https://lafibre.info/scaleway/dc5/msg847949/#msg847949)
- OVH Roubaix: Risques liés à un Gazoduc haute pression + zone inondable (https://lafibre.info/ovh-datacenter/ovh-roubaix-risques-gazoduc/)
- Linux: Script bash de sauvegarde incrémentielle basé sur SSH (https://lafibre.info/serveur-linux/sauvegarde-incrementielle/)

Photos rajoutées après-coup :
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_6.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_4.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_3.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_1.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_1.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_5.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_7.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_8.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_5.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_2.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_9.webp)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_10.webp)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_temperature.png)

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_plan.jpg)

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_apres_incendie_1.jpg)

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_apres_incendie_3.jpg)

Article du Figaro :

Citer
Strasbourg : «Important incendie» sur le site de l'entreprise OVH, classé Seveso

Une centaine de pompiers sont mobilisés pour combattre les flammes dans le quartier de Port du Rhin, près de la frontière allemande.
Par Le Figaro avec AFP Publié il y a 1 heure, Mis à jour il y a 46 minutes

Un important incendie était en cours mercredi 10 mars au matin dans un bâtiment de l'entreprise OVH, spécialisée dans les serveurs informatiques, sur un site classé Seveso à Strasbourg, a annoncé la préfecture du Bas-Rhin. Le feu, qui s'est déclenché vers 3 heures du matin, mobilisait «une centaine» de pompiers dans le quartier de Port du Rhin, à l'est de la capitale alsacienne, non loin de la frontière allemande.
...


Dessin de Soulcié (Thibaut) publié par Télérama le 19 mars 2021 :

(https://lafibre.info/images/ovh/202103_telerama_incendie_ovh_strasbourg.jpg)

(https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_1.jpg) (https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_1.jpg)

(cliquer sur l'image pour zoomer)
(https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_2.jpg) (https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_2.jpg)

(https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_3.png) (https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_3.png)

(cliquer sur l'image pour zoomer)
(https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_4.png) (https://lafibre.info/images/ovh/202202_incendie_ovh_strasbourg_partage_experience_sdis67_4.png)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: XBouBou le 10 mars 2021 à 07:29:45
Ci-dessous le ticket ovh concernant cet incident :

http://travaux.ovh.net/?do=details&id=49471 (http://travaux.ovh.net/?do=details&id=49471)
Citer
Comment by OVH - Wednesday, 10 March 2021, 01:22AM
Plusieurs services sont actuellement impactés majoritairement dans les salles 71 et 72 du datacentre de SBG(Strasbourg).

====

Many services are currently impacted mainly in room 71 an 72 of SBG(Strasbourg) datacenter.


Comment by OVH - Wednesday, 10 March 2021, 03:53AM

Nous faisons actuellement face à un incident majeur au sein de notre datacentre de Strasbourg, avec un feu déclaré dans le bâtiment SBG2.
Les pompiers sont intervenus immédiatement sur place mais ne sont pas parvenus à contrôler l’incendie de SBG2.
Par mesure de précaution, l’électricité a été coupée sur l’ensemble du site, ce qui impacte tous nos services à SBG1, SBG2, SBG3 et SBG4.
Si votre production est à Strasbourg, nous vous recommandons d’activer votre Plan de Reprise d’Activité.
Toutes nos équipes sont mobilisées aux côtés des pompiers.
Nous vous tiendrons informés à ce sujet dès que nous aurons davantage d’éléments.

--

We are currently facing a major incident in our DataCenter of Strasbourg with a fire declared in the building SBG2.
Firefighters were immediately on the scene but could not control the fire in SBG2.
The whole site has been isolated, which impacts all our services on SBG1, SBG2, SBG3 and SBG4.
If your production is in Strasbourg, we recommend to activate your Disaster Recovery Plan.
All our teams are fully mobilized along with the firefighters.
We will keep you updated as more information becomes available.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: XBouBou le 10 mars 2021 à 07:38:38
https://twitter.com/olesovhcom/status/1369478732247932929 (https://twitter.com/olesovhcom/status/1369478732247932929)
Citer
Octave Klaba
Update 5:20pmam. Everybody is safe.
Fire destroyed SBG2. A part of SBG1 is destroyed. Firefighters are protecting SBG3. no impact SBG4.

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_2.png)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Nico le 10 mars 2021 à 07:41:18
https://twitter.com/olesovhcom/status/1369535787570724864

We have a major incident on SBG2. The fire declared in the building. Firefighters were immediately on the scene but could not control the fire in SBG2. The whole site has been isolated which impacts all services in SGB1-4. We recommend to activate your Disaster Recovery Plan.

Update 5:20pm. Everybody is safe.
Fire destroyed SBG2. A part of SBG1 is destroyed. Firefighters are protecting SBG3. no impact SBG4.

Update 7:20am
Fire is over. Firefighters continue to cool the buildings with the water.
We don’t have the access to the site. That is why SBG1, SBG3, SBG4 won’t be restarted today.

Le plus important c'est que tout le monde soit sauf, j'ai néanmoins des craintes pour certains qui pourraient n'avoir aucune sauvegarde hors site !
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Nico le 10 mars 2021 à 07:47:16
Très gros incendie Port du Rhin à Strasbourg dans un data center, plus de 100 pompiers mobilisés, pas de blessés.

https://france3-regions.francetvinfo.fr/grand-est/bas-rhin/strasbourg-0/strasbourg-gros-incendie-dans-un-data-center-du-port-du-rhin-pas-de-blesse-1990768.html

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_3.jpg)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: alain_p le 10 mars 2021 à 07:49:04
Une photo des Dernières Nouvelles d'Alasace, assez impressionnante :
https://www.dna.fr/faits-divers-justice/2021/03/10/strasbourg-important-incendie-dans-une-entreprise-situee-sur-un-site-seveso-au-port-du-rhin

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_4.jpg)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Nico le 10 mars 2021 à 07:55:40
Je relance d'une vidéo.

https://twitter.com/abonin_DNA/status/1369538028243456000

https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_1.mp4

https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_2.mp4

https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_3.mp4
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 07:59:41
impressionnant   :'(
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Nico le 10 mars 2021 à 08:03:52
Je rajoute les photos du site d'OVH concernant les deux DC qui ont subit l'incendie.

https://www.ovh.com/world/us/about-us/datacenters.xml

(https://lafibre.info/images/ovh/202000_ovh_strasbourg_sgb2_photo_corporate_1.jpg)

(https://lafibre.info/images/ovh/202000_ovh_strasbourg_sgb2_photo_corporate_2.jpg)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Phach le 10 mars 2021 à 08:04:09
Bon apparemment pas de victime même si Octave n'en parle absolument pas.
J'ai lancé twitter car j'ai vu la news dans le fil d'actus et c'était assez comique de voir les mecs pleurnicher d'avoir " tout perdu "

Et les gens se fichent de moi quand je dis que j'ai 3 backups chez 3 presta différents dans 3 zones différentes...

Ca la fout mal quand même pour ovh qui y a quelques heures parlait d'entrer en bourse.

Bon courage aux équipes.

Titre: Incendie sur un site OVH à Strasbourg
Posté par: Nico le 10 mars 2021 à 08:05:28
Bon apparemment pas de victime même si Octave n'en parle absolument pas.
Alors ça apparaît quand même dans 2 des posts de cette page.

Update 5:20pm. Everybody is safe.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Phach le 10 mars 2021 à 08:12:17
tu as raison, je ne l'avais pas vu dans les tweets.
C'est l'essentiel.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: thedark le 10 mars 2021 à 08:17:44
Pas de chance pour OVH avant une future rentrée en bourse.
Pas une bonne pub.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Optrolight le 10 mars 2021 à 08:44:25
Ce qui sera intéressant c'est de connaître l'origine de l'incendie et si les moyens de lutte interne ont quand même fait leur boulot.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 08:54:55
Un post intéressant pour ceux qui se posent des questions sur les risques d'incendies en DC, moyens disponibles, règlementation, ...
https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/

On y apprend d'ailleurs que le plancher et l'armature de RBX4, un autre DC d'OVH, est fait en ... bois. Ca ne veut évidemment pas dire que SBG était également fait en bois (c'est même fort probable que non car il s'agit de conteneurs).
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Gilum le 10 mars 2021 à 09:01:28
Un post intéressant pour ceux qui se posent des questions sur les risques d'incendies en DC, moyens disponibles, règlementation, ...
https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/

On y apprend d'ailleurs que le plancher et l'armature de RBX4, un autre DC d'OVH, est fait en ... bois. Ca ne veut évidemment pas dire que SBG était également fait en bois (c'est même fort probable que non car il s'agit de conteneurs).

Le sol est bien en bois :

#Ovh #SBG les échangeurs du watercooling de serveurs sont installés sur chaque étage.

(https://lafibre.info/images/ovh/201305_ovh_strasbourg_sgb2_construction.jpg)
Source : twitter OLES OVH (https://twitter.com/olesovhcom/status/335448359525552128)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Phach le 10 mars 2021 à 09:11:05
On y apprend d'ailleurs que le plancher et l'armature de RBX4, un autre DC d'OVH, est fait en ... bois. Ca ne veut évidemment pas dire que SBG était également fait en bois (c'est même fort probable que non car il s'agit de conteneurs).

Quand bien même il serait en ossature bois, le bois a plutôt une excellente tenu au feu dans la construction et présente certains avantages face aux autres matériaux.
Source : https://www.bois.com/construction-renovation/maison/construction-bois-incendie

Note : pas mal de casernes de pompiers notamment en Isère sont construite en ossature bois.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: XBouBou le 10 mars 2021 à 09:18:21
Un post intéressant pour ceux qui se posent des questions sur les risques d'incendies en DC, moyens disponibles, règlementation, ...
https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/

On y apprend d'ailleurs que le plancher et l'armature de RBX4, un autre DC d'OVH, est fait en ... bois. Ca ne veut évidemment pas dire que SBG était également fait en bois (c'est même fort probable que non car il s'agit de conteneurs).

Ma partie préféré de ce post de 2013, l'intervention d'Arnaud de Bermingham - Online/Scaleway

Ce sont d'excellentes questions !

Les sprinklers sont très présents dans les habitudes américaines.
Quasiment tous les bâtiments aux états unis et au quebec sont équipés de sprinkler, qui sont quasi obligatoire règlementairement parlant et coté assurance. La méthode de protection incendie s'articule surtout autour de l'extinction automatique (quitte à avoir des gros sinistres), alors qu'en Europe nous sommes beaucoup plus dans le préventif (portes coupe-feu, compartiments, désenfumage, résistance au feu des planchers et des murs, évacuation, généralisation des SSI etc...).
Le débit d'une tête de sprinkler est de 15 à 20 m3 / heure, doit être remplis sous air en cas de risque de gel, et alimenté depuis une cuve autonome donnant deux heures d'autonomies avec 8 têtes déclenchées ou une double arrivée d'eau redondante. Il y a sans doutes quelques subtilités sur la règlementation et préconisations FM Global aux US. Imaginez les dégâts provoqués par 20 000 litres d'eau par heure sur des infrastructures informatiques...

En France, les datacenters sont règlementés essentiellement par le code du travail, par les préconisations ICPE (à autorisation ou déclaration) et par les assureurs.
Au niveau purement règlementaire, les seules choses qui sont demandées c'est :
- Le désenfumage mécanique ou naturel pour les locaux aveugles ou faisant plus de 300m2
- Le compartimentage coupe-feu au delà d'un certain volume / m2
- Des issues de secours accessibles avec une certaine largeur
- Une ventilation donnant un minimum d'air neuf par occupant
- L'accessibilité pompier par la facade pour les locaux sont le plancher bas du dernier niveau est à plus de 8 mètres
- 1 chiotte pour 10 personnes (occupant un poste considéré comme "fixe")

Rien n'est demandé ni en détection incendie, ni en extinction. C'est très léger.

Par contre, c'est un non sens, surtout lorsque l'on manipule/héberge les précieuses données de centaines voir de milliers d'entreprises de ne pas respecter des règles de sécurité considérées comme "de base" par les règles de l'art :
- Salles informatiques coupe-feu 1 heure (murs, planchers, portes et ouvrants) et systématiquement désenfumées : en cas d'incendie le feu doit être contenu dans un espace restreint et résistant au feu (oubliez les planchers en bois!). Les matériaux utilisés doivent être M0 ou M1 (incombustible / ininflammable) Le désenfumage permet d'éviter les dégâts liés aux fumées et aux risques de stratification. Généralement on demande 12 fois le volume de la pièce par heure avec une vitesse inférieure à 3m / sec.
- Les locaux techniques, surtout contenant des batteries, sont considérés comme des "locaux à risques particuliers d'incendie" et doivent être coupe-feu 2 heures au moins. Les risques d'emballement batterie sont pas à négliger et provoquent des dégâts considérables
- Extinction automatique d'incendie par gaz (APSAD R13) ou brouillard d'eau (APSAD D2) : permet d'assurer la continuité de l'exploitation et du fonctionnement de l'IT même en cas d'incendie. Pour le brouillard d'eau, il est recommandé d'avoir sa propre réserve et une arrivée d'eau dédiée par la ville (la consommation est inférieure à 2m3/heure)
- Détection d'incendie précoce type VESDA sur tous les volumes, plénums et faux planchers : permet de détecter de manière très précoce un feu pour faciliter une intervention humaine sans risques. Généralement on demande une détection en 60 secondes et une pré-alarme en 40 secondes
- Agent de sécurité pompier formé et diplomé SSIAP1 présent 24x7

Le montant de la couverture de l'assurance est déterminée essentiellement les mesures préventives et de protection prises par l'exploitant.

Faire des planchers bois avec des structures portantes métalliques (qui n'ont strictement aucune tenue au feu) dans des espaces à risque important voir particuliers (j'imagine que les locaux techniques sont traités de la même manière) me parait vraiment dangereux et je suis curieux de voir l'avis de l'assureur et le montant de la couverture en cas de sinistre. Même des bureaux ou des ERP ne se permettent pas de telles choses.

De même, sur les photos on ne voit ni détection incendie, ni extinction incendie, beaucoup de tuyauteries en PVC pression (dont la combustion dégage de l'acide chlorhydrique, aucune façade ouvrante pour l'échelle pompier, ...
C'est vraiment prendre des risques / bricolages considérables avec les données des clients, surtout qu'il y a de grandes chances pour que la couverture d'assurance ne correspondes pas du tout à la valeur de ce qui est hébergé.
Il y a lieu de s'interroger sérieusement sur la sécurité de telles infrastructures.

Arnaud
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Gilum le 10 mars 2021 à 09:33:38
(https://pbs.twimg.com/media/EwGqQAjWEAAF4gJ?format=png&name=small)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 09:44:56
Quand bien même il serait en ossature bois, le bois a plutôt une excellente tenu au feu dans la construction et présente certains avantages face aux autres matériaux.
Source : https://www.bois.com/construction-renovation/maison/construction-bois-incendie

Note : pas mal de casernes de pompiers notamment en Isère sont construite en ossature bois.
Ce post est-il approuvé par la cathédrale ND de Paris ?

Le sol est bien en bois :
https://twitter.com/olesovhcom/status/335448359525552128
En effet, Octave avait publié sur Twitter une autre photo de la construction de SBG2 ou l'on voit bien du bois pour le plancher (du moins, pendant les travaux) :
(https://lafibre.info/images/ovh/201306_ovh_strasbourg_sgb2_construction.jpg)
Il y à quand même une partie en béton, surement destinée à accueillir escaliers/ascenseurs (?).


Dans une boite ou j'ai bossé, les climaticiens avaient zappés de remettre en marche une clim, après avoir fait une maintenance sur le réseau de "liquide" un vendredi après-midi.
Mal fait de A à Z, pas de sondes de températures dans cette pièce (qui abritait deux onduleurs de 60kva), peu de passage, zone bruyante, du coup ça à bien pris le temps de chauffer tout le weekend jusqu'au lundi midi ou les portes coupe-feu se sont fermées sans que personne ne s'en inquiète vraiment.

Un des onduleurs avait commencé à cramer, du moins un très gros dégagement de fumée et des explosions (les condensateurs ?) assez bruyantes. L'armoire qui à cramé ne contenait pas les batteries mais tout le système qui contrôle l'arrivée électrique et fait la bascule.

Quand je dis mal fait de A à Z :
Aucune procédure d'arrêt d'urgence des onduleurs
Aucun bouton d'urgence pour couper la clim qui soufflait les fumées sur l'onduleur en train de cramer
Ni d'arrêt d'urgence pour les onduleurs d'ailleurs, qu'il fallait couper depuis le poste électrique en théorie interdit d'accès
Aucun désenfumage si ce n'est la cage d'ascenseur
Aucun respect des panneaux "entrée interdite"
Aucun respect des portes coupe-feu qui ont été rouvertes paracerque "ça fait ch***, on peut pas sortir"
Aucune sonde de température
Aucune évacuation des bureaux
Coupure du courant tardive par peur de couper les serveurs à l'arrache
Pas de réseau mobile à cet endroit ni de téléphone de secours

Ca s'est bien terminé, ça à pris des mois pour remplacer les pièces HS mais ça n'à pas impacter le travail de la boite. Après ça, hormis les sondes de température, rien n'à changé.
C'est une boite assez grosse, avec plusieurs centaines de salariés, dizaines de milliers de clients, un CA à 9 chiffres. Comme quoi, la taille n'empêche pas de faire des conneries

(avant de déformer mes propos : je n'ai pas dit que ce qu'il se passe avec OVH c'est la même chose, juste que la taille de la boite ne veut pas dire qu'ils ne peuvent pas faire d'erreur)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 09:49:42
a priori il y a eu une explosion sur sbg2 qui a étendu le feu dans le bâtiment après le premier départ de feu.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Louis.A le 10 mars 2021 à 09:56:20
Je sens qu’il va y avoir des perturbations sur le réseau OVH 🧐
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 10:12:28
C'est plutôt intéressant de voir les réactions à cet incendie sur Twitter. Notamment les entreprises qui avaient la totalité (ou presque) de leur infra dans ce DC (ou le voisin qui est coupé).
Et les CM qui tweetent, tranquilou, qu'ils espèrent que leur matos n'est pas cramé ou que ça va "rouvrir rapidement".

Autant le particulier qui loue un KS/SYS ou autre, c'est dommage pour lui et ça s'arrête là. Autant la société qui se prétend "experte", dont les clients se reposent dessus, c'est lamentable.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 10:16:20
certains se déchaînent sur twitter en insultant OVH pour leur perte de données / incident.

honnêtement ils devraient s'en prendre a eux même en priorité.
Si tu héberge tout sur un mono datacenter faut pas se plaindre lorsqu'il y a un problème.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: xillibit le 10 mars 2021 à 10:20:59
Quand bien même il serait en ossature bois, le bois a plutôt une excellente tenu au feu dans la construction et présente certains avantages face aux autres matériaux.
Source : https://www.bois.com/construction-renovation/maison/construction-bois-incendie

Note : pas mal de casernes de pompiers notamment en Isère sont construite en ossature bois.
Quand le bois est traité en profondeur avec des produits pour le rendre ininflammable
Titre: Incendie sur un site OVH à Strasbourg
Posté par: KalNightmare le 10 mars 2021 à 10:24:01
Que ça brûle, ça peut arriver.

Mais avoir un monitoring qui te dit que tout fonctionne  :D :
http://travaux.ovh.net/vms/index_sbg1.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb1_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg2.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb2_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg3.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb3_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg4.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb4_apres_incendie.png)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: fabtra31 le 10 mars 2021 à 10:29:03
A mon avis je pense que le serveur qui remonte les données d'état des serveurs du DC a aussi cramé d'ou l'etat qui ne change pas
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 10:30:00
ouais quand la sonde est HS tu as plus de donnée ^^

bon par contre un statut unknown serait plus pertinent  ;D
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Phach le 10 mars 2021 à 10:40:47
certains se déchaînent sur twitter en insultant OVH pour leur perte de données / incident.

honnêtement ils devraient s'en prendre a eux même en priorité.
Si tu héberge tout sur un mono datacenter faut pas se plaindre lorsqu'il y a un problème.

C'est d'ailleurs super intéressant, ca permet de trier les prestas. Ils sont quand même pas très malin de crier haut et fort leur incompétence en accusant OVH.
Ce matin, je voulais me renseigner sur une boite, tous ses sites down !  ::) bon, ben next...
Titre: Incendie sur un site OVH à Strasbourg
Posté par: e-TE le 10 mars 2021 à 10:41:21
Quand bien même il serait en ossature bois, le bois a plutôt une excellente tenu au feu dans la construction et présente certains avantages face aux autres matériaux.
Source : https://www.bois.com/construction-renovation/maison/construction-bois-incendie

Note : pas mal de casernes de pompiers notamment en Isère sont construite en ossature bois.
les pompiers ont meme tendance a préférer une structure bois en feu, qu'une structure métallique en feu... le bois tu as des signes annonciateurs avant que ca s'écroule, une structure métallique quand ca devient de la guimauve ca ne fait pas de bruit avant :-/


bon bah, "courage"  à tous les décideurs qui auront refusés la mise en place d'un pra car trop cher, et qui avaient tout mis chez ovh, c'est le moment d'assumer vos choix o:
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Optix le 10 mars 2021 à 10:48:18
certains se déchaînent sur twitter en insultant OVH pour leur perte de données / incident.

honnêtement ils devraient s'en prendre a eux même en priorité.
Si tu héberge tout sur un mono datacenter faut pas se plaindre lorsqu'il y a un problème.
Beaucoup de clients ont pris des services managés par OVH (sur une localisation donnée par défaut en plus). C'est à dire qu'ils payent OVH pour faire ce travail de sauvegarde et d'accessibilité h24. S'il y a un truc où OVH ne doit pas se planter maintenant, c'est ça : son propre PRA.

Ma compagne est experte comptable, et dès ce matin : lenteurs dans les mails et impossibilité d'envoyer les déclarations de cotisations des salariés aux organismes sociaux.

En plus, pensez qu'on est en situation tendue avec la pénurie mondiale de composants, donc trouver du serveur rapidement va pas être simple, sauf chez les confrères  :-\
Titre: Incendie sur un site OVH à Strasbourg
Posté par: kgersen le 10 mars 2021 à 10:52:14
Le manager OVH ( https://www.ovh.com/manager ) est inaccessible/lent. Sans doute trop de monde qui essai de s'y connecter ou alors il dépend pour son fonctionnement en partie d'équipements qui étaient dans les DC détruit/éteints.

> Une erreur est survenue lors du chargement de la page.

Du coup on ne peut savoir a quel degré on est impacté. Savoir si ses services/équipements étaient dans SBG2 ou SBG4 par exemple ce n'est pas la même chose en terme de recovery et d'actions a mener de suite.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Leon le 10 mars 2021 à 10:55:13
Oh purée!  :o

C'est des centaines de baies qui sont parties en fumée, là!
Donc des dizaines de milliers de serveurs.
Des millions et des millions d'Euros de matériel informatique.
C'est majeur de chez majeur. C'est triste pour OVH.

Ce site n'avait très probablement aucune protection incendie, contrairement à la très grande majorité des datacenter.
Donc ils n'étaient probablement pas assurés du tout, vu que pas de protection incendie.

Et l'image de marque d'OVH va en prendre un sacré coup.
Bon courage aux équipes en tout cas.

Leon.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Kazer67 le 10 mars 2021 à 10:56:40
Beaucoup de clients ont pris des services managés par OVH (sur une localisation donnée par défaut en plus). C'est à dire qu'ils payent OVH pour faire ce travail de sauvegarde et d'accessibilité h24. S'il y a un truc où OVH ne doit pas se planter maintenant, c'est ça : son propre PRA.

Ma compagne est experte comptable, et dès ce matin : lenteurs dans les mails et impossibilité d'envoyer les déclarations de cotisations des salariés aux organismes sociaux.

En plus, pensez qu'on est en situation tendue avec la pénurie mondiale de composants, donc trouver du serveur rapidement va pas être simple, sauf chez les confrères  :-\

Je pense quand même qu'il doit y avoir un sacré pourcentage de le tas qui n'ont pas souscrit à des options de backup/redondance (come d'hab, pour raison de coût) et qui viennent jeter des cailloux sur OVH.

Mais oui, pour ceux qui ont des services managés, s'ils n'y a pas un PRA solide ça risque de faire très très mal pour OVH
Titre: Incendie sur un site OVH à Strasbourg
Posté par: xillibit le 10 mars 2021 à 11:00:31
Il y a eu une coupure électrique préventive, je viens de recevoir ça d'un prestataire :

Citer
Aucun des services que nous utilisons n’est présent sur le compartiment SBG2 impacté par l'incendie , mais la coupure électrique préventive appliqué à l'ensemble du site impacte les services hébergés.

Un autre prestataire :

Citer
Par mesure de précaution, l’électricité a été coupée sur l’ensemble du site, ce qui impacte donc tous les services à SBG1, SBG2, SBG3 et SBG4.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: e-TE le 10 mars 2021 à 11:08:24
Oh purée!  :o

C'est des centaines de baies qui sont parties en fumée, là!
Donc des dizaines de milliers de serveurs.
Des millions et des millions d'Euros de matériel informatique.
C'est majeur de chez majeur. C'est triste pour OVH.

Ce site n'avait très probablement aucune protection incendie, contrairement à la très grande majorité des datacenter.
Donc ils n'étaient probablement pas assurés du tout, vu que pas de protection incendie.

Et l'image de marque d'OVH va en prendre un sacré coup.
Bon courage aux équipes en tout cas.

Leon.
dans le reportage photo un peu plus haut, ils montrent qu'ils ont mis des sprinklers au dessus de chaque baies (indépendant les uns des autres) pour stopper arroser une baie qui prend feux sans abimer les autres... ca n'a pas du suffire  :-X
erreur de ma part, ce n'était justement pas le cas de l'installation de sbg.
 
Titre: Incendie sur un site OVH à Strasbourg
Posté par: chantoine le 10 mars 2021 à 11:10:54

Ma compagne est experte comptable, et dès ce matin : lenteurs dans les mails et impossibilité d'envoyer les déclarations de cotisations des salariés aux organismes sociaux.

Dis lui qu'en passant par JeDéclare ça passe très bien  8)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 10 mars 2021 à 11:10:56
Attention si SBG2 est entièrement détruit, SBG1 a été partiellement détruits.

OVH communique sur le fait qu'ils sont éteignent ce qui restait sur onduleur sur DC3.

OVH vérifie l'état de SBG3 et SBG4 pour les redémarrer dès que cela sera possible.

SBG1 est impacté (on ne sais pas si des serveurs sont détruits, vu les photos cela semble le cas) donc, cela va être un peu plus compliqué pour redémarrer la partie qui n'a pas été touchée par l'incendie.

Il y en a qui savent ou est l'arrivée de fibre et les routeurs ? Si c'est sur SBG2, cela va complexifier la remise en service de SBG3 et SBG4.

Courage aux équipes, c'est l'incendie de datacenter le plus destructeur de ce dernières années.

Les containers blanc brûlés, a coté du drapeau bleu "OVH Cloud", c'est SGB1.
SBG2 c'est la bâtiment entièrement détruit
SBG3 c'est le bâtiment du fond
SBG4, plus petit, n'est pas visible sur la photo et n'est pas impacté.
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_3.jpg)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: e-TE le 10 mars 2021 à 11:14:31
Il y a eu une coupure électrique préventive, je viens de recevoir ça d'un prestataire :

Un autre prestataire :
ca ne serait pas le premier spof chez ovh... apres, vu la taille de l'incendie, c'est peut etre plus sage de vérifier l'état des arrivées électriques avant de tout redémarrer, éviter un autre coupure / accident inutile.


Citer
Update 10am. (I’m there).
We finished to shutdown the UPS in SBG3. Now they are off. We are looking to enter into SBG3 and check the servers. The goal is to create a plan to restart , at least SBG3/SBG4, maybe SBG1. To do so, we need to check the network rooms too.
https://twitter.com/olesovhcom/status/1369576249161621504

on va mettre ca sur une approximation dans l'usage de l'anglais, mais "the goal is to create a plan to restart"... normalement tout doit déjà être prêt et anticipé avant, et on ne créé pas un plan une fois l'incident survenu, tout au plus on adapte un scénario déjà anticipé... c'est chiant à faire, mais ca fait gagner du temps en cas d'urgence comme la, et ca évite de passer a coté de certaines choses dans la précipitation :x
bon courage aux équipes...
Titre: Incendie sur un site OVH à Strasbourg
Posté par: xillibit le 10 mars 2021 à 11:19:29
ca ne serait pas le premier spof chez ovh... apres, vu la taille de l'incendie, c'est peut etre plus sage de vérifier l'état des arrivées électriques avant de tout redémarrer, éviter un autre coupure / accident inutile.

oui d'accord, dans le mail du prestataire si ils attendent un redémarrage et si ils n'ont pas de plan B on n'est pas prêt de revoir le service tout de suite :

Citer
La société nom_du_prestataire n'a  pas à ce stade été informés d’un délai de remise en service de la part d’OVH.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 11:22:14
a priori SBG3 est assez sévèrement touché aussi
les pompier ont du arroser à l'intérieur donc risque de pas mal de dégats de l'eau sur le matos...
Titre: Incendie sur un site OVH à Strasbourg
Posté par: e-TE le 10 mars 2021 à 11:25:10
oui d'accord, dans le mail du prestataire si ils attendent un redémarrage et si ils n'ont pas de plan B on n'est pas prêt de revoir le service tout de suite :
ah bah si tous les serveurs du presta étaient sur sbg1/2/3/4 , oui, tant qu'il n'y a pas un contrôle par ovh des installations, un cr de ce qui est réellement impacté ou non, de ce qui a cramé, pris l'eau, la fumée&Co, ca risque d'être long...

encore plus quand on commence a entendre que sbg3 n'est pas si clean que ca non plus... car la ca veut dire qu'ils ne vont pas pouvoir tout redémarrer, mais baie par baie après avoir contrôlé les installations elec, serveur, reseau&co... :x

edit: et meme si ils ont de quoi redémarrer sur une autre partie de l'infra ovh, ca doit pas être les seuls dans le cas, et ca va se batailler pour avoir des serveurs, demander des restauration de sauvegarde, accès aux consoles web en évitant les saturations actuels&co.. manquerait plus qu'un robot de sauvegarde tombe en panne face à la demande accru et hop :x
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 11:25:39
D'après le site "actu.fr", des pompiers Allemands étaient également présents pour aider. On apprends également que les pompiers sont partis à 00h45 pour un "dégagement de fumée", leur intervention aurait durée 6h
https://actu.fr/grand-est/strasbourg_67482/incendie-sur-le-site-de-l-entreprise-ovh-a-strasbourg-non-classe-seveso-ce-que-l-on-sait_40096612.html

Sur une photo publiée sur Twitter (https://twitter.com/jerome68680/status/1369580441934721026/photo/3), on peut voir qu'un bateau équipé d'une lance à été envoyé sur place

dans le reportage photo un peu plus haut, ils montrent qu'ils ont mis des sprinklers au dessus de chaque baies (indépendant les uns des autres) pour stopper arroser une baie qui prend feux sans abimer les autres... ca n'a pas du suffire  :-X
Rien n'indique dans ce reportage photo qu'il s'agit des DC de Strasbourg
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 10 mars 2021 à 11:25:42
Même si l'eau n'est pas rentrée à l'intérieur du bâtiment massivement (il y a pas mail d'aérations, bien visible sur les photos), une remise en route aujourd'hui, me semble impossible. (J’aimerais bien et j'applaudirais des deux mais si c'est fait).

Pour la remise en énergie il va être nécessaire de voir où passent les chemins de câble et vérifier qu'a aucun endroit c'est détruit ou inondé.

Même si le site SGB3/SGB4 repart demain, c'est une vrai prouesse d'OVH.

Les sites sont quand même bien imbriqués. Difficile de faire fonctionner SGB3 alors que le site de SG2 est encore chaud (les pompiers vont devoir rester au moins toute la journée pour éteindre les braises).
Titre: Incendie sur un site OVH à Strasbourg
Posté par: kgersen le 10 mars 2021 à 11:28:53
vue 3d sur Google Maps du site:

(https://i.imgur.com/GpfkG9h.png)

https://goo.gl/maps/ts7TRuYEHJL5coMU8

Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 11:33:06
pour SBG1 je pense que la première rangée de conteneur a joué le role de pare feu pour la deuxième rangée
peut être un espoir que tous les serveurs de ce coté ne soient pas perdus
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Optix le 10 mars 2021 à 11:37:42
Dis lui qu'en passant par JeDéclare ça passe très bien  8)
Oui, c'est le fallback de beaucoup de comptables, ça va ramer sévère aujourd'hui (dernier délai je crois)  ;D
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Tounet le 10 mars 2021 à 11:38:50
Vous êtes optimistes.

Vu la chaleur dégagée, les photos de l'incendie, je ne donne pas cher des bâtiments voisins.
Triste pour OVH en tout cas, et clairement ca doit mettre a mal des petites boites qui n'ont pas prévu de PRA ou de PCA, faute de budget ou de ne rien n'y connaitre.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: nicox11 le 10 mars 2021 à 11:40:15
Attendez, si j'ai bien compris, OVH ne fait pas de backup de ses services sur d'autres sites ?
Enfin je veux dire, d'accord les utilisateurs doivent faire des backup etc... mais dans le contrat c'est pas stipulé pour ovh ?

Ça me parait très surprenant.
Si un truc similaire arrive à Amazon ou Google par exemple, je pense qu'ils ont des backup eux non ?

Edit : Je parle au moins des données
Titre: Incendie sur un site OVH à Strasbourg
Posté par: dmxvalou le 10 mars 2021 à 11:43:44
D'après le site "actu.fr", des pompiers Allemands étaient également présents pour aider. On apprends également que les pompiers sont partis à 00h45 pour un "dégagement de fumée", leur intervention aurait durée 6h
https://actu.fr/grand-est/strasbourg_67482/incendie-sur-le-site-de-l-entreprise-ovh-a-strasbourg-non-classe-seveso-ce-que-l-on-sait_40096612.html

Sur une photo publiée sur Twitter (https://twitter.com/jerome68680/status/1369580441934721026/photo/3), on peut voir qu'un bateau équipé d'une lance à été envoyé sur place
Rien n'indique dans ce reportage photo qu'il s'agit des DC de Strasbourg

De mon coté j'ai perdu toute communication avec mon dédié a SBG2 rack 72B07 à 2021-03-10 01:11:51 UTC +1
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Leon le 10 mars 2021 à 11:46:25
dans le reportage photo un peu plus haut, ils montrent qu'ils ont mis des sprinklers au dessus de chaque baies (indépendant les uns des autres) pour stopper arroser une baie qui prend feux sans abimer les autres... ca n'a pas du suffire  :-X
Le reportage, c'est moi qui l'avait cité il y a quelques années. Les photos avec sprinkler n'ont pas été prises en France, mais c'est à Beauharnois au Canada.
https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/
En France, aucune protection incendie par Sprinkler visible chez OVH Strasbourg.

Avec une protection par Sprinkler, l'incendie ne se serait pas propagé de la sorte. 

Leon.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 11:50:04
Attendez, si j'ai bien compris, OVH ne fait pas de backup de ses services sur d'autres sites ?
Enfin je veux dire, d'accord les utilisateurs doivent faire des backup etc... mais dans le contrat c'est pas stipulé pour ovh ?

Ça me parait très surprenant.
Si un truc similaire arrive à Amazon ou Google par exemple, je pense qu'ils ont des backup eux non ?

Edit : Je parle au moins des données
J'aurais tendance à dire : tout dépend du service.

Si c'est du dédié en location ou même du housing (il n'en faisaient pas à SBG je crois ?), OVH ne fait probablement rien (comme Scaleway) et ça me semble logique. Au mieux ils fournissent un FTP ou le client peut balancer ses backup.

Si c'est leur "cloud", ça semble impensable qu'il n'y ait pas de réplication sur un autre site
Titre: Incendie sur un site OVH à Strasbourg
Posté par: thedark le 10 mars 2021 à 11:55:39
On a une liste des sites connus qui ont eu une interruption à cause de ça ?
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Gilum le 10 mars 2021 à 11:57:16
Petite recap du commandant de pompier qui est intervenue :
https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_2.mp4
Source: StrasTV
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 10 mars 2021 à 11:57:18
On a une liste des sites connus qui ont eu une interruption à cause de ça ?
Les services de l'Arcep sont hébergés par plusieurs prestataires et ceux qui sont chez OVH sont sur plusieurs sites.
La seule perte c'est le service "j'alerte l'Arcep" qui est sur Strasbourg.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Optix le 10 mars 2021 à 11:58:07
On a une liste des sites connus qui ont eu une interruption à cause de ça ?
Bah déjà le site de l'UPR :D
Titre: Incendie sur un site OVH à Strasbourg
Posté par: nicox11 le 10 mars 2021 à 11:59:23
J'aurais tendance à dire : tout dépend du service.

Si c'est du dédié en location ou même du housing (il n'en faisaient pas à SBG je crois ?), en effet OVH ne fait rien (comme Scaleway) et ça me semble logique. Au mieux ils fournissent un FTP ou le client peut balancer ses backup.

Si c'est leur "cloud", ça semble impensable qu'il n'y ait pas de backup ou même de réplication sur un autre site.

Sur les dédiés aucune mention de backup sur les contrats ? Si je prends l'offre le plus haute, ça ne parle pas de backup géographique ? Ça me parait dingue que cela n'existe pas chez OVH.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Tounet le 10 mars 2021 à 12:01:33
J'ai lu que data.gouv.fr a été indisponible un moment ? Mais tout est revenu a la normal.

Je suis curieux de savoir, pour ceux qui sont managé par OVH, combien de temps ca a mis à revenir. Idem pour ceux qui ont leur propre PRA / PCA.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: kgersen le 10 mars 2021 à 12:01:42
De mon coté j'ai perdu toute communication avec mon dédié a SBG2 rack 72B07 à 2021-03-10 01:11:51 UTC +1

un VPS : flatline a 1h13 environ et coupure complète 1/2heure après.

Titre: Incendie sur un site OVH à Strasbourg
Posté par: Tounet le 10 mars 2021 à 12:04:44
Sur les dédiés aucune mention de backup sur les contrats ? Si je prends l'offre le plus haute, ça ne parle pas de backup géographique ? Ça me parait dingue que cela n'existe pas chez OVH.

Bah non, y'a ca --> https://www.ovhcloud.com/fr/bare-metal/backup-storage/

Donc tu as la responsabilité du backup sur un dédié. Une fois que le backup est fait sur le cloud d'ovh, c'est eux qui en ont la responsabilité. Aussi simple que ca.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Douks le 10 mars 2021 à 12:09:28
Sur les dédiés aucune mention de backup sur les contrats ? Si je prends l'offre le plus haute, ça ne parle pas de backup géographique ? Ça me parait dingue que cela n'existe pas chez OVH.
Sur un dédié que tu loues à OVH (ou un autre toto), ils gèrent le matériel et réseau, et tu te débrouilles avec la partie logiciel. Ils n'ont aucun moyen de savoir quand et comment faire un backup de ta machine (imagine 15 clients qui ont 15 applis qui nécessitent des coupures pour faire un backup, ça serait déjà ingérable, ensuite tu multiplies par 1000, 10k, 100k...).
Mais c'est pareil chez les autres, tu te débrouilles avec ton dédié ou ton matos en housing (ou alors, tu loues une presta d'infogérance chez quelqu'un).
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 10 mars 2021 à 12:10:43
Premier communiqué de presse :

Incendie sur notre site de Strasbourg

Ce mercredi 10 mars 2021, à 00h47, un incendie s’est déclaré dans une salle d’un de nos 4 datacentres strasbourgeois, SBG2. Nous précisons que le site ne fait pas l’objet d’une classification seveso.

Les pompiers sont immédiatement intervenus sur site afin de protéger les équipes et limiter  la progression de l’incendie. Ils ont ainsi procédé à l’isolation complète du site et de son périmètre dès 2h54.  À 4h09, le feu a détruit SBG2 et continuait de présenter des risques pour les datacentres voisins jusqu'à ce que les pompiers prennent le contrôle complet de l’incendie. Depuis 5h30, le site est inaccessible à nos équipes pour des raisons évidentes de sécurité, sous le pilotage de la préfecture.  L’incendie est désormais circonscrit.   Nous sommes soulagés qu’aucun blessé ne soit à déplorer, ni parmi nos équipes ni parmi les pompiers et les services de la préfecture que nous remercions pour leur mobilisation exemplaire à nos côtés.   

Grâce à notre parc opérationnel de 15 datacentres en Europe, nos équipes techniques et commerciales sont pleinement investies pour accompagner nos clients, mettre en œuvre des solutions et pallier l’indisponibilité de notre site strasbourgeois. Notre mission est d’offrir à nos clients une qualité de services optimale pour accompagner leurs activités en ligne et nous savons l’importance cruciale que cela revêt pour eux. Nous leur présentons nos plus sincères excuses pour les difficultés que cet incendie leur cause. Nous nous engageons ainsi à communiquer avec la plus grande transparence sur ses causes et ses impacts.

Nous sommes actuellement en train d’évaluer l’impact de cet incident et communiquerons dès que possible avec la plus grande transparence sur l’avancée de nos analyses et la mise en œuvre de solutions.

Tous nos canaux de communication, à commencer par notre plateforme de suivi d’incidents (travaux.ovh.com, dont la tache 49484 (http://travaux.ovh.com/?do=details&id=49484)) , sont accessibles pour vous tenir informés en temps réel sur l’évolution de la situation.


Source : communiqué de presse OVH du 10 mars 2021, 12h00
Titre: Incendie sur un site OVH à Strasbourg
Posté par: kgersen le 10 mars 2021 à 12:12:43
update d'Octave a 11h20:

SBG1 : salle réseau  ok/ équipements en cours de vérification
SBG1 : 8 conteneurs ok / équipements en cours de vérification
SBG1 : 4 conteneurs détruits
SBG2 : complètement détruit
SBG3 : salles ok/ équipements ok / électricité coupée / pas d'ETA
SBG4 : salles ok/ équipements ok / électricité coupée / pas d'ETA
Titre: Incendie sur un site OVH à Strasbourg
Posté par: nicox11 le 10 mars 2021 à 12:16:56
Sur un dédié que tu loues à OVH (ou un autre toto), ils gèrent le matériel et réseau, et tu te débrouilles avec la partie logiciel. Ils n'ont aucun moyen de savoir quand et comment faire un backup de ta machine (imagine 15 clients qui ont 15 applis qui nécessitent des coupures pour faire un backup, ça serait déjà ingérable, ensuite tu multiplies par 1000, 10k, 100k...).
Mais c'est pareil chez les autres, tu te débrouilles avec ton dédié ou ton matos en housing (ou alors, tu loues une presta d'infogérance chez quelqu'un).

Dans ce cas, si aucune mention, effectivement c'est bien à l'utilisateur de gérer.
Qu'en est-il de Google/Amazon et cie ? Est-ce pareil ? Si un datacenter rencontrait un problème similaire on aurait la même perte de donnée ?
Titre: Incendie sur un site OVH à Strasbourg
Posté par: FloBaoti le 10 mars 2021 à 12:19:27
Qu'en est-il de Google/Amazon et cie ? Est-ce pareil ? Si un datacenter rencontrait un problème similaire on aurait la même perte de donnée ?
Ca dépend des services, mais eux ne font pas de serveur dédié ni housing donc c'est différent.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 10 mars 2021 à 12:23:36
Des photo impressionnantes des pompiers (https://twitter.com/sdis67/status/1369597903535304705)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_1.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_2.jpg)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Thornhill le 10 mars 2021 à 12:25:42
Une fois que le backup est fait sur le cloud d'ovh, c'est eux qui en ont la responsabilité. Aussi simple que ca.

Et après un backup cloud ne garantit pas la non perte de données non plus, il faut regarder l'offre en détail (redondance, multi-sites, etc.).
Titre: Incendie sur un site OVH à Strasbourg
Posté par: butler_fr le 10 mars 2021 à 12:26:48
Attendez, si j'ai bien compris, OVH ne fait pas de backup de ses services sur d'autres sites ?
Enfin je veux dire, d'accord les utilisateurs doivent faire des backup etc... mais dans le contrat c'est pas stipulé pour ovh ?

Ça me parait très surprenant.
Si un truc similaire arrive à Amazon ou Google par exemple, je pense qu'ils ont des backup eux non ?

Edit : Je parle au moins des données

Si tu prend une offre tout packagé OVH (genre juste une boite mail) : OUI
Si tu prend une offre hardware ou infra : c'est à toi de prévoir le système de sauvegarde

sinon a quoi servirait les offres de backup?
Titre: Incendie sur un site OVH à Strasbourg
Posté par: sarbian le 10 mars 2021 à 12:27:36
Dans ce cas, si aucune mention, effectivement c'est bien à l'utilisateur de gérer.
Qu'en est-il de Google/Amazon et cie ? Est-ce pareil ? Si un datacenter rencontrait un problème similaire on aurait la même perte de donnée ?

Comme dit plus haut ça dépends des services. Chez AWS/Azure/GCP tu as des informations sur le niveau de redondance des donnés sur chaque service. Sur certains les data sont sur 1 salle, sur d'autres 2 salles et d'autre sur plusieurs DC. Il faut lire les docs et prévoir des backup/secours qui correspondent. C'est un métier...
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Leon le 10 mars 2021 à 12:31:31
Sur les dédiés aucune mention de backup sur les contrats ? Si je prends l'offre le plus haute, ça ne parle pas de backup géographique ? Ça me parait dingue que cela n'existe pas chez OVH.
Je résume pour expliquer:
* si tu achètes un serveur dédié, certes OVH te fournis des MOYENS d'assurer la sauvegarde de données, un espace de stockage dédié au backup, mais c'est au client de tout gérer. Tout gérer au niveau "applicatif". Et ca ne concerne que la sauvegarde!
  - sauvegarde : Le client doit programmer les sauvegardes (scripts de backup). Ca ne se fait pas tout seul. On ne sauvegarde pas de la même façon une base de donnée et un stockage de fichiers par exemple.
  - Redondance : si tu veux assurer une haute disponibilité (aucune coupure de service), le client doit acheter d'autres serveurs en redondance. Si possible sur un autre site...
  - PRA : reprendre les services sur un autre serveur, sur un autre site, voire chez un autre prestataire (AWS, Scaleway, etc...). Pareil, c'est au client de s'occuper de tout ça.
* si tu achètes des instances Cloud (machine virtuelle) c'est normalement l'hébergeur qui assure la sauvegarde ET la reprise. Sauf qu'une instance est allouée à un site (availability zone) donc il n'y aura plus suffisamment de serveur sur Strasbourg. Et dans ce cas, les backup et PRA, c'est comme dans le cas d'un dédié, c'est préférable de les faire côté client, au niveau "applicatif".
* si tu achètes un "service managé" (SaaS Outlook managé par exemple), c'est l'hébergeur (OVH) qui s'occupe de tout.

Leon.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: nicox11 le 10 mars 2021 à 12:35:48
Comme dit plus haut ça dépends des services. Chez AWS/Azure/GCP tu as des informations sur le niveau de redondance des donnés sur chaque service. Sur certains les data sont sur 1 salle, sur d'autres 2 salles et d'autre sur plusieurs DC. Il faut lire les docs et prévoir des backup/secours qui correspondent. C'est un métier...

Je suis entièrement d'accord, je suis juste étonné qu'aucune offre ovh ne permet ce service en fait, pas que tout n'y soit pas éligible.

Je résume pour expliquer:
* si tu achètes un serveur dédié, certes OVH te fournis des MOYENS d'assurer la sauvegarde de données, un espace de stockage dédié au backup, mais c'est au client de tout gérer. Tout gérer au niveau "applicatif". Et ca ne concerne que la sauvegarde!
  - sauvegarde : il faut programmer les sauvegardes (scripts de backup). Ca ne se fait pas tout seul. On ne sauvegarde pas de la même façon une base de donnée et un stockage de fichiers par exemple.
  - Redondance : si tu veux assurer une haute disponibilité (aucune coupure de service), le client doit acheter d'autres serveurs en redondance. Si possible sur un autre site...
  - PRA : reprendre les services sur un autre serveur, sur un autre site, voire chez un autre prestataire (AWS, Scaleway, etc...). Pareil, c'est au client de s'occuper de tout ça.
* si tu achètes des instances Cloud (machine virtuelle) c'est normalement l'hébergeur qui assure la sauvegarde ET la reprise. Sauf qu'une instance est allouée à un site (availability zone) donc il n'y aura plus suffisamment de serveur sur Strasbourg. Et dans ce cas, les backup et PRA, c'est comme dans le cas d'un dédié, c'est préférable de les faire côté client, au niveau "applicatif".
* si tu achètes un "service managé" (SaaS Outlook managé par exemple), c'est l'hébergeur (OVH) qui s'occupe de tout.

Leon.

Merci pour les précisions, c'est plus clair.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: DaWhorus le 10 mars 2021 à 12:45:23
Je suis client OVH sur leur offre "Private Cloud", tu as bien des mécanismes de backup (Veeam) inclus dans l'offre (mais pas obligatoires). Tu payes un prix par VM que tu veux backup dans ton infra. Par défaut, la sauvegarde est sur le même site il faut prendre une option supérieure pour être off site.
De même sur cette offre ils te proposent un PRA basé sur la techno Zerto.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 10 mars 2021 à 13:19:48
Quand je fais un traceroute vers un serveur ovh supposément cramé, le traceroute s'arrête sur des routeurs de mon opérateur. Cela veut dire quoi niveau réseau ? Ils ont arrêté de propager tout un range d'ip sur internet ? Pour éviter que des gens tentent en boucle ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: oliviermis le 10 mars 2021 à 13:20:12
Citer
Update 1pm
Plan for the next 1-2 weeks:
1) rebuilding 20KV for SBG3
2) rebuilding 240V in SBG1/SBG4
3) verifying DWDM/routers/switchs in the network room A (SBG1). checking the fibers Paris/Frankfurt
4) rebuilding the network room B (in SBG5). checking fibers Paris/Frankfurt

Ils ne vont pas chômer...
Titre: Incendie sur un site OVH à Strasbourg
Posté par: e-TE le 10 mars 2021 à 13:23:36
Le reportage, c'est moi qui l'avait cité il y a quelques années. Les photos avec sprinkler n'ont pas été prises en France, mais c'est à Beauharnois au Canada.
https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/
En France, aucune protection incendie par Sprinkler visible chez OVH Strasbourg.

Avec une protection par Sprinkler, l'incendie ne se serait pas propagé de la sorte. 

Leon.
ah désolé, j'ai lu de travers et j'ai confondu les deux.  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alarig le 10 mars 2021 à 13:24:31
Quand je fais un traceroute vers un serveur ovh supposément cramé, le traceroute s'arrête sur des routeurs de mon opérateur. Cela veut dire quoi niveau réseau ? Ils ont arrêté de propager tout un range d'ip sur internet ? Pour éviter que des gens tentent en boucle ?

Tout et rien, ça dépend où ça s’arrête chez ton opérateur
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 10 mars 2021 à 13:27:00
Tout et rien, ça dépend où ça s’arrête chez ton opérateur
Je devrais au moins vers des routeurs "frontaux" de ovh non ? Ou vraiment tout à cramé.
Par exemple, moi ça s'arrête sur ae41-0.noidf002.rbci.orange.net [193.252.98.106]
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Optix le 10 mars 2021 à 13:29:18
Je devrais au moins vers des routeurs "frontaux" de ovh non ?
Non, comme ça ton trafic va directement à Strasbourg, meilleure latence, redondance etc.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 13:31:49
Apparemment site NON Seveso.

https://www.20minutes.fr/faits_divers/2995203-20210310-strasbourg-important-incendie-maitrise-fumees-toxiques
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 10 mars 2021 à 13:31:59
Non, comme ça ton trafic va directement à Strasbourg, meilleure latence, redondance etc.

Donc le routeur "directement à Strasbourg" ferait partis du matériel parti en fumé ?  ???
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alarig le 10 mars 2021 à 13:34:25
Par exemple, moi ça s'arrête sur ae41-0.noidf002.rbci.orange.net [193.252.98.106]

Si ça s’arrête sur un NO ça veut dire qu’Orange a encore la route, mais qu’OVH ne l’a plus en interne. Je suppose que les gros blocs sont originés sur des RRs et que les more-specs arrivent à Strasbourg, mais qu’elles n’existent plus vu que les routeurs sont coupés.

De mémoire, les NI ont la full, donc si une route n’est pas annoncée, ça devrait s’arrêter sur un NI.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 13:35:26
hum manager down = on ne peut intervenir sur les enregistrements DNS gérés par OVH pour basculer sur autre chose...

moralité: prenez pas vos hébergements/cloud services et vos DNS chez le même prestataire.



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alarig le 10 mars 2021 à 13:35:40
Donc le routeur "directement à Strasbourg" ferait partis du matériel parti en fumé ?  ???

Les routeurs ont pas été touchés d’après Octave (ils ont eu beaucoup de chance…), mais le courant a été coupé pour pouvoir intervenir sur l’incendie.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sarbian le 10 mars 2021 à 13:37:16
Donc le routeur "directement à Strasbourg" ferait partis du matériel parti en fumé ?  ???

Ils ont coupé le courant sur quasi tout le site. Une grosse partie de ce qui est hébergé à Strasbourg ne va pas être dispo avant un moment, que ce soit dans une salle touchée ou non.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: FloBaoti le 10 mars 2021 à 13:37:27
A priori l'API fonctionne pour modifier les DNS, non ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Optix le 10 mars 2021 à 13:39:43
A priori l'API fonctionne pour modifier les DNS, non ?
Le manager repose lui-même sur l'API...  :-\
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 10 mars 2021 à 13:41:23
Les routeurs ont pas été touchés d’après Octave (ils ont eu beaucoup de chance…), mais le courant a été coupé pour pouvoir intervenir sur l’incendie.

Ils ont coupé le courant sur quasi tout le site. Une grosse partie de ce qui est hébergé à Strasbourg ne va pas être dispo avant un moment, que ce soit dans une salle touchée ou non.

Merci pour l'info.

hum manager down = on ne peut intervenir sur les enregistrements DNS gérés par OVH pour basculer sur autre chose...

moralité: prenez pas vos hébergements/cloud services et vos DNS chez le même prestataire.





J'aurai aussi besoin de changer une entrée DNS géré par OVH. Si je comprends bien, c'est cuit pour un moment et l'entrée bloqué vers un DC dead?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 10 mars 2021 à 13:46:10
J'attends de voir si la réplication promise par OVH sera bien effective pour le stockage objets. :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 13:48:03

J'aurai aussi besoin de changer une entrée DNS géré par OVH. Si je comprends bien, c'est cuit pour un moment et l'entrée bloqué vers un DC dead?

oui faut que le manager ou l'api refonctionnent . on peut suivre l'évolution sur http://travaux.ovh.com/?do=details&id=49498& mais lui aussi sature par moment... effet boule de neige...
bref ce n'est pas trop la gloire pour un prestataire dit 'cloud' que ces propres services ne soient pas tolérants aux pannes ou a une surcharge de fréquentation.

ils n'ont pas anticipé que le manager et l'api étaient des SPOF ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 10 mars 2021 à 13:50:38
On en a déjà un peu parlé, mais je remet le lien.

Un sujet pourraient intéresser : OVH et la protection incendie (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/).

Je pense que les choses vont changer après ce sinistre incident ("incident" étant le terme officiel).

Dans le cas de Roubaix 4, le Datacenter est fait avec beaucoup de bois :

(https://lafibre.info/images/ovh/201009_rbx4_construction_1.jpg)

Les sprinklers sont très présents dans les habitudes américaines.
Quasiment tous les bâtiments aux états unis et au quebec sont équipés de sprinkler, qui sont quasi obligatoire règlementairement parlant et coté assurance. La méthode de protection incendie s'articule surtout autour de l'extinction automatique (quitte à avoir des gros sinistres), alors qu'en Europe nous sommes beaucoup plus dans le préventif (portes coupe-feu, compartiments, désenfumage, résistance au feu des planchers et des murs, évacuation, généralisation des SSI etc...).
Le débit d'une tête de sprinkler est de 15 à 20 m3 / heure, doit être remplis sous air en cas de risque de gel, et alimenté depuis une cuve autonome donnant deux heures d'autonomies avec 8 têtes déclenchées ou une double arrivée d'eau redondante. Il y a sans doutes quelques subtilités sur la règlementation et préconisations FM Global aux US. Imaginez les dégâts provoqués par 20 000 litres d'eau par heure sur des infrastructures informatiques...

En France, les datacenters sont règlementés essentiellement par le code du travail, par les préconisations ICPE (à autorisation ou déclaration) et par les assureurs.
Au niveau purement règlementaire, les seules choses qui sont demandées c'est :
- Le désenfumage mécanique ou naturel pour les locaux aveugles ou faisant plus de 300m2
- Le compartimentage coupe-feu au delà d'un certain volume / m2
- Des issues de secours accessibles avec une certaine largeur
- Une ventilation donnant un minimum d'air neuf par occupant
- L'accessibilité pompier par la facade pour les locaux sont le plancher bas du dernier niveau est à plus de 8 mètres
- 1 chiotte pour 10 personnes (occupant un poste considéré comme "fixe")

Rien n'est demandé ni en détection incendie, ni en extinction. C'est très léger.

Par contre, c'est un non sens, surtout lorsque l'on manipule/héberge les précieuses données de centaines voir de milliers d'entreprises de ne pas respecter des règles de sécurité considérées comme "de base" par les règles de l'art :
- Salles informatiques coupe-feu 1 heure (murs, planchers, portes et ouvrants) et systématiquement désenfumées : en cas d'incendie le feu doit être contenu dans un espace restreint et résistant au feu (oubliez les planchers en bois!). Les matériaux utilisés doivent être M0 ou M1 (incombustible / ininflammable) Le désenfumage permet d'éviter les dégâts liés aux fumées et aux risques de stratification. Généralement on demande 12 fois le volume de la pièce par heure avec une vitesse inférieure à 3m / sec.
- Les locaux techniques, surtout contenant des batteries, sont considérés comme des "locaux à risques particuliers d'incendie" et doivent être coupe-feu 2 heures au moins. Les risques d'emballement batterie sont pas à négliger et provoquent des dégâts considérables
- Extinction automatique d'incendie par gaz (APSAD R13) ou brouillard d'eau (APSAD D2) : permet d'assurer la continuité de l'exploitation et du fonctionnement de l'IT même en cas d'incendie. Pour le brouillard d'eau, il est recommandé d'avoir sa propre réserve et une arrivée d'eau dédiée par la ville (la consommation est inférieure à 2m3/heure)
- Détection d'incendie précoce type VESDA sur tous les volumes, plénums et faux planchers : permet de détecter de manière très précoce un feu pour faciliter une intervention humaine sans risques. Généralement on demande une détection en 60 secondes et une pré-alarme en 40 secondes
- Agent de sécurité pompier formé et diplomé SSIAP1 présent 24x7

Le montant de la couverture de l'assurance est déterminée essentiellement les mesures préventives et de protection prises par l'exploitant.

Faire des planchers bois avec des structures portantes métalliques (qui n'ont strictement aucune tenue au feu) dans des espaces à risque important voir particuliers (j'imagine que les locaux techniques sont traités de la même manière) me parait vraiment dangereux et je suis curieux de voir l'avis de l'assureur et le montant de la couverture en cas de sinistre. Même des bureaux ou des ERP ne se permettent pas de telles choses.

De même, sur les photos on ne voit ni détection incendie, ni extinction incendie, beaucoup de tuyauteries en PVC pression (dont la combustion dégage de l'acide chlorhydrique, aucune façade ouvrante pour l'échelle pompier, ...
C'est vraiment prendre des risques / bricolages considérables avec les données des clients, surtout qu'il y a de grandes chances pour que la couverture d'assurance ne correspondes pas du tout à la valeur de ce qui est hébergé.
Il y a lieu de s'interroger sérieusement sur la sécurité de telles infrastructures.

Arnaud

Titre: Incendie sur un site OVH à Strasbourg
Posté par: thedark le 10 mars 2021 à 13:53:28
On a une liste des sites connus qui ont eu une interruption à cause de ça ?
Candysan.
https://www.youtube.com/watch?v=NdzQfpUp23U
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tounet le 10 mars 2021 à 14:10:39
On en a déjà un peu parlé, mais je remet le lien.

Un sujet pourraient intéresser : OVH et la protection incendie (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/).

Je pense que les choses vont changer après ce sinistre incident ("incident" étant le terme officiel).

L'analyse d'Arnaud était plutôt pertinente ... Sans même parler de gueguerre Online <-> OVH.

En fait, un départ de feu, dans un datacenter, ca peut arriver. Ce qui est plutôt hallucinant dans ce cas la, c'est que tout le bâtiment a cramé ce qui signifie que toutes les sécurités, actives ou passives ont echouées.
Je pense que les mois qui viennent vont être compliqués pour eux.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: gonzague le 10 mars 2021 à 14:12:32
hum manager down = on ne peut intervenir sur les enregistrements DNS gérés par OVH pour basculer sur autre chose...

moralité: prenez pas vos hébergements/cloud services et vos DNS chez le même prestataire.

Hello ! c'est possible avec l'API https://fr.wikitwist.com/panne-ovh-comment-utiliser-lapi-pour-changer-votre-zone-dns/ :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Douks le 10 mars 2021 à 14:12:52
Des photo impressionnantes des pompiers (https://twitter.com/sdis67/status/1369597903535304705)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_2.jpg)
De mémoire, c'est pas ce DC qui était prévu pour fonctionner sans clim lorsqu'il fait froid avec un système de trappes motorisées sur les façades ?
Ca fait un sacré paquet de condenseur (?) de clim à l'extérieur
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 10 mars 2021 à 14:19:20
oui faut que le manager ou l'api refonctionnent . on peut suivre l'évolution sur http://travaux.ovh.com/?do=details&id=49498& mais lui aussi sature par moment... effet boule de neige...
bref ce n'est pas trop la gloire pour un prestataire dit 'cloud' que ces propres services ne soient pas tolérants aux pannes ou a une surcharge de fréquentation.

ils n'ont pas anticipé que le manager et l'api étaient des SPOF ?

pour le manager
il y a probablement tous les call API vers les services de strasbourg qui sont KO.
je suppose que chaque client qui se connecte (a des services impactés) entraîne donc des requêtes qui partent en timeout.
ajouté à ça une augmentation plus que significative du trafic avec probablement des services internes qui sont HS aussi, je connais pas beaucoup de sites / interfaces qui seraient capables de ne pas broncher.

et l'api semble fonctionner
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 14:21:46
Hello ! c'est possible avec l'API https://fr.wikitwist.com/panne-ovh-comment-utiliser-lapi-pour-changer-votre-zone-dns/ :)

Nice! c'est deja ca.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 10 mars 2021 à 14:24:13
Hello ! c'est possible avec l'API https://fr.wikitwist.com/panne-ovh-comment-utiliser-lapi-pour-changer-votre-zone-dns/ :)
Dans 6 jours, renouvellement de mon certificat LE, je verrai bien si l'API répond bien.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: oliviermis le 10 mars 2021 à 14:24:49
De mémoire, c'est pas ce DC qui était prévu pour fonctionner sans clim lorsqu'il fait froid avec un système de trappes motorisées sur les façades ?
Ca fait un sacré paquet de condenseur (?) de clim à l'extérieur

Ce ne sont que des dry-cooler à l’extérieur (voir même certains « maison » ?)
(ce ne sont _à mon avis_ pas du vrai cooling avec compresseurs)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 14:25:51
une autre  victime:

https://twitter.com/playrust/status/1369611688539009025
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dj54 le 10 mars 2021 à 14:25:59
Reportage Video de France 3 Alsace

https://youtu.be/5QziZgVs6ro
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 10 mars 2021 à 14:29:29
De mémoire, c'est pas ce DC qui était prévu pour fonctionner sans clim lorsqu'il fait froid avec un système de trappes motorisées sur les façades ?
Ca fait un sacré paquet de condenseur (?) de clim à l'extérieur
Ce ne sont que des dry-cooler à l’extérieur (voir même certains « maison » ?)
(ce ne sont _à mon avis_ pas du vrai cooling avec compresseurs)
Oui, à priori ce sont des "dry cooler" pour le système de watercooling, rien de plus.
Bref, c'est des radiateurs de watercooling géants.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 10 mars 2021 à 14:31:51
J'ai bien réussi à changer mon entrée DNS via https://www.ovh.com/manager/ . Ca mouline pas mal mais au final j'ai pu le faire.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: AlexPopov le 10 mars 2021 à 14:52:27
www.meteociel.fr OFF  :-[

https://twitter.com/meteociel/status/1369482035446812672?s=20
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 14:56:43
Strasbourg et OVH c'est la poisse.

On se rappelera de https://www.lemonde.fr/pixels/article/2017/11/09/l-hebergeur-internet-ovh-touche-par-une-importante-panne_5212399_4408996.html
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 15:08:33
Le plus dramatique c'est les revendeurs d'hébergement, ils vont expliquer ça comment ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Invarion le 10 mars 2021 à 15:10:58
Le plus dramatique c'est les revendeurs d'hébergement, ils vont expliquer ça comment ?
Que leur DC à [insérer adresse fictive], a eu un problème de [insérer un problème fictif], mais que ce n'est en aucun cas lié à OVH  :)
Le pire ce sera ceux qui ne font pas de sauvegarde de leurs (sous)-clients  ::)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: ginie le 10 mars 2021 à 15:13:50
Et hop une compagnie maritime chez qui on ne peut plus faire de résa.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tounet le 10 mars 2021 à 15:18:10
Un tweet original dans ce bordel qui vient du directeur de la recherche chez kaspersky.

https://twitter.com/craiu/status/1369633870786797568 (https://twitter.com/craiu/status/1369633870786797568)

Citer
Out of the 140 known C2 servers we are tracking at OVH that are used by APT and sophisticated crime groups, approximately 64% are still online. The affected 36% include several APTs: Charming Kitten, APT39, Bahamut and  OceanLotus.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 15:28:42
Que leur DC à [insérer adresse fictive], a eu un problème de [insérer un problème fictif], mais que ce n'est en aucun cas lié à OVH  :)
Le pire ce sera ceux qui ne font pas de sauvegarde de leurs (sous)-clients  ::)

Exactement le même jour au même moment  ::)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 10 mars 2021 à 15:30:24
Antoine Bonin, journaliste Faits divers-Justice aux Dernières Nouvelles d'Alsace a publié une vidéo des responsables OVH Cloud qui viennent d'arriver sur place et observent les batiments.

Au pied du bâtiment ravagé par l'incendie, les restes de la mousse utilisée par les pompiers.

On voit bien des container de SBG1, situé à gauche de SBG2, qui ont été compétemment détruit par l'incendie.


https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_3.mp4
Titre: Incendie sur un site OVH à Strasbourg
Posté par: lb54 le 10 mars 2021 à 15:33:50
On a une liste des sites connus qui ont eu une interruption à cause de ça ?

Des constatations de mon côté
Tout le groupe UEM (Metz) gêré par Tiz (tiz.fr)
uem-metz.fr / urm-metz.fr

Dans les bureaux de tabac le paiement de proximité ou paiement dématérialisé ne marche plus visiblement non plus

France Bleu Lorraine relate l'ASNL et le réseau des bus de Nancy (Réseau Stan)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Makara le 10 mars 2021 à 15:35:04
Une autre victime on dirait :

 NOTIFICATION
Le site DLGamer subit une panne
Cher client,

En raison d'un incident majeur dans l'un de nos centres d'hébergement de données, notre site DLGamer subit une panne.

Nous travaillons actuellement à tout remettre en ordre, mais au vu des circonstances actuelles, cela pourrait prendre plusieurs jours.

Veuillez nous excuser pour la gêne occasionnée.


L'Équipe DLGamer.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cl3f le 10 mars 2021 à 15:44:48
Sur twitter on voit des graphiques explicites :
https://twitter.com/_Skunnyk_/status/1369638092810895366?s=20

Je sui chanceux, mon petit serveur personnel avec YUNOHOST est à RBX1 et son frère à GRA1.
Mais je m'en vais de ce pas renforcer ma politique de sauvegarde, retour en ligne en cas de panne...

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_temperature.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 15:53:58
Est-ce qu'il y en a qui pense que l'incendie peut être volontaire ?

Que cet incendie aurait pu être orchestré suite à l'annonce d'introduction en bourse ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 10 mars 2021 à 15:54:22
Antoine Bonin, journaliste Faits divers-Justice aux Dernières Nouvelles d'Alsace a publié une vidéo des responsables OVH Cloud qui viennent d'arriver sur place et observent les batiments.
La déconstruction de ce datacenter va être complexe et ça va prendre des semaines, voire des mois.
La structure du bâtiment est clairement atteinte, on voit une des façade qui est bombée, donc le bâtiment est sans doute dangereux en l'état, impossible d'entrer dedans à cause du risque d'effondrement.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zoc le 10 mars 2021 à 16:00:15
J'ai (avais ?) un VPS hébergé à SBG1 qui me sert de SMTP sortant (et uniquement ça) vu qu'Orange bloque le port 25 en sortie.

Bon ça reste du homelab et franchement le principal c'est qu'il n'y a pas de blessés. Je ne peux juste plus envoyer de mails jusqu'à nouvel ordre mais vu l'usage que j'en fais... J'attends maintenant une communication officielle d'OVH sur le sort de mon VPS...

En tout cas courage aux gars d'OVH, il va y avoir du boulot...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 10 mars 2021 à 16:01:55
La déconstruction de ce datacenter va être complexe et ça va prendre des semaines, voire des mois.
La structure du bâtiment est clairement atteinte, on voit une des façade qui est bombée, donc le bâtiment est sans doute dangereux en l'état, impossible d'entrer dedans à cause du risque d'effondrement.

Leon.

Tu parles de SBG2 là ? Il ne reste qu'à le démolir lui, rien de récupérable.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dmfr le 10 mars 2021 à 16:04:09
Est-ce qu'il y en a qui pense que l'incendie peut être volontaire ?
Ca reste une possibilité, il y aura surement enquête.

Et du sang et des larmes chez ceux qui avaient négligé leurs backups.

Seule certitude : vu l'impact et la médiatisation, Amazon et Azure doivent se frotter les mains, la French Tech 2.0 finira de convaincre les derniers réticents qu'il faut passer dans le cloud, le vrai, le sérieux.
OVH était pourtant un hébergeur 100% FR qui s'en sortait bien  :'(
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 10 mars 2021 à 16:11:16
Tu parles de SBG2 là ? Il ne reste qu'à le démolir lui, rien de récupérable.
Oui, déconstruire = démolir.
Mais il faut pouvoir le démolir calmement en toute sécurité, sans prendre de risque de blesser quelqu'un, et sans impacter les installations qui tourneraient autour pour les autres bâtiments. Ce genre d'opération est en général complexe, tu ne peux pas juste venir avec des engins de démolition basiques. Les bâtiments sont collés les uns aux autres.
Et si c'est des structures légères, il ne faut pas que les vibrations engendrées par la démolition endommagent les disques dur qui continuent de tourner dans les bâtiments qui doivent rester.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thedark le 10 mars 2021 à 16:27:47
Citer
Parmi ces sites : ceux de l'office de tourisme de Colmar ou de Saverne, celui de Recyclivre, de l'université populaire européenne, de l'aéroport de Strasbourg, l'ENT (espace numérique de travail) ONE & NEO à Sarreguemines, de la Ville de Cherbourg, du comité d'entreprise de Peugeot-Sochaux, de la brasserie Meteor, du site de réservation de scooters électriques Cityscoot (région parisienne), de la Ville de Vichy, du club de rugby de Clermont-Ferrand, du site de l'UPR (le parti politique de François Asselineau), du centre Pompidou à Paris et même, temporairement, le site gouvernemental data.gouv.fr

Source: https://www.estrepublicain.fr/faits-divers-justice/2021/03/10/de-nombreux-sites-internet-indisponibles-apres-l-incendie-d-ovhcloud-a-strasbourg
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hell0 le 10 mars 2021 à 16:32:42
Il serait intéressant que des chercheurs s'intéressent à la propagation d'un incendie dans une structure de type "cube creux" comme le datacenter ovh sbg2.

Le cube a surement du agir comme une cheminée, la chaleur est remontée très facilement le long du cube ce qui a du causer un gros appel d'air, renforçant ainsi la puissance du feu...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Lucien le 10 mars 2021 à 16:38:24
Je me pose la question, pourquoi ne pas équiper les salles avec du Halon comme on le faisait à l'époque.
Le matériel reste intact, faut juste évacuer rapidos au déclenchement de l'alarme.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 16:39:39
Est-ce qu'il y en a qui pense que l'incendie peut être volontaire ?
Que cet incendie aurait pu être orchestré suite à l'annonce d'introduction en bourse ?


la question pouvant faire sourire au départ n'est pas à négliger.
J'iraispas jusqu'aux ILLUMINATI REPTILIENS...


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 16:41:25
> Et du sang et des larmes chez ceux qui avaient négligé leurs backups.

Selection naturelle.....

> OVH était pourtant un hébergeur 100% FR qui s'en sortait bien  :'(

Pas très redondance compatible à la source.............. la preuve là une fois encore.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 10 mars 2021 à 16:42:16
Mettre à jour 16h

Nous prévoyons de redémarrer le réseau SBG1 + SBG4 + d'ici le lundi 15 mars et SBG3 d'ici le vendredi 19 mars.

Chez RBX + GRA, nous avons le stock de nouveaux serveurs, pcc, pci prêts à être livrés pour tous les clients concernés. Bien sûr gratuitement. Nous ajouterons 10K serveurs dans les 3-4 prochaines semaines.


Source : Twitter OVH traduit par Google
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 10 mars 2021 à 17:12:40
Je me pose la question, pourquoi ne pas équiper les salles avec du Halon comme on le faisait à l'époque.
Le matériel reste intact, faut juste évacuer rapidos au déclenchement de l'alarme.

Je préfère le brouillard d'eau. Cela refroidit directement et éteint l'incendie, sans non plus abîmer le matériel. C'est beaucoup moins dangereux.
https://www.tyco.fr/solutions/systemes-dextinction-a-gaz-et-brouillard-deau/brouillard-deau-haute-pression/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 17:13:30
La sonde a tenu plus qu'il n'en faut...

https://twitter.com/_Skunnyk_/status/1369638092810895366

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_temperature.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zenon le 10 mars 2021 à 17:18:42
Je me pose la question, pourquoi ne pas équiper les salles avec du Halon comme on le faisait à l'époque.
Le matériel reste intact, faut juste évacuer rapidos au déclenchement de l'alarme.
Il y a 40 ans, pour un gros site IBM bancaire, IBM déconseillait le halon qui d'après eux niquait les cartes informatiques et processeurs. Ils conseillaient de noyer sous l'eau et de sécher rapidement.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 10 mars 2021 à 17:19:27
Je me pose la question, pourquoi ne pas équiper les salles avec du Halon comme on le faisait à l'époque.
Le matériel reste intact, faut juste évacuer rapidos au déclenchement de l'alarme.
2 trucs à dire:
1) Je ne suis vraiment pas certain que les salles de Strasbourg soient "étanches à l'air": les salles sont globalement très aérées. Pas sur de moi à 100% là dessus. Donc peut-être incompatibles d'une "extinction par gaz inerte" comme c'est courament utilisé dans les salles informatiques.
2) C'est apparemment dans la philosophie d'OVH de ne PAS mettre de protection incendie active dans les salles. Rien, zéro, nada. De là à comprendre les raisons de ce choix étrange, à l'opposé de tous les standards...

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 17:20:01
Et si c'est des structures légères, il ne faut pas que les vibrations engendrées par la démolition endommagent les disques dur qui continuent de tourner dans les bâtiments qui doivent rester.

Leon.

J'espère que j'ai le droit rue du bassin de l'industrie à Strasbourg de casser la route pour travaux et faire passer un rouleau compresseur Géant, utiliser une plaque vibrante/piloneuse et faire du marteau piqueur à n'importe qu'elle heure du jour et de la nuit sans demander l'autorisation à OVH puis qu'il prenne en urgence ses disposition pour amortir les secousses du sol et ne pas abimer ses petits disque durs ::)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 17:27:45
Citer
Parmi ces sites : ceux de l'office de tourisme de Colmar ou de Saverne, celui de Recyclivre, de l'université populaire européenne, de l'aéroport de Strasbourg, l'ENT (espace numérique de travail) ONE & NEO à Sarreguemines, de la Ville de Cherbourg, du comité d'entreprise de Peugeot-Sochaux, de la brasserie Meteor, du site de réservation de scooters électriques Cityscoot (région parisienne), de la Ville de Vichy, du club de rugby de Clermont-Ferrand, du site de l'UPR (le parti politique de François Asselineau), du centre Pompidou à Paris et même, temporairement, le site gouvernemental data.gouv.fr
Source: https://www.estrepublicain.fr/faits-divers-justice/2021/03/10/de-nombreux-sites-internet-indisponibles-apres-l-incendie-d-ovhcloud-a-strasbourg

C'est dommage, l'ENT (espace numérique de travail) ONE & NEO à Sarreguemines a dans son village l'un des gros hébergeur Allemand sérieux : 1&1 IONOS  ::) ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 10 mars 2021 à 17:35:20
> Et du sang et des larmes chez ceux qui avaient négligé leurs backups.

Selection naturelle.....

> OVH était pourtant un hébergeur 100% FR qui s'en sortait bien  :'(

Pas très redondance compatible à la source.............. la preuve là une fois encore.

Entièrement d'accord, moi DSI dès mon contrat signé, OVH tout ce qui est dessus est sauvegardé illico presto puis transféré ailleurs et ça dégage avant la fin du mois, j'ai jamais eu confiance en cette boite, j'ai le pif pour ça  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 17:40:51
Quelques blagounettes qui n'ont pas tardé a apparaitre:

- your data is now really in the cloud
- the upload rate is very impressive
- Ah c'est donc ca un "firewall"

en commentaires de la photo du DC en flamme.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Optix le 10 mars 2021 à 17:42:43
Quelques blagounettes qui n'ont pas tardé a apparaitre:

- your data is now really in the cloud
- the upload rate is very impressive
- Ah c'est donc ca un "firewall"

en commentaires de la photo du DC en flamme.
(https://media.giphy.com/media/qkJJRL9Sz1R04/giphy.gif)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 10 mars 2021 à 17:52:07
Citer
Plan pour les 2 prochaines semaines:
1)Remise en service de 20KV pour SBG3
2)Remise en service de 240V in SBG1/SBG4
3)Contrôle des DWDM/routers/switchs dans la salle réseau A (SBG1).
Contrôile des fibres de la liaison Paris/Frankfurt
4)Reconstruction de la salle réseau B (SBG5) Contrôle des fibres de la liaison Paris/Frankfurt

Citer
Les équipes techniques d'OVH préparent et expédient le matériel nécessaire à la mise en place d'une salle réseau temporaire. Ces équipements vont être envoyés sur le datacenter de Strasbourg durant la nuit.
Les arrivées fibre du site ont été controlées et n'ont pas été touchées par l'incendie.
SBG5 ça serait un bâtiment temporaire
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 10 mars 2021 à 17:57:39
SBG5 vise à remplacer la salle réseau de feu SBG2 ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 10 mars 2021 à 17:58:01
Moi j'dis 2 jours après les rumeurs d'abandon de la freebox pro avec jaguar.

beau plan pour détourner l'attention
ils sont forts
 ;D

SBG5 vise à remplacer la salle réseau de feu SBG2 ?

yes
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: corpo le 10 mars 2021 à 18:00:03
Quelques blagounettes qui n'ont pas tardé a apparaitre:

- your data is now really in the cloud
- the upload rate is very impressive
- Ah c'est donc ca un "firewall"

en commentaires de la photo du DC en flamme.
Ma préférée : https://twitter.com/KevinHttt/status/1369576568532725761
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 18:07:15
(lusurlenet) "Vous avez pas remarqué une chute des spams aujourd’hui ? Moi si."
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Invarion le 10 mars 2021 à 18:10:56
SBG5 vise à remplacer la salle réseau de feu SBG2 ?
Non, SBG5 & SGB6 sont des zones Openstack, dont l'emplacement physique est SBG3.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 10 mars 2021 à 18:16:19
Non, il y'a (ou aura) aussi un SBG5 physique puisqu'ils veulent mettre un POP réseau dedans.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Invarion le 10 mars 2021 à 18:19:57
Non, il y'a (ou aura) aussi un SBG5 physique puisqu'ils veulent mettre un POP réseau dedans.
D'acc ! On s'y perd avec toutes ces correspondances  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 10 mars 2021 à 18:46:07
En me baladant sur internet c'est quand même déprimant les gens qui ont un avis/jugement de pseudo-expert alors qu'ils y connaissent rien en datacenter/informatique...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 18:47:37
En me baladant sur internet c'est quand même déprimant les gens qui ont un avis/jugement de pseudo-expert alors qu'ils y connaissent rien en datacenter/informatique...

comme pour le covid quoi ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tounet le 10 mars 2021 à 19:06:52
En me baladant sur internet c'est quand même déprimant les gens qui ont un avis/jugement de pseudo-expert alors qu'ils y connaissent rien en datacenter/informatique...

Bah quoi, tu découvres internet aujourd'hui ?  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: PeGGaaSuSS le 10 mars 2021 à 19:09:02

C'est bien merdique la perte du mail par contre (compte gratos avec les domaines), sans parler d'une éventuelle perte de données.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: patacrac le 10 mars 2021 à 19:22:56
Je pensais que les salles serveurs- DataCenter étaient équipé comme dans le film Terminator, avec du Gaz inerte supprimant tout oxygène de l'endroit, fermeture automatique des portes coupe-feu étanche etc, le jour ou on aura une éruption solaire style Carrington, X50 avec plus d'électricité et internet pendant 6 mois, car tous les transfo's THT auront cramés, on commencera à réfléchir un peu plus à la fragilité des systèmes...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xplo le 10 mars 2021 à 19:31:11
Toujours interessant de faire un PRA entre la théorie et la pratique :)

Ca me fait chier pour OVH j'espere ils vont s'en sortir.

En effet j'ai eu quelque "comment ca ovh fait pas de backup de leur datacenter" today :o
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kedare le 10 mars 2021 à 19:33:24
comme pour le covid quoi ...

Ou le Nucléaire, ou la 5G, ou la technologie en général.

Tiens @greenpeace est pas venu gueuler a cause de la fumée noire ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico_S le 10 mars 2021 à 19:44:11
Ce ne sont que des dry-cooler à l’extérieur (voir même certains « maison » ?)
(ce ne sont _à mon avis_ pas du vrai cooling avec compresseurs)
Ca ressemble quand même beaucoup à des groupes d'eau glacée en vision 3D mais en effet ça pourrait être des aérorefroidisseurs en V (pour le gain de place au sol).
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Antoinel le 10 mars 2021 à 19:56:49
PRA : reprendre les services sur un autre serveur, sur un autre site, voire chez un autre prestataire (AWS, Scaleway, etc...). Pareil, c'est au client de s'occuper de tout ça.
* si tu achètes des instances Cloud (machine virtuelle) c'est normalement l'hébergeur qui assure la sauvegarde ET la reprise. Sauf qu'une instance est allouée à un site (availability zone) donc il n'y aura plus suffisamment de serveur sur Strasbourg. Et dans ce cas, les backup et PRA, c'est comme dans le cas d'un dédié, c'est préférable de les faire côté client, au niveau "applicatif".

Attention, une instance Compute (machine virtuelle) n'a pas forcément son disque backupé. Chez Google Cloud par exemple, le disque local (éphémère) n'est pas backupé ni redondé. Pareil chez AWS. Certains utilisent ces VM comme des machines virtuelles durables sans forcément prendre un disque bloc persistant et peuvent être amenés à penser que si le host meurt, ils récupéreront leurs instances avec les données quelques minutes plus tard ailleurs ... (non).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 10 mars 2021 à 20:02:59
(lusurlenet) "Vous avez pas remarqué une chute des spams aujourd’hui ? Moi si."
Même mieux que cela:
https://twitter.com/craiu/status/1369633870786797568
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 20:05:34
C'est bien merdique la perte du mail par contre (compte gratos avec les domaines), sans parler d'une éventuelle perte de données.

Ouch ! je sens que les explications vont faire 14 pages....

Cela ne sera pas l'incendie en lui-même le plus important c'est ses plans B sous sa responsabilité qui seront dans le viseur du monde IT !

Octave joue sa place et pourrait transformer une intro en bourse en vente d'actifs sic !

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 10 mars 2021 à 20:09:14
D'autres photos en provenance des pompiers du Bas-Rhin via Reuters.
https://www.reuters.com/article/idUSKBN2B20NU
Notez que aucune des 2 énormes citernes de carburant (pour les groupes électrogènes) n'a été approchée par le feu; ça aurait pu être encore plus difficile à gérer.

Leon.

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_3.jpg)
(crédit photo : SDIS du Bas-Rhin)
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_4.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_5.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 20:10:42
Même mieux que cela:
https://twitter.com/craiu/status/1369633870786797568

J'ai vu ce méssage et j'ai rien capté désolé. C2 ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: pioup le 10 mars 2021 à 20:15:28
Command and control servers (C2s). Serveur de commandes et contrôles de botnet je présume.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 10 mars 2021 à 20:19:37
J’ai lu aujourdhui tout et son contraire sur le site:
Seveso, pas seveso
Seveso
Seveso déclassé...

Il s’agit visiblement d’un site non seveso, mais l’était t’il par le passé ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 10 mars 2021 à 20:21:07
C'est bien merdique la perte du mail par contre (compte gratos avec les domaines), sans parler d'une éventuelle perte de données.
Il y a eu des pertes sur les mails ?? (je parle de l'infrastructure d'OVH parce que les serveurs mails sans backup ...)
Sur les quelques Exchange que l'on a au travail, seul une légère indisponibilité a été constaté au pire. 
en tout cas rien de tel n'est annoncé sur http://travaux.ovh.net

Reste à savoir si dans les procédures "interne OVH" dans les 1 à 2 heures qui se sont écoulées entre les premières fumées et la coupure complète, une procédure de backup / déplacement des services "cloud" a été lancée. (ce qui peut aider à limiter la perte de données, le temps de rétablissement)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 10 mars 2021 à 20:22:09
Il s’agit visiblement d’un site non seveso, mais l’était t’il par le passé ?
C'était un site utilisé avant par Arcellor Mittal, si il était seveso ça devait être à cette époque ..
Après c'est une zone avec beaucoup de site Seveso de ce que j'ai compris donc quand l'info est sorti au beau milieu de la nuit, ce n'est pas dit que la source ait eu le temps de vérifier à 2 fois..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: DamienC le 10 mars 2021 à 20:23:50
Une nouvelle victime, pour les documents PDF cette fois-ci.
Il s'agit d'un service de l'état, qui avait sans doute son stockage dans l'un des DC incendiés.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 10 mars 2021 à 20:25:52
ok compris pour C2... j'ai lu rapido https://arxiv.org/pdf/1408.1136.pdf pour y glaner l'idée générale ;)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Leon le 10 mars 2021 à 20:36:55
Attention, une instance Compute (machine virtuelle) n'a pas forcément son disque backupé. Chez Google Cloud par exemple, le disque local (éphémère) n'est pas backupé ni redondé. Pareil chez AWS. Certains utilisent ces VM comme des machines virtuelles durables sans forcément prendre un disque bloc persistant et peuvent être amenés à penser que si le host meurt, ils récupéreront leurs instances avec les données quelques minutes plus tard ailleurs ... (non).
Mais dans ce cas, c'est précisé noir sur blanc que c'est une offre avec "disque non persistant".
Or, de ce que je comprends, les instances OVH c'est avec disque persistant; et dans ce cas c'est bien au cloud-provider (OVH) d'assurer la disponibilité de la machine, quels que soient les problème sur les host ou sur le stockage de ficher. Donc reprise automatique sur un autre host si le premier meurt, sauvegarde, etc...
Je me trompe?
https://www.ovhcloud.com/fr/public-cloud/guaranteed-resources/#overview

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: ginie le 10 mars 2021 à 20:54:43
J’ai lu aujourdhui tout et son contraire sur le site:
Seveso, pas seveso
Seveso
Seveso déclassé...

Il s’agit visiblement d’un site non seveso, mais l’était t’il par le passé ?
Le site doit juste être ICPE.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 10 mars 2021 à 21:29:48
Toujours interessant de faire un PRA entre la théorie et la pratique :)

Un PRA ça doit être documenté mais aussi testé, une fois par an, en déroulant la doc.
Titre: Incendie sur un site OVH à Strasbourg
Posté par: Thornhill le 10 mars 2021 à 21:32:24
Or, de ce que je comprends, les instances OVH c'est avec disque persistant; et dans ce cas c'est bien au cloud-provider (OVH) d'assurer la disponibilité de la machine, quels que soient les problème sur les host ou sur le stockage de ficher. Donc reprise automatique sur un autre host si le premier meurt, sauvegarde, etc...

Le fournisseur peut garantir la reprise sur perte de serveur sans pour autant garantir la reprise sur perte de site/bâtiment.
Ne pas confondre HA et DRP.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 10 mars 2021 à 21:33:02
Il serait intéressant que des chercheurs s'intéressent à la propagation d'un incendie dans une structure de type "cube creux" comme le datacenter ovh sbg2.

Le cube a surement du agir comme une cheminée, la chaleur est remontée très facilement le long du cube ce qui a du causer un gros appel d'air, renforçant ainsi la puissance du feu...
Oui, c'est ce qui est dit par le capitaine dans une interview qui est passée dans le sujet.

Le site doit juste être ICPE.
Oui, il y a de grandes chances.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: M@yeulC le 10 mars 2021 à 21:47:20
Bon bah il va falloir surveiller Leboncoin du côté de Strasbourg  ;D

... et penser à vérifier les températures maximales enregistrées par SMART si il y en a qui prennent des disques d'occasion  :P

En attendant je m'en vais vérifier mes sauvegardes...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 10 mars 2021 à 21:47:50
J’ai lu aujourdhui tout et son contraire sur le site:
Seveso, pas seveso
Seveso
Seveso déclassé...

Il s’agit visiblement d’un site non seveso, mais l’était t’il par le passé ?

c'est juste que dans la même zone il y  a des 7 sites Seveso juste a coté et la préfecture a fait une boulette de communication au tout début.

https://twitter.com/SylvainErnault/status/1369531503894532096

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 00:39:46
J'ai souvenir que le site de Strasbourg à été choisit par OVH car il combinait deux raisons :

- Sur le chemin de fibre entre paris et l’Allemagne (permet d'avoir une faible latence vers l’Europe de l'Est (et je pense que la majorités des sites hébergés n'étaient pas français, pour la France, Roubaix / Gravelines, plus proche de Paris, était préconisé à une époque pour les sites à destination du public Français)

- Sur le site précis où OVH s'est installé, une entreprise fortement consommatrice d'électricité était présente dans le passé, donc tout le nécessaire pour l'énergie était présent, même si on a vu par la suite que les 2 lignes 20 000 volts étaient liées l'une à l'autre (quand l'une coupe, on perd les deux). Le site en question était peut-être seveso.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 11 mars 2021 à 00:48:40
Il serait intéressant que des chercheurs s'intéressent à la propagation d'un incendie dans une structure de type "cube creux" comme le datacenter ovh sbg2.

Le cube a surement du agir comme une cheminée, la chaleur est remontée très facilement le long du cube ce qui a du causer un gros appel d'air, renforçant ainsi la puissance du feu...


L'effet de cheminé est exactement le but recherché pour évacuer la chaleur.

Et en l'espèce le triangle du feu est bien présent pour faire un big barbecue, le système de courant d'air active bien le feu !

Maintenant reste à savoir si sa sœur jumelle à Roubaix souffre des mêmes lacunes en terme de sécurité incendie... à priori oui.

Je ne connais pas leur installation, mais il n'y avait surement pas la moindre alarme incendie , en effet des têtes ne sont pas faites pour être "a moitié dehors" exposées à l'extérieur.

Pour conclure à chacun ses besoins et moyens, mais il est vrai que des fois les choix d'implantations sont etranges... entre 7 sites SEVESO seuil haut dans le voisinage de Strasbourg + inondable.

Roubaix et sa zone super inondable du quai du SARTEL ou l'eau innonde le parking pour arriver aux portes des DC ... la métropole de Lille à d'ailleurs fait des très gros travaux pour limiter le risque toujours existant.

Gravelines, zone inondable a proximité de la centrale nucléaire.

Apres chaque sites à plus ou moins de risques, imaginez un cas similaire à Paris TH2 ? avec les fameuses tremis qui vont propager le feu entre les étages rapidement.

Ou encore Netiwan à Nîmes avec son DC pile dans l'axe de la piste de l'aéroport à 2 kms ! Sans oublier Scaleway et l'incendie du voisin industriel.

Bref le risque existe partout, et le seul mettre mot est BACKUP inter-DC !

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: foreme200 le 11 mars 2021 à 00:54:21
 Enfin, en lisant ceci https://www.leparisien.fr/video/video-incendie-chez-ovh-financierement-parlant-cest-tres-tres-penalisant-affirme-un-e-commercant-10-03-2021-ER2NBWQ76NADTDXOFP4GSZUWOI.php (https://www.leparisien.fr/video/video-incendie-chez-ovh-financierement-parlant-cest-tres-tres-penalisant-affirme-un-e-commercant-10-03-2021-ER2NBWQ76NADTDXOFP4GSZUWOI.php) je me dis que peut-être les proprios de sites webs "vitaux" pour leur économie prendront conscience de l'utilité de sauvegardes externes et d'un PRA éprouvé à froid...

Enfin, en rêvant quoi  ::)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 11 mars 2021 à 01:07:51
La supervision n'a toujours pas été basculé manuellement offline, près de 24h après le sinistre :

Que ça brûle, ça peut arriver.

Mais avoir un monitoring qui te dit que tout fonctionne  :D :
http://travaux.ovh.net/vms/index_sbg1.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb1_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg2.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb2_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg3.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb3_apres_incendie.png)

http://travaux.ovh.net/vms/index_sbg4.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb4_apres_incendie.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Philibert le 11 mars 2021 à 01:09:10
Savez-vous ce qu'il en est/sera pour les VPS?
J'en avais un hébergé à SBG1, et dont je disposais de Snapshot faute d'offre de backup sur cette gamme...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 11 mars 2021 à 03:04:57
Faire un DC adiabatique sans mécanisme pour fermer les flux d'air et en bois en plus, je trouve qu'Oles jouait vraiment avec le « feu »....

Il paraît que ça a pris dans les conteneurs et ensuite SBG2 a cramé du rez-de-chaussée au toît ce qui montre à quel point c'était enflammable.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 04:23:56
C'est n'est pas adiabatique.

C'est juste refroidit par l'air extérieur directement + refroidissement à eau des CPU, là aussi via une sorte de frreecooling géant.

Quand il fait 40°c à l'extérieur, l'air froid injecté dans le bâtiment est à 40°c et le watercooling des CPU monte en température.

Le refroidissement adiabatique, vise à maintenir une température fixe 24h/24 dans le datacenter. C'est bien différent.
=> Visite du data center Scaleway DC5 (refroidissement adiabatique) (https://lafibre.info/scaleway/dc5/)

DC5 de Scaleway est le seul datacenter d'une taille importante à avoir ce système.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: q05 le 11 mars 2021 à 06:30:04
J'ai souvenir que le site de Strasbourg à été choisit par OVH car il combinait deux raisons :
Octave s'est aussi dit qu'un canal juste à côté cela pourrait toujours être utile un jour ...
Pour les pompiers un incendie pareil c'est le pied quand même, l'occasion rêvée de sortir le matos qui ne sert qu'une fois toutes les lunes. Je me demande si ce DC était certifié ISO truc machin, en principe exigé par les grands comptes ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 11 mars 2021 à 06:47:36
Enfin, en lisant ceci https://www.leparisien.fr/video/video-incendie-chez-ovh-financierement-parlant-cest-tres-tres-penalisant-affirme-un-e-commercant-10-03-2021-ER2NBWQ76NADTDXOFP4GSZUWOI.php (https://www.leparisien.fr/video/video-incendie-chez-ovh-financierement-parlant-cest-tres-tres-penalisant-affirme-un-e-commercant-10-03-2021-ER2NBWQ76NADTDXOFP4GSZUWOI.php) je me dis que peut-être les proprios de sites webs "vitaux" pour leur économie prendront conscience de l'utilité de sauvegardes externes et d'un PRA éprouvé à froid...

Enfin, en rêvant quoi  ::)
C'est tellement plus facile de mettre la faute sur le serveur qui est HS et son fournisseur ;).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 11 mars 2021 à 06:48:02
Octave s'est aussi dit qu'un canal juste à côté cela pourrait toujours être utile un jour ...
Pour les pompiers un incendie pareil c'est le pied quand même, l'occasion rêvée de sortir le matos qui ne sert qu'une fois toutes les lunes. Je me demande si ce DC était certifié ISO truc machin, en principe exigé par les grands comptes. Si oui cela montrerait que toutes ces normes c'est du pipo.
Un bel exemple de coopération franco-allemande avec ce bateau-pompe.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 11 mars 2021 à 06:48:10
https://www.youtube.com/watch?v=Mwh4OB_Sb_c
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 08:14:14
En tout cas, ces vidéos montrent que les drones sont des outils précieux pour les pompiers et services de secours. Ca permet de voir des endroits inaccessibles, et de mieux comprendre la situation globale.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 11 mars 2021 à 08:23:47
En tout cas, ces vidéos montrent que les drones sont des outils précieux pour les pompiers et services de secours. Ca permet de voir des endroits inaccessibles, et de mieux comprendre la situation globale.

Drones ou hélicoptères classiques ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 08:35:33
Drones ou hélicoptères classiques ?
Drone, c'est sur et certain.
Beaucoup d'articles citent les services de secours en précisant que c'est des photos de drone.
Et sur un article, on voit une photo d'un "opérateur drone" des services de secours.

La vidéo montrée par Nico est flagrante. C'est les déplacements d'un engin stabilisé qui a très peu d'inertie. Donc un drone. Les hélico, ça a un rendu de mouvement très différent.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Sn@ke le 11 mars 2021 à 08:35:43
Côté nPerf on a perdu deux serveurs de base de données (SBG2) qui servaient au stockage de nos tickets helpdesk (support utilisateurs).
Nous avons pu recommander 2 serveurs à Roubaix et remonter le backup ZFS qui était à Gravelines sans problème hier matin.

Par contre le serveur nPerf OVH de Strasbourg était aussi dans SBG2. Là ça prendra plus de temps à revenir !
Ce n'est pas prioritaire donc on va laisser le temps à OVH de sortir la tête de l'eau (si j'ose l'expression !).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: FloBaoti le 11 mars 2021 à 08:38:04
Petit truc auquel je pense depuis hier, imaginez un client qui doit absolument récupérer ses données dans SBG2. Est-il techniquement possible de récupérer les données d'un disque mécanique ou ssd après un tel incendie ?
Beaucoup de boites sont dans ce business, mais jusqu'à quel point est-il possible de faire de la récupération ? Ne parlons pas bien sûr du budget qui serait demandé...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Sn@ke le 11 mars 2021 à 08:44:09
Petit truc auquel je pense depuis hier, imaginez un client qui doit absolument récupérer ses données dans SBG2. Est-il techniquement possible de récupérer les données d'un disque mécanique ou ssd après un tel incendie ?
Beaucoup de boites sont dans ce business, mais jusqu'à quel point est-il possible de faire de la récupération ? Ne parlons pas bien sûr du budget qui serait demandé...
Vu l'état du DC, je suppose que tout est fondu, ça me parait compliqué de récupérer quoi que ce soit, à moins d'avoir la chance que le serveur se trouvait à un endroit de la salle plus ou moins épargné par les flammes (et même dans ce cas, la chaleur était telle que probablement rien a survécu).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 08:48:01
Petit truc auquel je pense depuis hier, imaginez un client qui doit absolument récupérer ses données dans SBG2. Est-il techniquement possible de récupérer les données d'un disque mécanique ou ssd après un tel incendie ?
Beaucoup de boites sont dans ce business, mais jusqu'à quel point est-il possible de faire de la récupération ? Ne parlons pas bien sûr du budget qui serait demandé...
Evidemment que non, c'est totalement impossible!
Tu as vu les photos? Le métal du bâtiment a du fondu! donc ils ont atteint des températures très très élevées.
L'état des serveurs doit être à l'image de l'état du bâtiment : totalement irrécupérable, un enchevêtrement de tôles. C'est évident.
Impossible de retrouver, d'identifier un disque dur, et encore moins de le récupérer. Tout est détruit.

Pour répondre plus précisément sur les dispositifs de stockage:
Les puces d'un SSD (grosses mémoires Flash), c'est dans un packaging en plastique, donc ça fond très vite.
Et côté disque dur mécanique, au delà d'une certaine température, les données magnétiques s'effacent. Je ne me souviens plus des températures, c'est plusieurs centaines de degrés.
Et bien avant ça, à des températures moins élevées, les éléments plastiques à l'intérieur de l'enceinte du disque dur peuvent fondre et contaminer la surface des disques.

Bref, aucun dispositif de stockage standard n'est conçu pour résister à un incendie, petit ou gros.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 11 mars 2021 à 08:59:51
OVH ne va pas s'embêter à faire du tri dans les disques...

Tout va partir dans une filière de recyclage pour que le lieu soit le plus rapidement "nettoyé et propre"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: KalNightmare le 11 mars 2021 à 09:04:41
Dans la liste des sites/service impactés :

https://www.europe1.fr/economie/info-e1-incendie-chez-ovh-la-frayeur-de-lexecutif-pour-la-vaccination-contre-le-covid-4030578
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 11 mars 2021 à 09:06:45
Il s'agit de la température de Curie, généralement la couche magnétique est à base de CoPt et dérivés (CoPtCrB par exemple) et ladite température varie selon la composition chimique et même le traitement thermique:
https://hal.archives-ouvertes.fr/jpa-00228587/document
https://link.springer.com/article/10.1007/s00339-012-6934-2
https://www.scientific.net/MSF.223-224.141
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Jiajo le 11 mars 2021 à 09:15:38

Bref, aucun dispositif de stockage standard n'est conçu pour résister à un incendie, petit ou gros.

Leon.

il ya des dispositif conçu pour, on appelle sa des "boite noir" particulierement utiliser dans les avions  ;)
(https://upload.wikimedia.org/wikipedia/commons/thumb/e/ec/Cvr_sidefront_large.jpg/220px-Cvr_sidefront_large.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 09:40:33
il ya des dispositif conçu pour, on appelle sa des "boite noir" particulierement utiliser dans les avions  ;)
Dans le monde de l'informatique aussi, il existe des moyens de stockage ultra durcis, dans des boitiers indestructibles (avec plusieurs cm d'épaisseur de métal et d'isolant thermique), prévu pour résister à beaucoup de choses.
Mais dans ce cas, on ne parle plus de "dispositif de stockage standard"!

Pour la très grande majorité des cas, pour des serveurs, il est infiniment plus simple/rentable/économique de faire une sauvegarde distante.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Jiajo le 11 mars 2021 à 10:02:00
Je c pas si c'est lier mais toute les documents des particuliers sur impots.gouv.fr a disparu ........na pus d'avis d'imposition ;D ;D plus aucun document

Message d'indisponibilité
La page est momentanément indisponible.

Nous vous invitons à renouveler votre demande ultérieurement.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 10:10:36
Quand il fait 40°c à l'extérieur, l'air froid injecté dans le bâtiment est à 40°c et le freecooling des CPU monte en température.

Ce n'est pas du watercooling partout chez OVH maintenant ? Le Freecooling n'étant utilisé que pour les DDs et le reste de la carte mère ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 10:11:52
J'ai corrigé, c'est les deux :
- watercooling pour le CPU et GPU
- freecooling pour les autres composants (l’alimentation électrique, les disques, le chipset et la ram dégagent aussi de la chaleur)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Eddy123 le 11 mars 2021 à 10:13:47
En effet, je n'ai plus mes documents d'impôts...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 11 mars 2021 à 10:15:42
Je c pas si c'est lier mais toute les documents des particuliers sur impots.gouv.fr a disparu ........na pus d'avis d'imposition ;D ;D plus aucun document

Message d'indisponibilité
La page est momentanément indisponible.

Nous vous invitons à renouveler votre demande ultérieurement.

dans l'article sur https://www.europe1.fr/economie/info-e1-incendie-chez-ovh-la-frayeur-de-lexecutif-pour-la-vaccination-contre-le-covid-4030578 ils précisent que certains services d'états sont toujours impactés, mais que l'ensemble des données sont en backup dans d'autres datacenter si jamais ca ne peut repartir depuis ovh..
donc si jamais c'est le cas présent est lié à OVH, ca devrait revenir le temps de remonter les secours ^^ (et plus ou moins rapidement suivant si c'est considéré prioritaire ou non)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Jiajo le 11 mars 2021 à 10:23:27
dans l'article sur https://www.europe1.fr/economie/info-e1-incendie-chez-ovh-la-frayeur-de-lexecutif-pour-la-vaccination-contre-le-covid-4030578 ils précisent que certains services d'états sont toujours impactés, mais que l'ensemble des données sont en backup dans d'autres datacenter si jamais ca ne peut repartir depuis ovh..
donc si jamais c'est le cas présent est lié à OVH, ca devrait revenir le temps de remonter les secours ^^ (et plus ou moins rapidement suivant si c'est considéré prioritaire ou non)

Je vient d'appeller mon centre car j'avais besoin de ma declaration et ils ont bien en interne les documents (il me l'on envoyé par mail), le monsieur que j'ai eu au tel m'a dit qu'il y avait bien un probleme :-X sans me dire que c'etait du au datacenter d'OVH
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 10:30:23
C'est possible qu'un qui fait le lien entre les documents et ton compte se trouve chez OVH SBG.
Après si leur serveur est dans SBG4 ou SBG3 qui normalement sont en bonne santé, reste à voir si ça vaut le coup de remonter une sauvegarde ailleurs ou attendre 5 à 10 jours la relance. (je parle de manière globale pour tous les services concernés, pas forcément du site des impôts qui je l'estime devrait être remis up avant..).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kedare le 11 mars 2021 à 10:37:53
il ya des dispositif conçu pour, on appelle sa des "boite noir" particulierement utiliser dans les avions  ;)
(https://upload.wikimedia.org/wikipedia/commons/thumb/e/ec/Cvr_sidefront_large.jpg/220px-Cvr_sidefront_large.jpg)

Ou si non on peut juste faire des backups ou de la réplication, ca coute surement moins cher :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 11 mars 2021 à 10:47:32
C'est n'est pas adiabatique.

C'est juste refroidit par l'air extérieur directement + refroidissement à eau des CPU, là aussi via une sorte de frreecooling géant.

Quand il fait 40°c à l'extérieur, l'air froid injecté dans le bâtiment est à 40°c et le watercooling des CPU monte en température.

C'est encore pire alors, pourquoi ne même pas avoir un système adiabatique pour refroidir l'eau ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Lucien le 11 mars 2021 à 10:53:03
En effet, je n'ai plus mes documents d'impôts...
Si mon compte pouvait ne plus réapparaitre  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 11 mars 2021 à 10:54:53
Ou si non on peut juste faire des backups ou de la réplication, ca coute surement moins cher :)
surtout que le principe de la boite noir, c'est déjà de faire de la réplication (2 par avion a 2 endroits différents) et vu que ca ne peut pas etre autre part que dans l'avion, le backup est durcit pour résister aux accidents...
donc dans le cas d'un site web&co, l'équivalent de la boite noir c'est justement de dupliquer, et de le mettre dans un deuxieme endroit, et donc de ne pas se faire chier a le durcir vu qu'on peut facilement l'envoyer a plusieurs dizaines/centaines de km...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 10:55:27
C'est encore pire alors, pourquoi ne même pas avoir un système adiabatique pour refroidir l'eau ?
Au contraire, la stratégie de water cooling d'OVH est globalement très bonne sur le papier (la réalisation matérielle est plus discutable).
D'un point de vue rendement et PUE, c'est une solution géniale.
L'eau d'un water cooling n'a pas besoin d'être à des températures basses, pour que ça soit efficace.
Tu peux très bien refroidir des grosse quantités de puissance avec le water-cooling avec une eau en entrée de serveur à 40°C et en sortie à 50°C par exemple. Il est probable qu'on puisse monter encore plus haut.
Et dans ce cas, pas besoin de refroidissement adiabatique, ni de clim.

Bref, avec un watercooling, on se contente d'une température d'eau plus chaude que la température de l'air nécessaire pour refroidir en air cooling.
Et c'est encore plus flagrant si on compare avec du refroidissement par clim, où il faut un circuit d'eau glacée à 10°C ou moins...

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 11 mars 2021 à 10:57:22
une autre victime collatéral d'ovh je pense... le site et l'appli pour gérer mon poele a granulé a distance ne répond plus depuis l'incendie ^^
https://mcz.efesto.web2app.it/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 11:47:11
effectivement, ip chez OVH https://toolbox.googleapps.com/apps/dig/#A/mcz.efesto.web2app.it +  le même traceroute (que pour un serveur au travail qui est à SBG 4) et qui s’arrête en bordure d'OVH me concernant.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: aplufr le 11 mars 2021 à 12:00:37
surtout que le principe de la boite noir, c'est déjà de faire de la réplication (2 par avion a 2 endroits différents) et vu que ca ne peut pas etre autre part que dans l'avion, le backup est durcit pour résister aux accidents...
donc dans le cas d'un site web&co, l'équivalent de la boite noir c'est justement de dupliquer, et de le mettre dans un deuxieme endroit, et donc de ne pas se faire chier a le durcir vu qu'on peut facilement l'envoyer a plusieurs dizaines/centaines de km...
Euh non, il y’a bien 2 boites noires dans un avion mais l’une contient uniquement les données de vol (les infos des capteurs), l’autre l'audio des différents micro cockpit, pilote, etc.
Et elles sont toutes à l'arrière de l'avion, parce qu’en général un avion tombe plus souvent avec le nez en premier que la queue.
Par contre oui, y'a quelques protections pour résister à des chocs, incendie, immersion …
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: q05 le 11 mars 2021 à 12:03:47
il ya des dispositif conçu pour, on appelle sa des "boite noir" particulierement utiliser dans les avions  ;)
(https://upload.wikimedia.org/wikipedia/commons/thumb/e/ec/Cvr_sidefront_large.jpg/220px-Cvr_sidefront_large.jpg)
Les données sont de plus en plus transmises en direct au centre de supervision.

https://www.wsj.com/articles/new-black-boxes-offer-ability-to-send-real-time-data-from-plane-crashes-11549535520
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 11 mars 2021 à 12:20:07
Euh non, il y’a bien 2 boites noires dans un avion mais l’une contient uniquement les données de vol (les infos des capteurs), l’autre l'audio des différents micro cockpit, pilote, etc.
Et elles sont toutes à l'arrière de l'avion, parce qu’en général un avion tombe plus souvent avec le nez en premier que la queue.
Par contre oui, y'a quelques protections pour résister à des chocs, incendie, immersion …
sur les avions récents les boites noires contiennent toute les deux les données de vols + audio, au vu de l'amélioration du stockage, et des crashs ou l'une ou l'autre des boites noires est illisible ou perdu...

Les données sont de plus en plus transmises en direct au centre de supervision.

https://www.wsj.com/articles/new-black-boxes-offer-ability-to-send-real-time-data-from-plane-crashes-11549535520

toutes les données ne sont pas transmises, ca coute trop cher et pas assez de bande passante dispo... ca changera peut etre avec les constellations comme starlink&co qui auront une couverture globaln une vitesse en hausse, et un prix du mo transmis en chute libre..

fin de la parenthèse boite noire, c'est pas la place pour, mais plutot dans un sujet aero ^^
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: lechuck le 11 mars 2021 à 12:20:54
OVH

Très régulièrement il y a des incidents majeurs avec OVH. Et il leur faut toujours 3 plombes pour remettre en route.
Evidemment les pauvres toujours "indépendants de leur volonté"... force majeure qu'ils disent...

Le pire gros hébergeur mondial. C'est du low cost, du datacenter fait avec des bouts de ficelle. Où est le plan de continuité de service ? Manifestement rien de rétabli avant le 15 mars !

j'ai des très gros clients américains. C'est AWS sinon rien. Faut même pas commencer à leur évoquer OVH tellement c'est pitoyable et honteux.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Mathias Basire le 11 mars 2021 à 12:44:00
OVH

Très régulièrement il y a des incidents majeurs avec OVH. Et il leur faut toujours 3 plombes pour remettre en route.
Evidemment les pauvres toujours "indépendants de leur volonté"... force majeure qu'ils disent...

Le pire gros hébergeur mondial. C'est du low cost, du datacenter fait avec des bouts de ficelle. Où est le plan de continuité de service ? Manifestement rien de rétabli avant le 15 mars !

j'ai des très gros clients américains. C'est AWS sinon rien. Faut même pas commencer à leur évoquer OVH tellement c'est pitoyable et honteux.

Alors un PRA s'est à toi d'en établir un pour ton entreprise ou réseaux ...

Je suis aussi d'accord avec le fait qu'il y est régulièrement des incidents majeurs type OVHGate et tu viens de le dire c'est du lowcost, chez ovh tu payes ta machine moins de 100€ ^^ (en général).
Après l'incident majeur clairement OUI, ils ont perdu un DC complets littéralement ...

et je te rappelle qu'AWS est pas tout claire non plus on se rappelle du 26 novembre 2020 ^^

Et tous les "gros" hébergeur ont des soucis dans le style même si normalement ce n'est pas censé arriver, et encore moins un incendie, et pour le PRA du côté d'OVH , oublie pas que la ils ont les autorités des assurances et tout le reste qui enquête donc c'est un peu compliqué en prenant en compte qu'une partie de SBG1 est touché ^^
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 13:00:35

Le pire gros hébergeur mondial. C'est du low cost, du datacenter fait avec des bouts de ficelle. Où est le plan de continuité de service ? Manifestement rien de rétabli avant le 15 mars !
Certes on a vu que la protection incendie n'était pas leur fort et il risque de le payer niveau réputation, mais après tous les "gros sites" sont rapidement repartis.. Backup distant, VM remise sur d'autres host et etc ... (cf le post de nperf ici https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847954/#msg847954 )
De toute façon ce qui a cramé, beh c'est "à oublier" .. et les sysadmin qui n'avaient pas de backup pleure aujourd'hui .. (mais la sentence aurait été la même si leur disque dur avait claqué)
Et vu le nombre de DC qu'a OVH, c'est pas dur de foutre son serveur avec les backups ailleurs qu'au même endroit.. (et il n'y a pas qu'OVH dans la vie, tu as plein d'autres hébergeurs en europe pour poser tes backups)
J'arrivais à le faire quand je gérais des serveurs associatifs alors ... (2 serveurs chez OVH/SoYouStart - RBX et SBG ou GRA je ne sais plus qui hébergeaient les VMs et sur lesquels chaque nuit étaient copiés les snapshot des VMs des 2 serveurs) + un serveur de backup chez un autre hébergeur (online ou firstheberg ou feu digicube, mais c'était vraiment un ultime serveur uniquement pour les backups).
La charge de chaque serveur de VMs étaient entre 30 et 60 % selon les moments que la journée, donc même à titre associatif, j'aurai pu repartir relativement facilement. (juste les changements de DNS ou bascule du bloc IPFO à prévoir)

mais le PRA c'est au sysadmin de l'avoir .. là c'est un incendie avec ce que l'on pourra dire sur la sécurité incendie chez OVH mais on a jamais à l'abri d'un crash d'avion, d'un gros tremblement de terre qui ferait tomber le DC et etc ..

C'est vrai après qu'ils auraient pu mieux prévoir et permettre de relancer SBG4 "avant le 15" et SBG 3 peut être un peu plus tôt aussi si il était possible d'avoir des arrivées électriques qui ne passent pas à proximité immédiate de SBG2... Mais bon ..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 11 mars 2021 à 13:14:43
OVH

Très régulièrement il y a des incidents majeurs avec OVH. Et il leur faut toujours 3 plombes pour remettre en route.
Evidemment les pauvres toujours "indépendants de leur volonté"... force majeure qu'ils disent...

Le pire gros hébergeur mondial. C'est du low cost, du datacenter fait avec des bouts de ficelle. Où est le plan de continuité de service ? Manifestement rien de rétabli avant le 15 mars !

j'ai des très gros clients américains. C'est AWS sinon rien. Faut même pas commencer à leur évoquer OVH tellement c'est pitoyable et honteux.

Le problème c'est qu'ici les boites d'IT ne réfléchissent pas comme ça.
On vends un service à 1000€ au client en lui donnant toutes les garanties qu'il a envie d'entendre.
Derrière ça t'as le prestataire qui prends un serveur ovh à 70€ et y ajoute sa solution logicielle, son support, etc, au lieu de prendre un serveur de qualité dans un DC comme Equinix, Telehouse,  Interxion qui coute le double.
Tout va bien jusque quand ça pête, et puis on invoque la force majeure...
Je crois surtout que nombre de prestataires IT vont mettre la clé sous la porte dans les jours qui viennent si ils ont pas de plan B, ou perdu tout...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 13:18:21
Si je prends le cas de "J'alerte l'Arcep", il y a une prod et une pre-prod, mais les deux étaient à Strabourg.

Je pense que cela arrive à d'autres.

Le service va être relancé avec les sauvegardes sur un autre site OVH.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Douks le 11 mars 2021 à 14:04:35
Dans la catégorie des impactés, je demande une place sur le podium pour :

Citer
Jusqu’à nouvel ordre, il n’est plus possible d’acheter des titres de transport pour monter dans un bus du réseau Tac.

L’incendie, qui a touché l’entreprise OHV Cloud à Strasbourg qui héberge les données informatiques et de billétiques du réseau TAC, empêche la vente des titres de transport.
Les usagers peuvent donc monter dans les bus gratuitement jusqu’à ce que tout rentre dans l’ordre dans quelques jours, peut-être en début de semaine prochaine.

(TAC est le réseau de TC de la ville de Charleville-Mézières)

Source (https://www.lunion.fr/id239781/article/2021-03-11/les-bus-du-reseau-tac-de-charleville-sedan-gratuits-jusqua-nouvel-ordre?from_direct=true)

Dans un autre article, on peut y lire :
Citer
De son côté, OVHCloud a annoncé que tout devrait rentrer dans l’ordre d’ici au 15 mars.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 11 mars 2021 à 14:14:24
Le grand public lit ''Tout va rentrer dans l'ordre le 15 mars" et se dit super je vais récupérer mes données et tout refonctionnera comme avant

Sauf que OVH va juste mettre à disposition de matériel équivalent, ce qui n'est pas du tout la meme chose...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Lucien le 11 mars 2021 à 14:23:08
Bon ben zut, le site impots.gouv.fr a retrouvé ses données  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: netswitch le 11 mars 2021 à 14:32:36
Je trouve que la majorité des gens sont quand même incroyablement cléments avec eux sur le coup du :
"ha bha oui, les serveurs ont cramé mais bon, c'est aux gens d'avoir des backups"

Alors oui clairement, il faut des backups mais sur le coup du "le datacenter était construit en allumettes et sans protection incendie" ils sont clairement en tort.
Ils ont tiré les coûts vers le bas jusqu'au niveau où c'est intenable, ce qui s'est passé à Strasbourg pourrait manifestement se produire sur leurs autres sites vu que tout est dans le même moule et personne n'a l'air de s'en tracasser et eux n'ont pas l'air de communiquer là dessus non plus.

Si on compare avec des vrais datacenters (Equinix, Interxion, ...) ou même avec le DC Scaleway présenté ici, on est quand même dans des mondes différents au niveau infrastructure préventives pour assurer la sécurité des données.

Je comprends pas qu'avec des datacenters "en bois" ils aient une certification ISO27001, ça décrédibilise complètement la norme.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: eahlys le 11 mars 2021 à 14:41:12
J'ose pas imaginer les dégâts si cette conception de DC était appliquée dans des Telehouse, Interxion, etc. Tous les accès à internet français par terre.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Douks le 11 mars 2021 à 14:41:51
Le grand public lit ''Tout va rentrer dans l'ordre le 15 mars" et se dit super je vais récupérer mes données et tout refonctionnera comme avant

Sauf que OVH va juste mettre à disposition de matériel équivalent, ce qui n'est pas du tout la meme chose...
Potentiellement il y à aussi ceux qui sont dans la zone non touchée ou "peu" touchée qui sont simplement coupés à cause de la coupure de courant
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quentin96 le 11 mars 2021 à 14:52:59
Salut à tous,

Comme le disent d'autres personnes ici, meme si quelque chose n'a pas fonctionné chez OVH d'un point de vu de la protection incendie, l'indisponibilité des services de beaucoup de boite n'a rien a voir avec OVH.

Ce que beaucoup d'entreprises ont tendance à oublier, c'est que leur service/data a un prix. Et le montant de la solution mise en oeuvre est proportionnel au montant de ces data/service.

C'est ce point qui est souvent mal expliqué aux finances et donne lieu a des services concidéré comme critique se retrouve avec aussi peu de protection par manque de moyen. 

Force aux personnes en première ligne qui doivent subir des decisions stupide de leur hiérarchie.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 11 mars 2021 à 14:58:29
Beaucoup de décideurs n'y connaissent pas grande chose

Donc quand tu as le choix entre un devis à X € pour de l'hebergement en France et 2 X € pour de l'hebergement en France, tu te dis que les normes sont les memes, que le moins disant est leader et donc qu'il doit savoir ce qu''il fait...

Du coup tu signes en pensant avoir fait une bonne affaire...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 11 mars 2021 à 15:01:47
Elle est pas mal celle là ;D

ou feu digicube

Au moins leur DC bouts de ficelles n'a pas entièrement cramé lui  ::)

Digicube 1 > OVH 0
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quentin96 le 11 mars 2021 à 15:13:46
Beaucoup de décideurs n'y connaissent pas grande chose

Donc quand tu as le choix entre un devis à X € pour de l'hebergement en France et 2 X € pour de l'hebergement en France, tu te dis que les normes sont les memes, que le moins disant est leader et donc qu'il doit savoir ce qu''il fait...

Du coup tu signes en pensant avoir fait une bonne affaire...

C'est justement ce que j'essaie de te faire comprendre !

On a rien sans rien. Un ecart de prix est toujours justifié par quelque chose, que ce soit de la malhonneté ou non. Les décideur, justement, n'ont qu'a écouter l'avis des experts qu'ils ont a disposition. S'ils ne le font pas, a eux d'assumer leur mauvais choix. Ils ne peuvent s'en prendre qu'a eux même.

Encore une fois, OVH a eu une defaillance, mais l'impact sur le service, c'est a 100%  la faute de l'entreprise, pas OVH. Surtout si OVH met a disposition suffisement de machines pour combler la destructions dans SBG. C'est pas de la faute de OVH si un DRP n'était pas en place ;)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 15:24:32
Je trouve que la majorité des gens sont quand même incroyablement cléments avec eux sur le coup du :
"ha bha oui, les serveurs ont cramé mais bon, c'est aux gens d'avoir des backups"
[...] ou même avec le DC Scaleway présenté ici, on est quand même dans des mondes différents au niveau infrastructure préventives pour assurer la sécurité des données.


Beh quand tu loues un serveur dédies (et pas des VMs managées) oui c'est à toi de gérer tes backups. que ce soit pour une panne de disque dur ou pour un incendie.

Après si tu as l'option Advanced que tu payes tous les mois et qui prévoit une sauvegarder hors site ( https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/veeam-backup-managed/ Advanced ) alors là oui, OVH doit te "remonter" ta VM puisque tu payes pour une solution de backup auto.

ou
https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/zerto/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: netswitch le 11 mars 2021 à 15:40:29
Comme je l'ai écrit, je suis d'accord  : il faut des backups.

Mais sur la partie "on a construit nos datacenters en bois sans vrai système anti incendie", je suis désolé il y a tromperie, ils vendent des serveurs hébergés en datacenters, pas dans une caravanne au bord de l'eau...

Mais bon, soit, ces 2 dernires posts (buddy et quentin96) rentrent effectivement dans le comportement de clémence que je dis que je ne comprends pas :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: seb30 le 11 mars 2021 à 15:45:21
Beaucoup de décideurs n'y connaissent pas grande chose

Donc quand tu as le choix entre un devis à X € pour de l'hebergement en France et 2 X € pour de l'hebergement en France, tu te dis que les normes sont les memes, que le moins disant est leader et donc qu'il doit savoir ce qu''il fait...

Du coup tu signes en pensant avoir fait une bonne affaire...

Moins mauvais choix : (X+2X)/2=1.5X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hiroko le 11 mars 2021 à 15:48:41
C'est justement ce que j'essaie de te faire comprendre !

On a rien sans rien. Un ecart de prix est toujours justifié par quelque chose, que ce soit de la malhonneté ou non. Les décideur, justement, n'ont qu'a écouter l'avis des experts qu'ils ont a disposition. S'ils ne le font pas, a eux d'assumer leur mauvais choix. Ils ne peuvent s'en prendre qu'a eux même.

Encore une fois, OVH a eu une defaillance, mais l'impact sur le service, c'est a 100%  la faute de l'entreprise, pas OVH. Surtout si OVH met a disposition suffisement de machines pour combler la destructions dans SBG. C'est pas de la faute de OVH si un DRP n'était pas en place ;)

Il ne s'agit pas d'une défaillance mais de la disparition d'un bâtiment en quelques heures   ::)
Chez moi les décideurs n'avaient pas forcement saisi l'ampleur de l'insuffisance des moyens de protections... il y a un post de 3 pages seulement qui date de 2013 , c'est un peu léger quand vient l'heure des choix en 2021.
De fait la question n'est plus de savoir si on quitte OVH ou pas ( même si nous avions des backup hors site)  , mais plutôt de savoir ou aller ....
OVH indique sur son site : "Every data center room is fitted with a fire detection and extinction system, as well as fire doors. OVHcloud complies with the APSAD R4 rule for the installation of mobile and portable fire extinguishers and has the N4 certificate of conformity for all our data centers." mainteant qu on a compris qu'une certif N4 ne protège pas d'un incendie majeur , nous ne savons même pas quoi exiger du nouveau prestataire  ::)
PS: bien sur que la qualité se paye , encore faut il avoir une juste idée du prix de la qualité , le plus cher n'étant pas forcement le plus qualitatif ( et ca ne vaut pas que pour l'IT)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 15:50:23
@netswitch : tu mets en avant le dernier DC de Scaleway, mais tu verras que comme OVH, il n'y a rien pour combattre massivement un feu .. Ni gaz ni aspersion d'eau automatique.
Certes il y a de la détection, mais comme j'ai dit que l'autre sujet entre un alim de serveur qui fume et l'arrivé électrique de la salle qui a un faux contact/court circuit, on est pas dans le même "feu" à combattre ...

Si tu as un soucis sur l'arrivée électrique de la salle à mon avis tu peux avoir autant de système de détection que tu veux pour envoyer un pompier avec des extincteurs, ça ne sert à rien car en quelques secondes c'est déjà trop tard.

Scaleway (pour son dernier DC) et OVH ne se cachent pas que dans leur DC c'est l'humain qui lutte contre le feu.
Ce n'est pas le plancher en bois qui est responsable du feu.. Quand tu mets de telle puissance électrique avec des composants informatiques, ça brule et ça dégage une quantité de chaleur énorme. Je doute par exemple que tous les câbles électriques soit ignifugées. Idem pour les câbles réseaux .. donc le plancher y a peut être un peu contribué (et encore le bois était peut être traité) mais dans tous les cas, le béton aurait explosé et çà n'aurait pas empêche le reste du bâtiment de bruler ...

Après, je ne dis pas que c'est normal de perdre un bâtiment clairement les planchers n'était pas coupe feu et peut être qu'il faut revoir les procédures avec un arrêt d'urgence du bâtiment complet en cas d'incendie, mais dans tous les cas, il faut avoir envisager la perte du serveur ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: aplufr le 11 mars 2021 à 16:01:12
Sinon Octave a posté quelques infos :
(https://www.aplu.fr/AZqhaWeOBT/ovh.com_2021-03-11T16:00+01:00.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 16:01:57
@netswitch : tu mets en avant le dernier DC de Scaleway, mais tu verras que comme OVH, il n'y a rien pour combattre massivement un feu .. Ni gaz ni aspersion d'eau automatique.
Certes il y a de la détection, mais comme j'ai dit que l'autre sujet entre un alim de serveur qui fume et l'arrivé électrique de la salle qui a un faux contact/court circuit, on est pas dans le même "feu" à combattre ...
Le sujet en question : Est-ce qu'on sait si Online-Scaleway DC5 a un moyen quelconque de lutte active contre les incendies? (https://lafibre.info/scaleway/dc5/msg847949/#msg847949)

Je propose de faire les interventions sur la lutte incendie de DC5 soient dans le sujet DC5.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 16:29:41
Point actualisé d'OVH sur l'Incendie de Strasbourg :
(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)

Le bulletin précédent :
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

OVH a envoyé a ses clients la liste des serveurs qui ont définitivement brûlés.

J'ai eu un client OVH qui avait demandé "Une double infrastructure Votre infrastructure privée se compose de deux serveurs physiques distincts, situés dans deux baies informatiques différentes." comme décrit ci-dessous.

La double infrastructure était bien dans deux salles différentes, mais toutes les deux sur SBG2.


(https://lafibre.info/images/ovh/202103_ovh_datastore_nfs.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 11 mars 2021 à 16:46:40
La double infrastructure était bien dans deux salles différentes, mais toutes les deux sur SBG2.[/size]

dommage...
va falloir changer le produit... "les 2 infras doivent etre dans 2 villes différentes"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 11 mars 2021 à 16:59:10
OVH a envoyé a ses clients la liste des serveurs qui ont définitivement brulé.

J'ai eu un client OVH qui avait demandé "Une double infrastructure Votre infrastructure privée se compose de deux serveurs physiques distincts, situés dans deux baies informatiques différentes." comme décrit ci-dessous.

La double infrastructure était bien dans deux salles différentes, mais toutes les deux sur SBG2.


(https://lafibre.info/images/ovh/202103_ovh_datastore_nfs.png)
c'est moche  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: iPhil64 le 11 mars 2021 à 17:02:17
Je suis assez déconcerté par pas mal de réactions, il y a énormément de trolls, et c'est la faute d'OVH, puisqu'on n'a pas les infos.

Je ne peux pas croire une seule seconde qu'il n'y ait aucune sécurité incendie dans un bâtiment industriel de ce type, ne serait-ce que de la détection, ça me semble juste impossible, d'autant que oui, ils ont des certifications, et donc des contrôles.

Sur le sujet des backups.

OVH vend son service à des professionnels, et il est de leur responsabilité de s'assurer que les backups correspondent à leur besoin. Sur site, hors site, peu importe, c'est le choix du client, et OVH permet d'accéder à tous les outils qu'il faut. Ce n'est pas parce que X ou Y est incompétent ou s'est fait enfumer par un prestataire qui n'a pas regardé comment les backups se faisaient que c'est la faute d'OVH.

Les règles en matière de sauvegardes sont les mêmes depuis toujours, Cloud ou pas. Il faut savoir où elles sont faites, un point c'est tout. Et s'assurer qu'elles protègent de tous les risques dont on veut se protéger. Si vous savez que c'est dans le même DC, vous courrez le risque que la destruction du DC entraine la perte de vos données. Ca aurait pu être un tremblement de terre, on en a eu quelques uns ces derniers mois, dont l'épicentre était à moins de 3 km du DC d'OVH.... Vous avez des protections anti-tremblement de terre majeur ?

A contrario, nombreux sont ceux qui sont contents d'avoir déjà redémarré sur Roubaix ou Gravelines grâce à leurs sauvegardes bien gérées entre site.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 17:13:29
OVH a envoyé a ses clients la liste des serveurs qui ont définitivement brulé.

J'ai eu un client OVH qui avait demandé "Une double infrastructure Votre infrastructure privée se compose de deux serveurs physiques distincts, situés dans deux baies informatiques différentes." comme décrit ci-dessous.

La double infrastructure était bien dans deux salles différentes, mais toutes les deux sur SBG2.

là on frise quand même le très très très limite .. ça n'aurait pas coûté grand chose à OVH de les mettre à minima dans SBG2 et SBG4 (2 bâtiments distincts à minima). et pas à porté de flamme comme SBG1 et SBG2 .. 
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Symbol le 11 mars 2021 à 17:18:03
Tu as vu les photos? Le métal du bâtiment a du fondu! donc ils ont atteint des températures très très élevées.
L'état des serveurs doit être à l'image de l'état du bâtiment : totalement irrécupérable, un enchevêtrement de tôles. C'est évident.
Impossible de retrouver, d'identifier un disque dur, et encore moins de le récupérer. Tout est détruit.
C'est clair.
(https://i.gifer.com/4v0.gif)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 17:23:57
Il y a des news
Citer
Sur le site de Strasbourg :

    Diagnostic et inventaire en cours aujourd'hui .
    Nettoyage et réparation des bâtiments endommagés en cours pour garantir un environnement de sécurité pour nos équipes.
    Le nettoyage de la mousse et l'aspiration de l'eau dans la rue sont faits. L'aspiration du réservoir d'eau est prévue aujourd'hui.
    SBG2 doit être presque entièrement reconstruit.
    SBG1 a été lourdement endommagé.
        Salle de réseau SBG1 - Salle conservée à la suite de la vérification préliminaire ETA : début de la semaine prochaine.
        ETA provisoire pour électrique : lundi 15 mars.
        Les jours suivants, les serveurs seront activés pièce par pièce après audit.
    Pour SBG4 : les vérifications préliminaires et ne révèlent aucun problème. L'objectif est maintenant de rétablir l’électricité en semaine 12 et de rétablir progressivement tous les services.
    SBG3 non touché par l'incendie. L’objectif est de rétablir le courant et le réseau semaine 12 et de restaurer progressivement tous les services.
source : https://www.ovh.com/fr/news/presse/cpl1785.incendie-notre-site-strasbourg

Semaine 12 ?? C'est bien la semaine du 22 Mars ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: FloBaoti le 11 mars 2021 à 17:27:59
Vidéo d'Octave :

https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg.mp4

A cet instant il pense que l'incendie a démarré simultanément sur 2 onduleurs différents qui ont subits une maintenance le jour-même...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 11 mars 2021 à 17:36:29
le micro il a brulé aussi ? un son plus pourri est possible ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: FloBaoti le 11 mars 2021 à 17:40:07
Y'avais plus le budget il doit payer tout le monde 24h/24 7j/7 maintenant pour nettoyer...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 17:41:07
On apprend que l'origine de l'incendie pourrait avoir démarrer à 0h47min venir d'un onduleur PS7 qui a eu une maintenance le matin du drame avec de nombreuses pièces changées (en tout cas c'est une piste évoquée).

Deux personnes OVH + des gardiens étaient sur place et n'ont pas pu intervenir car la fumée était trop épaisse.

Ils ont 300 de caméras de vidéosurveillance à Strasbourg, les images seraient exploitables, on devrait en savoir plus dans quelques jours.

Les serveurs non affectés vont pouvoir redémarrer progressivement à partir de la semaine prochaine.

SBG2 date de 2011. 5 autres datacenter sont sur le même principe d'une tour auto-ventilée (exemple: Roubaix 4)

10 000 serveurs à Roubaix et à Gravelines vont être livrés. La production de serveurs neufs va tripler en passant à 2500 / 3000 serveurs par semaine.


https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: lechuck le 11 mars 2021 à 17:41:33
Je suis assez déconcerté par pas mal de réactions, il y a énormément de trolls, et c'est la faute d'OVH, puisqu'on n'a pas les infos.

Je ne peux pas croire une seule seconde qu'il n'y ait aucune sécurité incendie dans un bâtiment industriel de ce type, ne serait-ce que de la détection, ça me semble juste impossible, d'autant que oui, ils ont des certifications, et donc des contrôles.

Sur le sujet des backups.

OVH vend son service à des professionnels, et il est de leur responsabilité de s'assurer que les backups correspondent à leur besoin. Sur site, hors site, peu importe, c'est le choix du client, et OVH permet d'accéder à tous les outils qu'il faut. Ce n'est pas parce que X ou Y est incompétent ou s'est fait enfumer par un prestataire qui n'a pas regardé comment les backups se faisaient que c'est la faute d'OVH.

Les règles en matière de sauvegardes sont les mêmes depuis toujours, Cloud ou pas. Il faut savoir où elles sont faites, un point c'est tout. Et s'assurer qu'elles protègent de tous les risques dont on veut se protéger. Si vous savez que c'est dans le même DC, vous courrez le risque que la destruction du DC entraine la perte de vos données. Ca aurait pu être un tremblement de terre, on en a eu quelques uns ces derniers mois, dont l'épicentre était à moins de 3 km du DC d'OVH.... Vous avez des protections anti-tremblement de terre majeur ?

A contrario, nombreux sont ceux qui sont contents d'avoir déjà redémarré sur Roubaix ou Gravelines grâce à leurs sauvegardes bien gérées entre site.

Désolé mais c'est pas clair. Quand tu regardes la propagande commerciale d'OVH, ca parle de double infrastructure, sans préciser que les serveurs sont séparés en réalité que par quelques mètres. Idem ils vantent le backup et snapshot automatique, mais où sont sauvegardées les données ? On sait juste que ce sont sur "des supports externes à votre infrastructure".

Perso, je sais bien que quand c'est flou il y a un loup, mais c'est peut être pas évident pour tout le monde.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: lechuck le 11 mars 2021 à 17:42:18
Ils ont des centaines de caméra de vidéosurveillance, les images seraient exploitables, on devrait en savoir plus dans quelques jours.

Les vidéos sont stockées sur une machine de SGB2 c'est ca ?  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: iPhil64 le 11 mars 2021 à 17:43:19
Désolé mais c'est pas clair. Quand tu regardes la propagande commerciale d'OVH, ca parle de double infrastructure, sans préciser que les serveurs sont séparés en réalité que par quelques mètres. Idem ils vantent le backup et snapshot automatique, mais où sont sauvegardées les données ? On sait juste que ce sont sur "des supports externes à votre infrastructure".

Perso, je sais bien que quand c'est flou il y a un loup, mais c'est peut être pas évident pour tout le monde.

Mais dans ce cas, tu as absolument le droit (et le devoir) de demander où c'est stocké.
Tu achètes tout sur des plaquettes commerciales sans poser de question ?

On parle d'informatique pour des pros.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kedare le 11 mars 2021 à 17:51:59
2 onduleurs qui prennent feu, après le passage d'un presta je suppose, 1 jour après l'annonce de l'IPO ?

Ca sent un peu le sabotage quand même.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: renaud07 le 11 mars 2021 à 17:54:38
le micro il a brulé aussi ? un son plus pourri est possible ?

Vu le son fluctuant et les nombreux artefacts on dirait un appel skype ou similaire.

En tout cas ça fait pas très sérieux non plus  :-\  Y'a des passages où on comprend absolument rien...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 11 mars 2021 à 17:55:10
là on frise quand même le très très très limite .. ça n'aurait pas coûté grand chose à OVH de les mettre à minima dans SBG2 et SBG4 (2 bâtiments distincts à minima). et pas à porté de flamme comme SBG1 et SBG2 ..

Pas d'accord.
Le but de ce type de baie de stockage est d'être résistante à une panne localisée (soit la perte du matos / soit un soucis élec et clim dans une salle)
pas de résister à la destruction d'un bâtiment/site.

SBG3 aurait très bien pu prendre feu aussi
et SBG4 est vraiment beaucoup plus petit que SBG2

et au final ça ne changerait rien à l'incident à l'instant T
pas d'élec sur site donc même si la baie de sto était sur SBG2 et SBG4 tout pareil : pas de data avant plusieurs jours


Si tu veux une vrai sécu tu prend du stockage sur 2 sites différents.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 11 mars 2021 à 18:00:47
Il y a des news source : https://www.ovh.com/fr/news/presse/cpl1785.incendie-notre-site-strasbourg

Semaine 12 ?? C'est bien la semaine du 22 Mars ?
oui c'est ça, nous avons un mail de notre prestataire qui nous dit 19mars ils sont un peu trop avancé apparemment ils attendent qu'ils redémarrent les serveurs mais ils ont aussi des serveurs sur roubaix. Du coup monter des serveurs ailleurs en attendant ça serait plus judicieux au lieu d'attendre presque 15 jours, OVH veut démarrer les générateurs en attendant
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: lechuck le 11 mars 2021 à 18:01:12
Justement OVH c'est tout sauf pro

A fuir en courant

Malheureusement on utilise des outils (seulement de manière internes ouf) hébergés chez OVH, et en moyenne depuis 5 ans, une journée par an, on est en panne par la faute d'OVH.

Pour nos clients on fait tout héberger sur AWS. En comparaison les problèmes sont rarissimes (mais ca arrive tout de même), et surtout ca réagit et répare très très très vite. Après c'est pas la même philosophie non plus. AWS c'est pas du dédié, y'a pas de réelle notion de machine physique pour le client final, c'est amazon qui fait sa soupe avec ses ressources physiques pour offrir des ressources virtuelles "à très haute tolérance de panne".

OVH a mon sens est resté à l'âge de pierre en restant très "serveur physique-centric". C'est une offre beaucoup trop vulnérable aux coups du sort. En rajoutant à cela que les fallback contre les coups du sort ne fonctionnent jamais chez OVH (incendie ce coup ci et vous vous souvenez de la fois où les générateurs ont pas réussi à démarrer pour pallier une coupure de courant?)


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Raph06 le 11 mars 2021 à 18:03:13
Une autre victime, les obs' participatives de Météo-France :
https://twitter.com/meteofrance/status/1370054359736844289
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kedare le 11 mars 2021 à 18:07:44
Justement OVH c'est tout sauf pro

A fuir en courant

Malheureusement on utilise des outils (seulement de manière internes ouf) hébergés chez OVH, et en moyenne depuis 5 ans, une journée par an, on est en panne par la faute d'OVH.

Pour nos clients on fait tout héberger sur AWS. En comparaison les problèmes sont rarissimes (mais ca arrive tout de même), et surtout ca réagit et répare très très très vite. Après c'est pas la même philosophie non plus. AWS c'est pas du dédié, y'a pas de réelle notion de machine physique pour le client final, c'est amazon qui fait sa soupe avec ses ressources physiques pour offrir des ressources virtuelles "à très haute tolérance de panne".

OVH a mon sens est resté à l'âge de pierre en restant très "serveur physique-centric". C'est une offre beaucoup trop vulnérable aux coups du sort. En rajoutant à cela que les fallback contre les coups du sort ne fonctionnent jamais chez OVH (incendie ce coup ci et vous vous souvenez de la fois où les générateurs ont pas réussi à démarrer pour pallier une coupure de courant?)

AWS pousse à faire une bonne architecture avec leurs produits a base d'ASG, et indiquent bien qu'ils n'assurent aucune garantie de service sur les produits qui ne sont pas déployés sur plusieurs AZ, etc...
Rien ne t'empêche de faire la même chose sur de l'OVH ou n'importe ou ailleurs,
C'est juste la documentation n'est pas aussi bonne (typiquement AWS propose plein de formation la dessus) donc les personnes qui vont déployer leur infra sur AWS sont en général mieux formés, et les personnes ne veulent généralement pas dépenser autant sur de l'OVH, peut être a cause de l'image de low cost ? Pourtant tu te prend une platforme PCC avec VEEAM chez OVH tu as ton infra qui sera déployé sur plusieurs DC avec PRA (https://www.ovh.com/world/storage-solutions/veeam-enterprise.xml)
AWS accompagne beaucoup plus sur les bonnes pratiques, ou ça passe souvent par des prestataires certifiés.

(Pour le contexte j'ai bossé chez OVH et j'ai aussi une certif AWS architect)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 18:08:53
Pour nos clients on fait tout héberger sur AWS. En comparaison les problèmes sont rarissimes (mais ca arrive tout de même), et surtout ca réagit et répare très très très vite. Après c'est pas la même philosophie non plus. AWS c'est pas du dédié, y'a pas de réelle notion de machine physique pour le client final, c'est amazon qui fait sa soupe avec ses ressources physiques pour offrir des ressources virtuelles "à très haute tolérance de panne".

OVH a mon sens est resté à l'âge de pierre en restant très "serveur physique-centric". C'est une offre beaucoup trop vulnérable aux coups du sort. En rajoutant à cela que les fallback contre les coups du sort ne fonctionnent jamais chez OVH (incendie ce coup ci et vous vous souvenez de la fois où les générateurs ont pas réussi à démarrer pour pallier une coupure de courant?)
Pour le coup est ce que l'on a des retours sur ce qu'on donnait les VMs (haute disponibilité) de OVH ?
Celles qui étaient à Sbg combien a duré la coupure ? Toujours down ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 11 mars 2021 à 18:13:10
2 onduleurs qui prennent feu, après le passage d'un presta je suppose, 1 jour après l'annonce de l'IPO ?

Ca sent un peu le sabotage quand même.

Ca promet une belle bataille judiciaire
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 11 mars 2021 à 18:14:07
Mais dans ce cas, tu as absolument le droit (et le devoir) de demander où c'est stocké.
Tu achètes tout sur des plaquettes commerciales sans poser de question ?

On parle d'informatique pour des pros.

Vu le service client et technique OVH, ou il faut des heures pour avoir quelqu’un de compétents...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 11 mars 2021 à 18:17:49
Pour le coup est ce que l'on a des retours sur ce qu'on donnait les VMs (haute disponibilité) de OVH ?
Celles qui étaient à Sbg combien a duré la coupure ? Toujours down ?

Pour les VMs je ne sais pas
mais pour ce qui est des mails normalement tout est reparti.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 11 mars 2021 à 18:23:38
La France dans toute sa splendeur.

A quand la marche blanche pour SBG2 et les excuses de l'état pour ne pas avoir mis en place une réplication du site OVH Strasbourg sur 6 sites différents (à sa charge bien sûr) et protéger de manière divine le site contre le feu d'onduleur ?  ::)

Ailleurs, Octave serait déjà seul sur une scène face une assemblée d'élus pour répondre de ses actes de négligences et pas entrain de papoter sur Twitter ou faire une vidéo d'explication drama comme pour la télé réalité.

On voit le sérieux en même temps que l'humour de la boite en 1 image :

(https://i.imgaa.com/2021/03/11/604a4ef72b1ef037523385.jpg)

Apparemment, ça ne marche que pour les cookies  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 11 mars 2021 à 18:26:52
La triple réplication made in OVH qui fleure bon l'amateurisme.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kedare le 11 mars 2021 à 18:32:04
La triple réplication made in OVH qui fleure bon l'amateurisme.

Tu crois que la réplication des disques sur AWS va sur plusieurs DC ?
Non c’est pareil partout.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: jack le 11 mars 2021 à 18:32:50
Justement OVH c'est tout sauf pro

A fuir en courant

Malheureusement on utilise des outils (seulement de manière internes ouf) hébergés chez OVH, et en moyenne depuis 5 ans, une journée par an, on est en panne par la faute d'OVH.

Pour nos clients on fait tout héberger sur AWS. En comparaison les problèmes sont rarissimes (mais ca arrive tout de même), et surtout ca réagit et répare très très très vite. Après c'est pas la même philosophie non plus. AWS c'est pas du dédié, y'a pas de réelle notion de machine physique pour le client final, c'est amazon qui fait sa soupe avec ses ressources physiques pour offrir des ressources virtuelles "à très haute tolérance de panne".

OVH a mon sens est resté à l'âge de pierre en restant très "serveur physique-centric". C'est une offre beaucoup trop vulnérable aux coups du sort. En rajoutant à cela que les fallback contre les coups du sort ne fonctionnent jamais chez OVH (incendie ce coup ci et vous vous souvenez de la fois où les générateurs ont pas réussi à démarrer pour pallier une coupure de courant?)

Alors ..
En fait, non
L'hôte qui héberge ton EC2 meurt ? Tu perds la VM et son stockage

Les garanties OVH et AWS sont similaires, et c'est très commercial
Entre un serveur (VM ou physique) et un service, il faut mettre du travail. Tu peux prendre le risque de ne pas le faire, de t'en passer. Qui joue accepte de perdre, comme c'est le cas aujourd'hui :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 18:34:49
Si j'ai bien compris, les éléments de forte puissance électrique (transfo, TGBT, onduleurs) sont au rez-de chaussé du bâtiment.

Donc en cas d'incendie sur un équipement, cela peut rapidement se propager aux étages supérieurs qui hébergent les serveurs.

Je comprends que vu leur poids on mette ces équipements en bas (j'ai même vu des datacenter ou c'est en sous-sol), mais c'est vrai que si il n'y a pas un plancher résistant eu feu, c'est risqué...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quentin96 le 11 mars 2021 à 18:37:28
OVH vend son service à des professionnels, et il est de leur responsabilité de s'assurer que les backups correspondent à leur besoin. Sur site, hors site, peu importe, c'est le choix du client, et OVH permet d'accéder à tous les outils qu'il faut. Ce n'est pas parce que X ou Y est incompétent ou s'est fait enfumer par un prestataire qui n'a pas regardé comment les backups se faisaient que c'est la faute d'OVH.

Je ne peux qu'approuver !

Pour nos clients on fait tout héberger sur AWS. En comparaison les problèmes sont rarissimes (mais ca arrive tout de même), et surtout ca réagit et répare très très très vite. Après c'est pas la même philosophie non plus. AWS c'est pas du dédié, y'a pas de réelle notion de machine physique pour le client final, c'est amazon qui fait sa soupe avec ses ressources physiques pour offrir des ressources virtuelles "à très haute tolérance de panne".

Faux.
Comme le disent d'autre personne, AWS pousse a utiliser du multi-az au maximum, pour justement eviter ces cas.

Il est déjà arrivé qu'une region complete tombe chez AWS

La France dans toute sa splendeur.

Effectivement, a ne pas vouloir assumer ses erreurs et vouloir rejeter tout sur le presta, tout le temps, pour moins de 1€/mois, surtout !


Tu crois que la réplication des disques sur AWS va sur plusieurs DC ?
Non c’est pareil partout.

J'irai plus loin, un EBS dans AWS est lié a une AZ, et il est impossible de switcher l'AZ.

C'est different chez Google Cloud par exemple.


L'important n'est pas de savoir qui fait mieux ou pas, mais surtout de connaitre le produit avant de l'utiliser, Ca eviterai au gens de faire les choquer quand il se passe qqc.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 18:39:13
OVH indique sur son site : "Every data center room is fitted with a fire detection and extinction system, as well as fire doors. OVHcloud complies with the APSAD R4 rule for the installation of mobile and portable fire extinguishers and has the N4 certificate of conformity for all our data centers." mainteant qu on a compris qu'une certif N4 ne protège pas d'un incendie majeur , nous ne savons même pas quoi exiger du nouveau prestataire  ::)
Attention, c'est une citation qui vient du site US où effectivement, comme au Canada, OVH à un système de détection et d'extinction d'incendie équipés de sprinkler sur tous ses sites.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: VascoDaRoxor le 11 mars 2021 à 18:42:05
Salut à tous,

J'ai perdu mon VPN dans l'incendie, par chance, je n'avais aucune donnée sur le VPS, donc rien de grave, j'attends de voir ce qu'il en est, mais je pense switcher chez Leaseweb.

En tout cas ça me fait bien marrer cette histoire, même si c'est moche pour ceux qui ont perdu irrémédiablement toutes leurs données.
Malheureusement on sait comment ça fonctionne le business, et la backup reste souvent la dernière chose à mettre en place sur la liste.
C'est le moment de sortir la fameuse statistique des white paper des solutions constructeurs : 90% des société qui perdent leurs données font faillite dans l'année qui suit !

Quand je vois certaines photos des pompiers ça me fait penser à Tchernobyl !
En tout cas on rigolera encore plus quand AWS, Azur, ou GCP auront un blackout global !
N’oublions pas la loi de Murphy que je résume de la manière suivante : " tout ce qui peut arriver, arrivera ! "

Voici quelques photos que j'ai prises sur place :
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_apres_incendie_1.jpg)

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_apres_incendie_2.jpg)

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_apres_incendie_3.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 19:00:43
Je ne peux pas croire une seule seconde qu'il n'y ait aucune sécurité incendie dans un bâtiment industriel de ce type, ne serait-ce que de la détection, ça me semble juste impossible, d'autant que oui, ils ont des certifications, et donc des contrôles.
OVH a une sécurité incendie, oui. Avec des détecteurs de fumée, des extincteurs portables. Et certainement des lances à incendie haut débit. Tout ça c'est obligatoire. C'est évident.
Mais ces règles, c'est le minimum vital, qui est avant tout destiné à mettre les personnes en sécurité quelles que soient les conditions.

Mais c'est apparemment/évidemment très en dessous du standard qu'on mets habituellement dans un datacenter de cette taille. La très grande majorité des datacenter standard de cette taille (plusieurs milliers de baies) ont des moyens automatiques de lutte contre les incendies qui vont bien au delà de 1 extincteur tous les 10 mètres. Plus des cloisons et planchers résistant au feu, permettant de circonscrire le feu dans une zone restreinte, en attendant l'arrivée des pompiers (moyens lourds de lutte contre le feu).

Quand tu gères un bâtiment qui génère des dizaines de millions d'euros de chiffre d'affaire par an (je pense que c'est le bon ordre de grandeur pour SBG entier), qui contient du matériel informatique qui coute des dizaines de millions d'Euros, et qui peut te faire perdre beaucoup d'argent s'il s'arrête seulement quelques heures, alors je pense qu'il faut réfléchir à 2 fois avant de choisir le minimum vital/légal dans la protection incendie. De même, indépendamment du débat sur les sauvegardes, le bâtiment stocke des données d'une valeur inestimable pour beaucoup de clients si ces données ne sont pas récupérables.
C'est mon avis, tu as le droit de ne pas être d'accord.

Pour finir, oui, le concept d'Availability Zone, notamment pour les sauvegardes, n'est pas assez bien porté par nos cloud provider nationaux.
Nos cloud provider français doivent participer à l'éducation des clients sur le sujet.
OVH offre un service de sauvegardes, mais dans certains cas il n'est pas possible de savoir où cette sauvegarde est physiquement hébergée.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 11 mars 2021 à 19:04:59
Si c'est comme on l'entend un feu d'onduleur (et donc de batteries), tu m'étonnes qu'ils n'aient rien pu faire...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: disco67 le 11 mars 2021 à 19:08:13
Onduleurs .... Dans des batiments avec des serveurs (Surtout si Bat Li-Ion !) ... J'ai mal lu les news ou quoi ? Tous les Ing du monde savent que c'est very craignos. Les feux de batteries ne pardonnent pas, surtout le Li-Ion (Feu chimique inextinguible)

Mon ex Job (Suis retraité) Onduleurs => Batiments specifique Exterieur avec acces rapide pour les pompiers ... Ca a cramé une fois, pour de vrai :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 11 mars 2021 à 19:18:10
Si c'est comme on l'entend un feu d'onduleur (et donc de batteries), tu m'étonnes qu'ils n'aient rien pu faire...
Octave Klaba indique dans la vidéo que les premiers pompiers arrivés sur place ont vu deux onduleurs en feu par imagerie thermique, je ne suis pas sûr de comprendre s'ils étaient dans la même salle ou dans deux salles différentes. Il dit clairement que les alarmes se sont déclenchées à plusieurs endroits différents.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 11 mars 2021 à 19:23:16
Attention, c'est une citation qui vient du site US où effectivement, comme au Canada, OVH à un système de détection et d'extinction d'incendie équipés de sprinkler sur tous ses sites.
J'ai un prestataire qui utilise des serveurs sur RBX et SBG, dans son contrat il a mit exactement cette phrase mais en français. Il parle aussi de deux alimentations distinctes sur le datacenter alors que comme tu l'as dit plus haut pour SBG c'est 2*20KV qui viennent du même endroit
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 11 mars 2021 à 19:37:13
J'ai un prestataire qui utilise des serveurs sur RBX et SBG, dans son contrat il a mit exactement cette phrase mais en français. Il parle aussi de deux alimentations distinctes sur le datacenter alors que comme tu l'as dit plus haut pour SBG c'est 2*20KV qui viennent du même endroit
Le prestataire il dit ce qu'il veut ;)
En attendant, ce n'est pas écrit sur le site OVH France il me semble.

Il me semble que OVH avait réussi à faire séparer les lignes électriques non ?

Onduleurs .... Dans des batiments avec des serveurs (Surtout si Bat Li-Ion !) ... J'ai mal lu les news ou quoi ? Tous les Ing du monde savent que c'est very craignos. Les feux de batteries ne pardonnent pas, surtout le Li-Ion (Feu chimique inextinguible)

Mon ex Job (Suis retraité) Onduleurs => Batiments specifique Exterieur avec acces rapide pour les pompiers ... Ca a cramé une fois, pour de vrai :)
C'est surement la bonne pratique, mais combien de DC n'ont pas les onduleurs dans le même bâtiment ? à mon avis c'est loin d'être la majorité.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 11 mars 2021 à 19:46:28
Le grand public lit ''Tout va rentrer dans l'ordre le 15 mars" et se dit super je vais récupérer mes données et tout refonctionnera comme avant
Sauf que OVH va juste mettre à disposition de matériel équivalent, ce qui n'est pas du tout la meme chose...

Ah ca c'est sûr ils vont pas mettre des DC gonflables à 50m du lieu de l'incendie en quelques jours ^^
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 11 mars 2021 à 20:06:36
OVH offre un service de sauvegardes, mais dans certains cas il n'est pas possible de savoir où cette sauvegarde est physiquement hébergée.

Quand c'est pas marqué, c'est que c'est dans le même DC....

La licorne Française du cloud a un avenir cloudY...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: flying38 le 11 mars 2021 à 20:34:41
Pour ma part, j'ai visité un DC Equinix à Aubervilliers, rien que de l'extérieur, ca fait plus pro.
Ils ont des groupes de secours composés de moteur de bateaux Caterpillar énormes qui font un bruit d'enfer.
L'extinction en cas d'incendie se fait par pulvérisation de gouttelettes d'eau dans l'air afin de protéger au maximum le matériel. De plus le DC est bien moins haut et plus large ce qui permet d'avoir une propagation moins rapide je pense.

Sinon je confirme pour le backup, c'est pas obligatoire dans des DC différents. Au boulot, on a un presta qui avait un serveur dans SBG2 et un backup dans SBG1... Les 2 ont brulés. Heureusement, ils ont un backup mensuel externalisé.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 11 mars 2021 à 20:39:05
Onduleurs .... Dans des batiments avec des serveurs (Surtout si Bat Li-Ion !) ... J'ai mal lu les news ou quoi ? Tous les Ing du monde savent que c'est very craignos. Les feux de batteries ne pardonnent pas, surtout le Li-Ion (Feu chimique inextinguible)

Mon ex Job (Suis retraité) Onduleurs => Batiments specifique Exterieur avec acces rapide pour les pompiers ... Ca a cramé une fois, pour de vrai :)
Alors... les onduleurs standards, c'est des batteries au plomb, pas au Li-Ion.
De plus, dans la majorité des datacenters, les onduleurs sont dans le même bâtiment que les serveurs.
Mais pas localisés dans la même salle. Et les salles onduleur sont normalement suffisamment bien isolées avec des murs résistants au feu.
Dans le Datacenter OVH SBG2, les salles TGBT+ onduleurs étaient dans des salles au rez de chaussée, dans une construction "en dur". Les le reste du bâtiment, où sont hébergés les serveurs, c'est de la construction légère préfabriquée.
Mais est-ce que ces salles onduleur étaient avec des parois résistantes au feu? Et dispositifs d'extinction incendie actif à l'intérieur? Je crois que personne ici n'a l'information, et pas certain qu'on le sache un jour.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 20:41:24
Configuration de Roubaix 4 qui est bâti de la même façon.

C'est mentionné explicitement : c'est bien le rez-de-chaussé du bâtiment et on voit qu'il y a de a grosse puissance électrique.

Les conduits nécessaires au Free-cooling du rez-de-chaussée :
(https://lafibre.info/images/ovh/201105_rbx4_air_1.jpg)

(https://lafibre.info/images/ovh/201105_rbx4_air_2.jpg)


Les grosses gaines d'aération, ce sont les conduits nécessaires au Free-cooling :

Nouveaux onduleurs :
(https://lafibre.info/images/ovh/201105_rbx4_nouveaux_onduleurs.jpg)

Les batteries pour alimenter le data-center en attendant la synchronisation des groupes :
(https://lafibre.info/images/ovh/201105_rbx4_les_batteries.jpg)

Les batteries en cours d'installation :
(https://lafibre.info/images/ovh/201105_rbx4_batteries.jpg)

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 11 mars 2021 à 20:47:24
SGB2 est de la même génération que Roubaix 4.

Les étages sont dans une conception légère, optimisé pour la circulation de l'air extérieur directement sans les serveurs :

Photo pendant les travaux de Roubaix 4, fin 2010 :
(https://lafibre.info/images/ovh/201009_rbx4_construction_1.jpg)

L'aménagement des étages :
Étage 0, pas encore prêt, ventilateurs tournent seuls avec la hauteur du bâtiment, la différence des pressions :
(https://lafibre.info/images/ovh/201105_rbx4_etage0_pas_encore_pret_ventilateurs_tournent_seuls_avec_la_hauteur_du_batiment_la_difference_des_pressions.jpg)

Étage 2, préparation des baies qui vont accueillir les serveurs - La ventilation est mutualisée pour plusieurs serveurs lame :
(https://lafibre.info/images/ovh/201105_rbx4_preparation_etage2_avec_les_baies.jpg)

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 11 mars 2021 à 21:03:21
C'est ceux là de lame a SBG2 ? :

(https://lafibre.info/images/ovh/201301_ovh_visite_roubaix4_et_cap_140000_serveurs.jpg)

https://lafibre.info/videos/datacenter/201301_ovh_visite_roubaix4_et_cap_140000_serveurs.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 11 mars 2021 à 21:08:19
Vivien c'est pour toi  8) :

OVH SBG2 : les fondations du datacentre
https://lafibre.info/videos/datacenter/201301_ovh_sbg2_fondations_du_datacentre.mp4

Tour d'horizon des mesures de sécurité prises par OVH
https://lafibre.info/videos/datacenter/201311_ovh_mesures_de_securite_datacentre.mp4

Retrouvez votre âme d'enfant...
https://lafibre.info/videos/datacenter/201312_ovh_ame_enfant.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 11 mars 2021 à 21:18:39
OVH datacenters security
https://lafibre.info/videos/datacenter/201405_ovh_securite_datacenter.mp4

Bon y en a d'autres mais je vais pas polluer, il faudrait les centraliser sur un topic dédié "OVH - l'envers du décor"

Le sous-titre de la miniature est fou  :
(https://lafibre.info/images/ovh/201405_ovh_securite_datacenter.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 11 mars 2021 à 21:47:13
Le sous-titre de la miniature est fou

Une boulette parmi tant d'autres ? OH !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: tutosfaciles48 le 12 mars 2021 à 00:53:33
Une boulette parmi tant d'autres ? OH !

Après c'est clairement le cas des DC de gravelines et de roubaix, mais celui de Strasbourg a clairement pas les mêmes "protections"/technos que les autres (à savoir gaz pour éteindre les incendies, pas de matériaux combustibles, ... ...)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 02:42:00
Non :
SBG2 date de 2011. 5 autres datacenter sont sur le même principe d'une tour auto-ventilée (exemple: Roubaix 4)

https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thedark le 12 mars 2021 à 08:20:47
Citer
Michel Paulin (Directeur Général d’OVH Cloud): "Il semble que ce soit un équipement électrique" à l'origine du feu selon les premiers éléments

https://twitter.com/bfmbusiness/status/1370272017476415488
https://lafibre.info/videos/datacenter/202103_ovhcloud_michel_paulin_incendie_bfm_business.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 12 mars 2021 à 08:26:16
C'est souvent un élément électrique, surtout vu les puissances électriques utilisées dans un datacenter, pas forcément un onduleur... C'est une déclaration qui ne mange pas de pain.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 11:41:21
Je viens de lire cela mais c'était peut-être dans l'ITW vidéo X méssages au dessus.

D'après Michel Paulin, CEO de la société roubaisienne, tous les services mail "email pro" affectés par
l'incendie sont désormais "rétablis sans perte d'email".

Si des mailer daemon ont un retry de 1 jour maximum pour poster les e-mails et que ca s'est arrêté plus de 24h01... y'a des mails qui auront jamais été envoyés/reçues....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: FloBaoti le 12 mars 2021 à 11:57:09
On peut supposer qu'ils ont des MX dans plusieurs DC, quitte à ce que certains soient en secours et ne délivrent pas directement en inbox et attendent le retour des primaires.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 12:15:44
On peut supposer qu'ils ont des MX dans plusieurs DC, quitte à ce que certains soient en secours et ne délivrent pas directement en inbox et attendent le retour des primaires.

déjà TTL de 12 heures (voire plus)

bon maintenant traceroute...

(...)
15  be5.rbx-iplb1-a70.fr.eu (37.187.231.75)  67.043 ms * *
16  mx1.ovh.net (188.165.47.122)  65.578 ms  66.918 ms *

(...)
15  be7.rbx-iplb2-a70.fr.eu (37.187.231.81)  60.290 ms *  60.608 ms
16  mx2.ovh.net (87.98.132.45)  58.196 ms  59.305 ms *

ouais.... c'est pas gagné..... surtout que https://www.ovh.com/world/us/about-us/datacenters.xml


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 12 mars 2021 à 13:00:18
Vivien c'est pour toi  8) :

OVH SBG2 : les fondations du datacentre

Tour d'horizon des mesures de sécurité prises par OVH

Retrouvez votre âme d'enfant...

Je comprends mieux l’attente au SAV ou SC en voyant la dernière vidéo  :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 13:51:02
Témoignage d'un gros client OVH qui s'en sort bien :

(https://lafibre.info/images/ovh/202103_ovh_incendie_temoignage_auchaun.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 12 mars 2021 à 13:56:46
Témoignage d'un gros client OVH qui s'en sort bien :

Le principe le plus élémentaire d'une DSI sérieuse : s'assurer d'un PRA qui tient la route pour toutes ses applis critiques.
Pour cela, pas de secret : exiger et vérifier une documentation et test/preuve au moins une fois par an, si possible en condition de production réelle, c'est à dire : rester une semaine sur le site de PRA avant de revenir sur le site primaire, comme ça pas de surprise (baisse de perfs, batchs récurrents pas testés, etc.).
Oui ça coute cher.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 14:03:06
Témoignage d'une entreprise qui a perdu les données de ses clients pour de la vente en ligne : les sauvegardes étaient sur le même site, comme expliqué dans le FAQ :

(https://lafibre.info/images/ovh/202103_ovh_incendie_temoignage_yoplanning.png)

Pour eux le risque de perte du datacenter dans un incendie n'existait pas et le contrat avec OVH prévoyait justement des garanties sur l'extinction incendie.

Ils annoncent basculer sur le cloud Azure dans cette vidéo, avec réplications des données sur plusieurs sites :


https://lafibre.info/videos/datacenter/202103_ovhcloud_incendie_strasbourg_impact_yoplanning.mp4



Point actualisé d'OVH sur l'Incendie de Strasbourg :
(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)

Les bulletins précédents :
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 12 mars 2021 à 14:09:52
Citer
Pour des raisons légales et de RDGP "compliance" nous sommes interdit d'hébergés les données sensibles des clients dans notre bureau
C'est nouveau le RDGP ?   :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: chantoine le 12 mars 2021 à 14:11:22
C'est comme SBG, tout le monde écrit SGB :-)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 12 mars 2021 à 14:12:24
un autre témoignage avec les serveurs europe de RUST qui ont cramés...

https://www.pcgamer.com/how-rust-got-back-online-after-its-servers-literally-caught-fire/

tldr: au début ils n'ont pas cru que ca serait grave en recevant des infos comme quoi il y avait un incident sur le datacenter d'ovh, mais en voyant les photos ils se sont rendus compte qu'un incendie pouvait réellement bruler pas juste quelques machines mais tous le DC, ils ont alors bataillés pour avoir accès à leurs consoles ovh pour savoir si leurs serveurs étaient impactés, puis trouver des serveurs dispos et ont fini par reprendre des serveurs sur ovh pologne pour pouvoir remonter les backups des serveurs&environnement (serveurs qui accueillent plus de 10k joueurs en simultanées lors des pics de connexions)
Par contre, les sauvegardes des stats des joueurs n'étaient pas backupé a l'exterieur de manière fréquente, et n'avaient pas pensé pouvoir perdre tous les serveurs en meme temps, donc ils ont remontés des backup des stats de joueurs ayant 1semaine (pour un jeu dont le monde ne s'arrête jamais, donc une semaine complète de progression perdu pour les joueurs), a l'avenir ils vont le backup comme le reste.
Au final ils ont mis 11h pour repartir, donc 4h réellement à partir du moment ou ils ont compris que ce n'était pas qu'un petit incident.

Pas si mal pour, in fine, des serveurs de jeu... quand on voit les témoignages de sites de ventes en lignes qui ont tout perdu  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 12 mars 2021 à 14:12:52
C'est nouveau le RDGP ?   :)
c'est comme leur PRA, il n'était pas bon  :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 12 mars 2021 à 14:14:45
Témoignage d'une entreprise qui a perdu les données de ses clients pour de la vente en ligne : les sauvegardes étaient sur le même site, comme expliqué dans le FAQ :
Quelle communication médiocre... On voit qui sont les vrais losers
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Douks le 12 mars 2021 à 14:20:14
Le principe le plus élémentaire d'une DSI sérieuse : s'assurer d'un PRA qui tient la route pour toutes ses applis critiques.
Pour cela, pas de secret : exiger et vérifier une documentation et test/preuve au moins une fois par an, si possible en condition de production réelle, c'est à dire : rester une semaine sur le site de PRA avant de revenir sur le site primaire, comme ça pas de surprise (baisse de perfs, batchs récurrents pas testés, etc.).
Oui ça coute cher.
En dehors de la notion de couts, en France l'informatique c'est un concours de b*te permanent. Si t'as le malheur de tomber dans une boite de dinosaures, que t'es un bleu, et en plus t'es une femme, t'auras beau constater que l'admin sys/net ne sait pas faire X ou Y (dont la gestion des sauvegardes par exemple), tu seras vite remis à ta place. Si t'as vraiment pas de bol on va même offrir une promotion au dinosaure

*Toute ressemblance avec des faits réels serait purement fortuite. LOL.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: jack le 12 mars 2021 à 14:28:14
Quelle communication médiocre... On voit qui sont les vrais losers

Pathétique en effet ..
La moindre des choses est d'assumer ses choix

Du coup ils vont sur azure, ce qui confirme ton diagnostique  ::)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 12 mars 2021 à 14:29:55
Témoignage d'une entreprise qui a perdu les données de ses clients pour de la vente en ligne : les sauvegardes étaient sur le même site, comme expliqué dans le FAQ :
Pour eux le risque de perte du datacenter dans un incendie n'existait pas et le contrat avec OVH prévoyait justement des garanties sur l'extinction incendie.
Je peux entendre que les gens disent en théorie un DC ne doit pas bruler mais quand dans la même phrase il te dit, on connaissait le risque en cas de tremblements de terre ...
Il "suffit" de remplacer l'incendie de mercredi par un tremblement de terre et la situation aurait été la même, ils auraient été dans la même m**de, à savoir toutes les données perdues.

Ok, ils ne pouvaient pas "stocker" les données dans leur bureau mais OVH à plein d'autres DCs avec des serveurs de backup et surtout il y a plein d'autres hébergeurs ... Si tu as le droit de mettre les données Clients chez OVH SBG, je dois pouvoir les mettres chez OVH RBX ou chez des concurrents ..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: nicox11 le 12 mars 2021 à 15:01:25
Témoignage d'une entreprise qui a perdu les données de ses clients pour de la vente en ligne : les sauvegardes étaient sur le même site, comme expliqué dans le FAQ :


Pour eux le risque de perte du datacenter dans un incendie n'existait pas et le contrat avec OVH prévoyait justement des garanties sur l'extinction incendie.

Ils annoncent basculer sur le cloud Azure dans cette vidéo, avec réplications des données sur plusieurs sites :



Des "à", des "où" sans accents, un "ce" à la place de "se" ( "Nous ne savions pas ou ce situait ...") , de la mauvaise foi en vers ovh...
Franchement, qui peut ne pas comprendre l'incompétence ? Ce n'est pas en prenant azure qui a une option "de base" qu'on peut mettre la faute sur ovh.
Je trouve les gens gonflé quand même.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 12 mars 2021 à 15:19:56
Je pense qu'il parle de l'offre de sauvegarde fournis par OVH pour les serveur dédié ( https://www.ovhcloud.com/fr/bare-metal/backup-storage/ )
Il penser être en sécurité avec ce type de sauvegarde, mais il n'imaginer pas que celle-ci se trouvé a quelque mètre de son serveur....

(https://lafibre.info/images/ovh/202103_ovh_backup_storage.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 12 mars 2021 à 15:31:01
Perso je suis partagé sur les responsabilités de chacun mais il faut admettre y'a quand même eu des grosses négligences coté OVH et ils font le payer cher quelque soit le résultat final de l’enquête. Il faut des années pour se construire une bonne réputation et quelques secondes pour la perdre.

Apres juger des clients d'OVH sur leur choix ou déclarations post-mortem sans connaitre plus leurs contextes et historiques est plus qu'hasardeux et un peu léger comme attitude.




Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 12 mars 2021 à 15:37:16
Apres juger des clients d'OVH sur leur choix ou déclarations post-mortem sans connaitre plus leurs contextes et historiques est plus qu'hasardeux et un peu léger comme attitude.

N'as tu pas une attitude tout aussi légère en parlant de "grosses négligences coté OVH" : n'est-ce pas un peu tôt pour l'affirmer ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 15:46:13
Si c'est confirmé, mettre du bois dans un DC...... euh................................
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: testing5555 le 12 mars 2021 à 16:34:57
Le problème c'est que ceux qui s'expriment sur leur perte de donnée ne disent jamais quel type d'hébergement ils avaient... (dédié, solution de backup OVH, ...)
Si ils avaient un backup géré par OVH qui au final était sur le même site c'est clair qu'ils ont pu se faire avoir, surtout si l'IT n'est pas leur métier de base (genre une petite boutique).

Là on parle d'un service cloud payant proposé à des tiers donc ils auraient peut-être dû gratter plus loin sur ce que leur fournissait vraiment OVH. Facile de dire après coup qu'on avait prévu tous les scénarios sauf celui qui s'est produit.

Le pire c'est que j'ai l'impression que certains ne vont pas chercher à comprendre et risque de se remettre dans une situation pas plus sûre chez un autre fournisseur sans apprendre/comprendre ce qu'il aurait pu faire pour éviter de perdre toutes leurs données (à minima stocker un backup régulier hors site comme le prévoit la règle des 3, 2, 1)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 12 mars 2021 à 16:40:14
https://twitter.com/olesovhcom/status/1370375564398366725
Citer
- Free/Paid Backup pCC in SBG1 was hosted in an separated room of SBG1. Both rooms are destroyed.

Pour rapelle ,est pCC, Private Cloud Computing, sont des esx/datastore manager par OVH
Les Datastore sont répliqué sur deux baie, qui se trouve être dans la même salle..
Il y a en plus un backup, qui se trouve être dans la salle a coté...
Pas top pour une offre qui coute plusieurs dizaine de millier d'euro !
https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: pioup le 12 mars 2021 à 16:58:21
Quelque chose m'échappe, ça coûte moins cher d'avoir un backup sur le même site, car quitte à avoir un backup,  ça me paraît évidemment que ce dernier soit sur un autre site.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: reivax le 12 mars 2021 à 16:59:08
Pour rapelle ,est pCC, Private Cloud Computing, sont des esx/datastore manager par OVH
Les Datastore sont répliqué sur deux baie, qui se trouve être dans la même salle..
Il y a en plus un backup, qui se trouve être dans la salle a coté...
Pas top pour une offre qui coute plusieurs dizaine de millier d'euro !
https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/

Heu l'offre commence à moins de 1000€.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 12 mars 2021 à 17:07:59
Ce qui rapporté sur 24 mois fait plusieurs dizaines de milliers d'euros ;). (je sors)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: testing5555 le 12 mars 2021 à 17:08:22
Quelque chose m'échappe, ça coûte moins cher d'avoir un backup sur le même site, car quitte à avoir un backup,  ça me paraît évidemment que ce dernier soit sur un autre site.
Pour l'hébergeur c'est sûrement plus simple : bande passante interne au site, dimensionnement de la partie backup en fonction du DC et non en fonction des autres DC (le jour où tu ouvres un DC car les autres saturent tu vas avoir du mal à mettre du backup dans les anciens DC si tu n'anticipes pas assez), ...
Après pour contrer une panne machine ça suffit et ça peut être plus rapide pour restaurer les données.
Mais il ne faut jamais oublier d'avoir un backup hors site, quitte à ce qu'il soit (beaucoup) plus long à récupérer (cold storage, ...) plutôt que de tout perdre...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 17:30:30
Transmettre de grosses quantités de données entre sites, cela a un cout.

La on parle de plusieurs Tb/s entre sites si on mettait systématiquement l'autre partie sur un autre site.

Mettre un fibre direct vers une baie situé dans le même datacenter, c'est bien moins cher que de le faire passer par le réseau et donc des switchs, des routeurs,...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: pioup le 12 mars 2021 à 17:39:12
D'accord en effet. Je pensais que faire les sauvegardes la nuit sur un autre site n'aurait pas autant d'impact en pensant que cela s'équilibrait avec le fait que le réseau est "vide " la nuit.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 12 mars 2021 à 17:42:15
Il se murmure que des DG de plusieurs sociétés lésées prévoient de se regrouper en association en vue d'attaquer ovh en justice pour manquements contractuels, perte d'exploitation, etc.

L'intro en bourse prévue, je crois qu'ils peuvent faire une croix dessus.

C'est clair que le coup du DC en bois avec des extincteurs à poudre, ça le fait moyen quand la "norme du secteur" est aux gaz inertes...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 17:44:31
Sur cette offre on parle d'un snapchot chaque heure et pas uniquement la nuit :

(https://lafibre.info/images/ovh/202103_ovh_datastore_nfs.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: jack le 12 mars 2021 à 17:46:31
Il se murmure que des DG de plusieurs sociétés lésées prévoient de se regrouper en association en vue d'attaquer ovh en justice pour manquements contractuels, perte d'exploitation, etc.

L'intro en bourse prévue, je crois qu'ils peuvent faire une croix dessus.

C'est clair que le coup du DC en bois avec des extincteurs à poudre, ça le fait moyen quand la "norme du secteur" est aux gaz inertes...

Prenez garde à la fureur de l'homme aux abois, qui étant dos au mur, fera feu de tout bois ..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 12 mars 2021 à 17:57:57
Sur cette offre on parle d'un snapchot chaque heure et pas uniquement la nuit :

Le snapshot c'est sur le même équipement de stockage, intérêt 0 en cas de perte d'équipement.
Le but d'un snapshot c'est simplement d'avoir un backup instantané local facilement réutilisable.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 12 mars 2021 à 18:10:51
https://twitter.com/olesovhcom/status/1370375564398366725
State of Backup Service (Free or Paid) for the SBG customers:
- FTP Backup in SBG (Free/Paid) for VPS and Baremetal : the datas are in RBX. You have full access.
- pCS in SBG: We hope to restore the pCS cluster in SBG next week. The servers are in SBG1 + SBG3. We may have some bad news, this is why the final status has to be confirmed in the next days.
- Paid Backup VPS & PCI: 80% of the data are on pCS in SBG. please read the previous tweet about the state of pCS in SBG. 20% of the data was on pCA which was in SBG2.
- Free/Paid Backup pCC in SBG1 was hosted in an separated room of SBG1. Both rooms are destroyed.
- Free/Paid Backup pCC in SBG3: all datas seems to be safe.

Est-ce que quelqu'un sait traduire les acronymes incompréhensibles pour le commun des mortels, et pas du tout explicités dans les offres ?
PCS? PCA? PCI? PCC?
Les clients s'y retrouvent avec de tels acronymes?

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 12 mars 2021 à 18:20:17
pCS = Private Cloud Storage
PCA = Public Cloud Archives
PCI = Public Cloud Instances
pCC = Private Cloud Computing

P majuscule c'est Public, p minuscule c'est Private.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: benj-01 le 12 mars 2021 à 18:21:09
Que cela serve de leçon a certains. Quand je vois le nombre de fois ou j'ai du batailler avec des directions d'entreprises pour la mise en place de PCA et PRA je suis pas étonné que certains mal organisé aient tout perdu.

J'ai déjà eu affaire à des inconscients qui ce contentent d'un raid en protection, les uniques cartouches de sauvegardes posées sur le serveur, sauvegarde sur une seule et unique clé USB, et j'en passe ...

Il y a beau avoir toutes les sécurité on est jamais à l'abris d'un accident grave. C'est pourquoi il ne faut pas avoir tous ces oeufs dans le même panier.

Quand on ne peut pas ce permettre une interruption de service on prend plusieurs herbergeurs différent et distant les un des autres (pas 2 hébergeurs qui sont dans les mêmes data center)

Les sauvegardes il en faut 3 minimum et espacés géographiquement (2 sa ne suffit pas car si une est défaillante vous vous retrouvez avec une seule sauvegarde et vous courrez donc un gros risque) Il faut avoir des sauvegardes hors ligne et immuables. En effet un hacker qui pénètre vos systèmes vas chercher a corrompre vos sauvegardes si il le peut c'est de plus en plus le cas dans les attaques par ransomware

Ce n'est pas l'hébergeur qui est responsable de la perte des données mais la mauvaise gestion des données par les client d'OVH

Certains de mes clients on été impacté par l'incendie tous on pu reprendre leur activité dans les 4 heures car on avait les data ailleurs qu'a Strasbourg et un PRA prêt et déjà testé.

La sécurité ça coute cher certes mais combien vas vous couter la perte de vos données et d'exploitation suite à un incident comme celui d'OVH ?

De plus la plus part des hébergeurs refusent de prendre la responsabilité de vos données. Exemple Microsoft pour ces offres office 365 ne garantie pas l'intégrité de vos données qui y sont stocké c'est a vous de les sauvegarder comme il faut.

Courage aux équipes d'OVH qui ne vont pas manquer de travail dans les semaines qui viennent
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 12 mars 2021 à 18:27:07
pCS = Private Cloud Storage
PCA = Public Cloud Archives
PCI = Public Cloud Instances
pCC = Private Cloud Computing

P majuscule c'est Public, p minuscule c'est Private.
Merci. Franchement si tu connais pas, tu peux pas deviner... Les clients arrivent à s'y retrouver dans cette communication?
Donc c'est l'offre pCC qui a le plus morflé. Private Cloud Computing. L'offre la plus haut de gamme et la plus chère avait ses backup dans le même bâtiment. A priori sans que le client soit réellement informé de la situation.

- Free/Paid Backup pCC in SBG1 was hosted in an separated room of SBG1. Both rooms are destroyed.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kaffeine le 12 mars 2021 à 18:35:50
Si c'est confirmé, mettre du bois dans un DC...... euh................................
Après le DC en bois, OVH ont eut la primeur de tester le DC en mousse......... extinctrices ^^.

Private joke mise à part, certains ont-ils reçus le fameux mail qui devait être envoyé dans l'aprèm selon le Twitter d'Octave Klaba ?

De même pour l'instant, pas vu l'histoire des Free Servers pour les personnes impactés. Pour l'instant, j'ai le choix de payer ou payer ^^. Ca fait un peut mal aux poches lorsque tu avais prépayés jusqu'en 2022...

Le point positif de l'histoire : ça fera un bon cas d'école pour justifier ma presta d'infogérance ^^.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: doctorrock le 12 mars 2021 à 18:40:24
Que cela serve de leçon a certains. Quand je vois le nombre de fois ou j'ai du batailler avec des directions d'entreprises pour la mise en place de PCA et PRA je suis pas étonné que certains mal organisé aient tout perdu.

J'ai déjà eu affaire à des inconscients qui ce contentent d'un raid en protection, les uniques cartouches de sauvegardes posées sur le serveur, sauvegarde sur une seule et unique clé USB, et j'en passe ...

Il y a beau avoir toutes les sécurité on est jamais à l'abris d'un accident grave. C'est pourquoi il ne faut pas avoir tous ces oeufs dans le même panier.

Quand on ne peut pas ce permettre une interruption de service on prend plusieurs herbergeurs différent et distant les un des autres (pas 2 hébergeurs qui sont dans les mêmes data center)

Les sauvegardes il en faut 3 minimum et espacés géographiquement (2 sa ne suffit pas car si une est défaillante vous vous retrouvez avec une seule sauvegarde et vous courrez donc un gros risque) Il faut avoir des sauvegardes hors ligne et immuables. En effet un hacker qui pénètre vos systèmes vas chercher a corrompre vos sauvegardes si il le peut c'est de plus en plus le cas dans les attaques par ransomware

Ce n'est pas l'hébergeur qui est responsable de la perte des données mais la mauvaise gestion des données par les client d'OVH

Certains de mes clients on été impacté par l'incendie tous on pu reprendre leur activité dans les 4 heures car on avait les data ailleurs qu'a Strasbourg et un PRA prêt et déjà testé.

La sécurité ça coute cher certes mais combien vas vous couter la perte de vos données et d'exploitation suite à un incident comme celui d'OVH ?

De plus la plus part des hébergeurs refusent de prendre la responsabilité de vos données. Exemple Microsoft pour ces offres office 365 ne garantie pas l'intégrité de vos données qui y sont stocké c'est a vous de les sauvegarder comme il faut.

Courage aux équipes d'OVH qui ne vont pas manquer de travail dans les semaines qui viennent

En fait, j'aurai pas dit mieux.
Ca fait juste parti du bon sens, et des pratiques dans le métier depuis qu'il existe, c'est-à-dire depuis bien trente ans maintenant. On découvre rien là aujourd'hui d'accord ?

Mais il existera toujours des personnes qui sur Terre, s'improvisent X ou Y, sans connaitre le métier de X ou de Y, et qui le regretteront un jour.
Oui, l'informatique c'est un (ensemble de) métier(s), et ca ne s'apprend pas à la va-vite. Il existe des règles, il existe des 'lois', contraignantes oui mais c'est pas pour rien. On s'y tient, sinon voila ce qui arrive.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: patrick_01 le 12 mars 2021 à 18:47:30
Bon, ben puisque tout le monde y va de son petit commentaire ...

Je pense que c'est le moment de se poser sérieusement la question de savoir si on a vraiment besoin de ces énormes centres de données. Quand on a commencé à construire le 380, tout le monde s'est dit qu'en cas de crash c'était jusqu'à 800 personnes d'un coup, ça fait moche.
Alors OK, pour le particulier l'auto-hébergement c'est un truc de geek, pour une petite société c'est plus simple de sous-traiter, etc... mais ces énormes concentrations ça fait quand même un peu peur. En cas de désastre, ça semble avoir le potentiel de mettre par terre une bonne partie de l'économie d'un pays.

Et puis, combien de données utiles en proportion des petabytes de vidéo de chats (et j'aurais aussi pu mettre le mot au féminin), des myriades de futilités qui abreuvent les "réseaux sociaux" ou du minage de bitcoins ?

Je ne suis pas spécialiste, mais il me semble que le strict minimum pour n'importe quoi de mission-critical devrait être la garantie que la continuité de service, ou la reprise, ne dépendent pas d'un fournisseur unique (et naturellement pas d'un datacenter unique non plus). Alors les "je quitte OVH, je vais chez Azure/AWS/xyz", ben peut être que dans un an c'est amazon qui crame, et ce sera la même chose. Je ne crois pas qu'OVH soit une boîte de demeurés.

Quoi qu'en disent tous les pro-cloud ("de toute façon les données sont plus en sécurité sur le nuage que dans votre sous-sol, etc...") on ne peut pas faire confiance et dépendre d'un seul prestataire.

Je ne suis pas expert de ça non plus, mais sauf erreur de ma part, les moyens d'extinction obligatoires, et ceux que vérifient les services départementaux (SDIS pour les ERP, mais je ne sais pas trop qui pour un datacenter), sont surtout destinés à protéger les personnes, pas les biens. On ne peut pas les prendre en défaut, puisque d'après les media personne n'a été blessé dans l'incendie, ce qui est quand même l'essentiel (désolé pour ceux qui pensent que le prix des données perdues à quoi que ce soit à voir avec celui d'une seule vie humaine).

Quand au plancher en bois... je m'occupe d'un ERP qui accueille des enfants pendant les vacances scolaires (et là aussi, la vie d'un seul de ces gamins vaut à mes yeux bien plus que tous les "sbg" "rxb" et autres), et on nous a fait spécifiquement poser des cloisons en bois à certains endroits parce que le bois, sous une forme appropriée et traité correctement, retarde le feu plus longtemps que d'autres matériaux. Les gros incendies ne se produisent pas que dans des immeubles en bois, et chez OVH ce n'est certainement pas le bois des planchers qui a propagé le feu. Maintenant, une fois que tout crame, le bois brûle avec le reste, c'est clair. Un départ de feu, ça s'éteint soit tout de suite, et on protège les biens, soit trop tard, et on ne peut qu'essayer de sauver les personnes.

Ce matin j'ai mis mon pull "there is no cloud, it's just someone else's computer". C'est de circonstance :-)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 12 mars 2021 à 18:52:28
Il se murmure que des DG de plusieurs sociétés lésées prévoient de se regrouper en association en vue d'attaquer ovh en justice pour manquements contractuels, perte d'exploitation, etc.

L'intro en bourse prévue, je crois qu'ils peuvent faire une croix dessus.

C'est clair que le coup du DC en bois avec des extincteurs à poudre, ça le fait moyen quand la "norme du secteur" est aux gaz inertes...

Enfin OVH va certainement rejeter la faute sur’le prestataire ayant fait la maintenance...

Je vais au garage changer une roue, j’ai un accident car la roue se decroche et j’écrase le chien du voisin.

On blâme le conducteur ? La garage? L’employé qui a changé la roue et qui na pas respecté le protocole ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: benj-01 le 12 mars 2021 à 18:53:33
Sur cette offre on parle d'un snapchot chaque heure et pas uniquement la nuit :

(https://lafibre.info/images/ovh/202103_ovh_datastore_nfs.png)

Un snapshot c'est pas une sauvegarde ça permet de reprendre plus rapidement si l'os de la machine virtuelle plante voir restaurer rapidement sur un autre serveur hôte si un hôte tombe en panne (certains systèmes le font même automatiquement ce que l'on appelle HA) De plus quand on restaure un snapshot on restaure toute machine, c'est compliqué de faire une restauration ciblée avec des snapshots qui sont des souvent des points de restauration différentiels des points précédents.

Si votre système de sauvegarde repose uniquement sur des snapshots vos données ne sont pas en sécurité
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dmxvalou le 12 mars 2021 à 19:05:52
Voici l'email que je viens de recevoir ( j'était client a SBG2)

Chère cliente, cher client,

À la suite de l'incendie survenu le 10 mars dans notre datacenter de Strasbourg (SBG), nous sommes au regret de vous informer que le ou les services Bare Metal hébergés dans le bâtiment SBG1 et SBG2 (voir la liste ci-dessous) ont été affectés au cours de cet événement. Ils ne pourront pas être remis en service.

SERVICE   DC

ns3070672.ip-79-137-42.eu   sbg2
Nous vous conseillons donc de commander un ou plusieurs services alternatifs dans l’un de nos autres datacenters, dans lesquels nous renforçons nos capacités.
Veuillez noter que les IP fail-over ou blocs d’IP sont transférables uniquement dans nos datacenters français. Si vous souhaitez les conserver, nous vous recommandons par conséquent de choisir les datacenters de Roubaix (RBX) ou Gravelines (GRA). Un délai de livraison pour ce nouveau service vous sera communiqué.

Afin de nous excuser pour la gêne occasionnée, nous appliquerons une gratuité équivalente à 6 fois le montant de votre facture de février 2021 pour ce ou ces services. Nous vous recontacterons d'ici quelques jours, afin de vous détailler les modalités de mise à disposition de cette gratuité.

Si vous avez activé la fonctionnalité Backup Storage et procédé à des sauvegardes de données sur cet espace, vous êtes en mesure de les récupérer. En effet, ces backups sont localisés dans un centre de données distant. Dans le cas contraire, nous vous invitons à l’activer lors de votre nouvelle commande, à moins que vous ne disposiez déjà d’une autre solution de sauvegarde.

En attendant nos prochaines communications, nous vous invitons à suivre l'évolution de la situation via nos FAQ. Celles-ci sont mises à jour en temps réel.

Soyez assuré de notre mobilisation pour vous apporter un soutien maximum.

L’équipe OVHcloud
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: benj-01 le 12 mars 2021 à 19:06:51
Il se murmure que des DG de plusieurs sociétés lésées prévoient de se regrouper en association en vue d'attaquer ovh en justice pour manquements contractuels, perte d'exploitation, etc.

L'intro en bourse prévue, je crois qu'ils peuvent faire une croix dessus.

C'est clair que le coup du DC en bois avec des extincteurs à poudre, ça le fait moyen quand la "norme du secteur" est aux gaz inertes...

La responsabilité d'OVH c'est de fournir à nouveau des serveurs à ses clients dans les délais mentionnés dans les contrats mais nullement de restaurer les serveurs dans l'état ou ils étaient avant l'incident. Je pense qu'il restaureront ce qu'il peuvent restaurer mais si ils n'ont plus les données je serrais étonné qu'il soient juridiquement responsable. J'ai pas connaissance d'offre de stockage de données garantie contractuellement chez OVH très peu le proposent et ca coute en général très très cher et ça ce paye au volume de données sauvegardées
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: foreme200 le 12 mars 2021 à 19:09:10
En fait, j'aurai pas dit mieux.
Ca fait juste parti du bon sens, et des pratiques dans le métier depuis qu'il existe, c'est-à-dire depuis bien trente ans maintenant. On découvre rien là aujourd'hui d'accord ?

Mais il existera toujours des personnes qui sur Terre, s'improvisent X ou Y, sans connaitre le métier de X ou de Y, et qui le regretteront un jour.
Oui, l'informatique c'est un (ensemble de) métier(s), et ca ne s'apprend pas à la va-vite. Il existe des règles, il existe des 'lois', contraignantes oui mais c'est pas pour rien. On s'y tient, sinon voila ce qui arrive.

Bon, ça fera du ménage dans les prestataires cette histoire. Depuis mercredi je pense que certains ont de mauvaises nuits...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hwti le 12 mars 2021 à 19:09:28
Transmettre de grosses quantités de données entre sites, cela a un cout.

La on parle de plusieurs Tb/s entre sites si on mettait systématiquement l'autre partie sur un autre site.

Mettre un fibre direct vers une baie situé dans le même datacenter, c'est bien moins cher que de le faire passer par le réseau et donc des switchs, des routeurs,...
Il y a aussi un juste milieu entre stocker les données dans la baie ou la salle d'à côté, et à RBX/GRA.
Ici les datacenters sont collés, donc sauvegarder les données de SBG1 dans SBG3 ou SBG4, ce serait si coûteux ? Ils peuvent tirer plein de fibres.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: JM-anon le 12 mars 2021 à 19:58:32
Je pense qu'il parle de l'offre de sauvegarde fournis par OVH pour les serveur dédié ( https://www.ovhcloud.com/fr/bare-metal/backup-storage/ )
Il penser être en sécurité avec ce type de sauvegarde, mais il n'imaginer pas que celle-ci se trouvé a quelque mètre de son serveur....

Je suis le sujet depuis le début et je me crée un compte parce que raconter des bêtises + défendre des incompétents ça m'horripile.
Comme mentionné plus bas, les backups des dédiés et VPS sont à Gravelines et disponibles (https://twitter.com/olesovhcom/status/1370375560141094913).

Concernant les autres offres qui comportent des backups réalisés sur le même site, certes ce n'est pas très judicieux de proposer de telles offres mais jusqu'à preuve du contraire OVH n'a pas menti dans ses contrats.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thenico le 12 mars 2021 à 19:59:18
Les contrats VPS/serveurs dediés/Private Cloud (https://www.ovh.com/fr/support/contrats/) indiquent clairement que la sauvegarde est à la charge du client.
Je vois mal les actions en justice réussir.

Pour le backup storage, j'ai systématiquement un stockage sur un autre DC.
Est-ce que vous avez autre chose?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dj54 le 12 mars 2021 à 20:15:03
quelques infos a 20h

Etat des sauvegardes de données suite à l'incendie sur le campus d'OVHCloud à Strasbourg
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_reprise_apres_incendie_1.png)


Plan de redémarrage des datacenters d'OVHCloud à Strasbourg
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_reprise_apres_incendie_2.png)

Source: Journal du Net
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 12 mars 2021 à 20:24:36
Les contrats VPS/serveurs dediés/Private Cloud (https://www.ovh.com/fr/support/contrats/) indiquent clairement que la sauvegarde est à la charge du client.
Je vois mal les actions en justice réussir.

Pour le backup storage, j'ai systématiquement un stockage sur un autre DC.
Est-ce que vous avez autre chose?
Je ne suis pas certain de comprendre ce que tu expliques.

Dans les contrat qui parlent d'une prestation de sauvegarde, il est écrit que c'est au client de programmer, vérifier, implémenter sa sauvegarde. Donc que OVH ne fera pas de script de sauvegarde, ni de vérification de cohérence de sauvegarde à la place du client. Rien de plus!
Mais le client fait tout ceci avec l'aide des offres/prestations de sauvegarde d'OVH!
Donc c'est bien OVH qui fournit la prestation de sauvegarde. Ou plutôt du stockage de la sauvegarde. Et là, OVH est clairement défaillant sur cette prestation.

Je ne vois aucune clause qui dédouane OVH dans la situation actuelle.

Le plus grave c'est pour les sauvegardes de certaines offres qui étaient réalisées dans le même bâtiment que l'offre principale à laquelle la sauvegarde est attachée.
Cas du Private Cloud Computing de SBG-1.
Le client n'était pas au courant de cette localisation pour le moins discutable et perfectible.

Extrait pour l'offre de sauvegarde Private Cloud Computing. Encore une fois, certains serveurs de cette offre étaient dans le même bâtiment que les serveurs de backup de cette offre. Et les 2 ont été perdus. Pour SBG-1.

L'Espace de stockage alloué à l'option de Backup est physiquement isolé de l'Infrastructure dans laquelle est mis en place le Dedicated Cloud du Client.
[...]
Le Client pourra récupérer tout ou partie de ses données via son Interface de Virtualisation.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 12 mars 2021 à 20:40:50
tu veux dire qu'une sauvegarde, ça devrait être offrir une prestation garantissant que la donnée sauvegardée est indestructible en toute circonstance ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 20:42:13
> Ici les datacenters sont collés, donc sauvegarder les données de SBG1 dans SBG3 ou SBG4, ce serait si coûteux ? Ils peuvent tirer plein de fibres.

Vas dire cela aux clients de SBG2 qui avait des backups partis en fumée à SBG1........

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thenico le 12 mars 2021 à 20:43:57
Citer
OVH  n'effectue  aucune  sauvegarde  spécifique  des  données  du  Client  hébergées  sur  le Dedicated Cloud, à l’exclusion de la sauvegarde, assurée par OVH dans le cadre du Service, mais qui ne saurait dispenser le Client d’effectuer une sauvegarde complète de ses données.Il appartient en conséquence au Client de prendre toutes mesures nécessaires à la sauvegarde de ses données en cas de perte, ou de détérioration des données confiées, quelle qu'en soit la cause, y compris celles non expressément visées par les présentes.

OVH ne donne aucune garantie liée aux conséquences de l'utilisation du Service par le Client, notamment en ce qui concerne la sécurisation et la préservation desdites données.

OVH rappelle  au Client  que sauf disposition contraire, l'offre Dedicated Cloud ne comprend nide plan de continuité d'activité (PCA), ni de plan de reprise d’activité(PRA). En ce sens, il appartient au Client de mettre en place son PCAet/ou son PRA, il peut à ce titre commander des Dedicated Cloud dans des centres de données distincts ce qui lui permettra de disposer de ressources dans des environnements de risques différents. Le Client devra ensuite prendre les
mesures  techniques   et   organisationnelles  nécessaires  au  maintien  de   son  activité  dans l'hypothèse  d'un  dysfonctionnement  majeur  susceptible  d'avoir  un  impact  en  terme  de disponibilité, intégrité ou confidentialité sur son Service.

Pour le PCC, le contrat est plus que clair.

Je n'ai toujours pas vu d'espace backup fournis par OVH dans le même DC que l'offre  vps/serveur dediés souscrite.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 12 mars 2021 à 20:47:24
tu veux dire qu'une sauvegarde, ça devrait être offrir une prestation garantissant que la donnée sauvegardée est indestructible en toute circonstance ?
Vu les prestations que vend OVH, OVH a probablement une obligation de résultats (par opposition à une obligation de moyens).
Mais c'est à la justice de trancher, si des clients se retournent contre OVH. Je ne sais pas s'il existe des précédents qui peuvent faire jurisprudence.

Un contrat avec obligation de moyens, ça serait par exemple un prestataire informatique que tu payes à l'heure.

Pour le PCC, le contrat est plus que clair.
Beaucoup de contrats comportent des clauses abusives qui tentent de dédouaner le fournisseur/prestataire. Ces clauses peuvent être facilement rejetées/démontées par un juge. On voit ça dans pleins de domaines : banque, finance, transport, télécom, informatique.
Je ne sais pas si c'est le cas ici, mais ça me semble tout à fait possible.

Dire dans un contrat de sauvegarde (même si c'est une prestation associée à une prestation principale) "la sauvegarde a le droit de ne pas fonctionner", je ne suis pas sur que ça soit légal comme clause.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thenico le 12 mars 2021 à 20:49:31
Tous les contrats OVH ont cette phrase:
Citer
En  raison  de  la  haute  technicité  du  Service,  OVH  n’est soumise  qu'à  une  obligation  de  moyens
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 20:55:22
clause ab*sive ? on en est pas loin ?!

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 12 mars 2021 à 20:58:43
Concernant les autres offres qui comportent des backups réalisés sur le même site, certes ce n'est pas très judicieux de proposer de telles offres mais jusqu'à preuve du contraire OVH n'a pas menti dans ses contrats.

On peut avoir raison techniquement et contractuellement et pour autant avoir tord moralement et commercialement. Et perdre de la réputation.

OVH connait ses clients et le niveau technique que certains ont.
Ils font une partie de leur chiffre grâce a des gens peu techniquement compétents qui fournissent des services a plein de petites PME et assos.
Sachant cela ,je n'ai pas vu OVH faire des campagnes d'informations sur les backup ou faire d'eux-mêmes une copie hors site de toutes les données qu'ils stockent même celles sans plan de sauvegarde.

Apres si le but c'était de virer tout ses petits intermédiaires peu compétents et forcer les clients finaux à partir sur des solutions SaaS de CMS et E-Commerce la c'est gagné. Ce genre d'incident va certainement accélérer cette tendance (et c'est peut-être pas un mal?). Mais je craint que cela profite plus aux multinationales du cloud (les GAM) sur lesquels s'appuient les prestataires de SaaS qu'a des sociétés françaises.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 12 mars 2021 à 21:07:20
Vu les prestations que vend OVH, OVH a probablement une obligation de résultats (par opposition à une obligation de moyens).
Mais c'est à la justice de trancher, si des clients se retournent contre OVH. Je ne sais pas s'il existe des précédents qui peuvent faire jurisprudence.

A mon sens, ça n'a pas grand chose à voir. Sauvegarder les données, c'est juste en fait une copie, non pas garantir à leur propriétaire qu'il pourra les récupérer en toute circonstance.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: d_t_f le 12 mars 2021 à 21:09:02
En ce qui concerne la critique sur le bois, les choses ne sont peut-être pas si évidentes que ça :

https://www.bois.com/construction-renovation/maison/construction-bois-incendie

http://www.eiffageconstruction.com/realisations/ilot-bois-sensations-strasbourg

Bien entendu on parle ici d'habitation, et ce qui convient pour une habitation ne convient pas nécessairement à un DC.
Mais les choses ne sont pas peut-être pas aussi simples qu'elles en ont l'air...

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quentin96 le 12 mars 2021 à 21:15:39
Beaucoup trop de gens confondent backup et HA.

Backup : S'assurer que la donnée est stockée de manière pérène dans le temps, avec un accès lent (qq minutes a plusieurs jours/semaines)
HA: Haute disponibilité, s'assurer que le service soit toujours disponible, meme en cas de panne d'un noeud du cluster, le tout de manière transparente pour l'utilisateur.

Beaucoup pense faire du backup, alors qu'ils font du HA .

Exemple: Stockage sur bande magnétique (backup) vs grappe RAID (HA)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 21:34:38
J'ai souvenir avoir posé une question sur twitter à OLES sur la protection incendie en 2013, suite au sujet OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/)

De mémoire la réponse était qu'il y avait des centaines de caméras de surveillance et du personnel 24h/24, ce qui était suffisant.

J'aimerais bien retrouver son message, mais retrouver un message de 2013 sur twitter, c'est pas simple. Vous avez une idée ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Invarion le 12 mars 2021 à 21:39:16
J'ai souvenir avoir posé une question sur twitter à OLES sur la protection incendie en 2013, suite au sujet OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/)

De mémoire la réponse était qu'il y avait des centaines de caméras de surveillance et du personnel 24h/24, ce qui était suffisant.

J'aimerais bien retrouver son message, mais retrouver un message de 2013 sur twitter, c'est pas simple. Vous avez une idée ?
(from:olesovhcom) (to:lafibreinfo)Mais je ne vois pas de trace de ce message, peut-être supprimé ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 21:49:06
C'est peut-être une réponse à un message d'une autre personne qui demandait si ce qui était dit sur OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/) est vrai.

J'aurais du faire une copie d'écran de la réponse.

C'est triste qu'il soit nécessaire d'attendre un sinistre pour faire évoluer les choses.

Maintenant c'est souvent ça dans pleins de secteurs...

Le jour où l’impensable se produit, on apprécie d’avoir mis cette sécurité. (Pour rappel, l’accident de Fukushima aurait pu être évité, si la centrale avait prévu de raccorder en urgence des groupes externes. Les groupes acheminés en urgence le jour même par hélicoptère n'ont pas pu être connectés, le refroidissement s’est arrêté quand les batteries se sont vidées et on connaît la suite. Les ingénieurs ont sûrement supposés qu’avec les six lignes d’alimentations électriques externes – toutes coupées par le séisme - et 12 groupes électrogènes de secours à moteur diesel, inondés par le tsunami, c’était inutile).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quent1 le 12 mars 2021 à 21:52:45
J'ai souvenir avoir posé une question sur twitter à OLES sur la protection incendie en 2013, suite au sujet OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/)

De mémoire la réponse était qu'il y avait des centaines de caméras de surveillance et du personnel 24h/24, ce qui était suffisant.

J'aimerais bien retrouver son message, mais retrouver un message de 2013 sur twitter, c'est pas simple. Vous avez une idée ?

Pas réussi à retrouver le(s) tweet(s) en question, mais il y a ceux-ci qui pourraient s'en rapprocher : https://twitter.com/ronniegarcia/status/322096287799455744
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 12 mars 2021 à 21:57:22
J'ai retrouvé que OVH a été victime d'un hacker en 2013  :o

http://travaux.ovh.net/?do=details&id=8998
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 12 mars 2021 à 21:58:38
Pas réussi à retrouver le(s) tweet(s) en question, mais il y a ceux-ci qui pourraient s'en rapprocher : https://twitter.com/ronniegarcia/status/322096287799455744

Ce n'est pas pour un datanceter OVH en France mais au Canada.

Rappel du point actualisé d'OVH sur l'Incendie de Strasbourg :
(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)

Les bulletins précédents :
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 22:16:13
J'aurais du faire une copie d'écran de la réponse.
C'est triste qu'il soit nécessaire d'attendre un sinistre pour faire évoluer les choses.

Et tu crois que ce méssage serait la preuve d'un secret de polichinelle ?




Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 12 mars 2021 à 22:17:10
C'est à qui ce compte ?

https://mobile.twitter.com/olesovhlol?lang=fr

Ça taille sec : https://mobile.twitter.com/olesovhlol/status/1060120788714557440?s=20
(https://lafibre.info/images/ovh/201811_twitter_olesovhlol_1.jpg)

(https://lafibre.info/images/ovh/201811_twitter_olesovhlol_2.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 22:23:42
L'accident électrique de SBG en 2017 avait déjà montré le "concept OVH" aux IT.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Cryptage le 12 mars 2021 à 22:53:18
L'accident électrique de SBG en 2017 avait déjà montré le "concept OVH" aux IT.

A ce sujet, on trouvait ceci : http://travaux.ovh.net/?do=details&id=28247


À long terme
------------
La technologie basée sur les containers maritimes ne sera plus utilisée par OVH. En effet, elle n’a été utilisée que pour construire SBG1 et SBG4, et hérite des imperfections de design liées à la faible ambition initialement prévue pour le site. Aujourd’hui, nous réalisons qu’elle n’est plus adaptée aux exigences de notre métier et aux normes OVH. Nous allons donc démanteler SBG1 et SBG4.

Pour cela, une migration de l’ensemble des services de nos clients hébergés sur SBG1 et SBG4 sera opérée vers SBG2 et SBG3 ou sur d’autres datacentres OVH.



3 ans et demi plus tard rien n'a bougé...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: chantoine le 12 mars 2021 à 23:00:41
C'était plus urgent de s'occuper de l'intro en bourse probablement.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Drealine le 12 mars 2021 à 23:16:04
Bonjour à tous.

Reçu à 21h, un mail d'OVH concernant les VPS.
Petit HIC, pas de possibilités de voir le VPS depuis le manager afin de savoir si il se trouve (ou trouvait) dans SBG2, je ne suis pas le seul ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dj54 le 12 mars 2021 à 23:23:31
Reçus aussi  ;)
Si votre VPS est situé dans le datacenter SBG3 (correspondant à la localisation VPS SBG6), celui-ci pourra être remis en service à partir du 22 mars prochain.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 12 mars 2021 à 23:24:06
C'était plus urgent de s'occuper de l'intro en bourse probablement.

pas du tout. vu que le concept "low-cost" existait depuis des années......
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 12 mars 2021 à 23:26:24
Bonjour à tous.

Reçu à 21h, un mail d'OVH concernant les VPS.
Petit HIC, pas de possibilités de voir le VPS depuis le manager afin de savoir si il se trouve (ou trouvait) dans SBG2, je ne suis pas le seul ?

J'ai reçu le mail aussi  et je vois bien le seul vps que j'ai chez eux dans le manager. ca affiche SBG1 donc d'apres leur mail  il était dans SBG2 donc cramé completement:

Citer
Chère cliente, cher client,

À la suite de l'incendie survenu le 10 mars dans notre datacenter de Strasbourg (SBG), les services VPS ont été affectés.

Les impacts varient en fonction de la localisation de votre solution :

Si votre VPS est situé dans le datacenter SBG2 (correspondant aux localisations VPS SBG1, SBG2 et SBG4), celui-ci ne pourra pas être remis en service.
Nous vous conseillons donc de commander une solution alternative dans notre centre de données de Gravelines (GRA), où nous renforçons nos capacités. Afin de vous accompagner, nous appliquerons une gratuité équivalente à 6 fois le montant de votre facture de février 2021 pour ce service.

Si votre VPS est situé dans le datacenter SBG3 (correspondant à la localisation VPS SBG6), celui-ci pourra être remis en service à partir du 22 mars prochain.
➜ Pour connaitre la localisation de votre/vos VPS, connectez vous à votre espace client

je plaint ceux qui voyaient SBG4 et croyaient que leur VPS allait revenir la semaine prochaine.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Drealine le 12 mars 2021 à 23:31:00
Aïe.

Je crois que c'est un peu aléatoire cette histoire de disparition du VPS dans le manager.
Est-ce qu'un simple WHOIS peut valider le lieu du VPS ?
Si je fais un WHOIS sur mon VPS hébergé à SBG, j'ai : "netname:        VPS-SBG6"

Cependant, en faisant le test sur mon autre VPS basé à GRA, le netname ne me ressort pas le bon endroit où est présent mon VPS. D'où mon incertitude quant à la validité du netname. Peut-être qu'il s'agit plutôt de l'emplacement des routeurs/FW.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 12 mars 2021 à 23:43:29
toujours aussi claire la nomenclature ovh :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 12 mars 2021 à 23:46:07
SBG5 et 6 c'est apparemment des salles virtuelles.

https://www.tomsguide.fr/ovh-lincendie-dun-datacenter-a-strasbourg-secoue-linternet-europeen/

Citer
La totalité du datacenter de Strasbourg (SBG1 à SBG4), ainsi que les salles virtuelles SBG5 et SBG6) est donc actuellement à l’arrêt.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Drealine le 12 mars 2021 à 23:49:29
Parfait, merci de l'info.

On en tombe au même point, je pense que c'est le cas pour pas mal de monde en VPS, on ne sait pas où il est lol.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 12 mars 2021 à 23:51:23
Alors
Non
Mais en fait Si

Mais non


Pour résumer, tu as 2 nomenclatures :

L'infra physique :
SBG1/2/3/4/5 (le dernier étant en cours de construction pour remplacer la salle réseau de SBG2)

L'infra Virtuelle :
SBG 1/2/3/4/5/6 (Absolument aucune correlation avec les numéros de DC)


Honnêtement, je comprends pas pourquoi ils ont eu besoin de faire des numérotations différentes... Je me renseigne :P

Edit : De ce que j'ai compris, c'est pour pouvoir ségmenter les clusters openstack et donc réduire les impacts de potentielles pannes
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 13 mars 2021 à 00:00:39
Alors
Non
Mais en fait Si

Mais non


Pour résumer, tu as 2 nomenclatures :

L'infra physique :
SBG1/2/3/4/5 (le dernier étant en cours de construction pour remplacer la salle réseau de SBG2)

L'infra Virtuelle :
SBG 1/2/3/4/5/6 (Absolument aucune correlation avec les numéros de DC)


Honnêtement, je comprends pas pourquoi ils ont eu besoin de faire des numérotations différentes... Je me renseigne :P

Edit : De ce que j'ai compris, c'est pour pouvoir ségmenter les clusters openstack et donc réduire les impacts de potentielles pannes
pratique d'avoir la meme nomenclature entre physique et virtuel et que cela ne corresponde pas :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kaffeine le 13 mars 2021 à 00:09:11
Minuit est passé, toujours pas de mail pour ma part. Je sens qu'il va falloir les relancer de mon côté...

Y a d'autres oubliés côté VPS ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 00:12:06
Peut-être que tu n'avais pas de VPS et que la réalité se trompe ? Qui sait...  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kaffeine le 13 mars 2021 à 00:35:47
Avec OVH plus rien ne m'étonnerait ^^. Bon, j'ai ouvert un ticket, je verrai bien. D'ailleurs, j'ai bien reçus le mail de la notif d'ouverture de ticket.

Après, je suis un cas un peu spécifique : souscription par téléphone avec pré-payement sur plusieurs années à l'avance. Je rentrais possiblement pas dans les cases du mail groupé VPS.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 01:05:15
Mail reçu a l'instant par un ami :

(https://lafibre.info/images/ovh/202103_ovh_communication_client_datacenter_strasbourg_suite_incendie.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 13 mars 2021 à 01:21:48
L'usine nouvelle et les echos (entre autres ?) parlent des lacunes de sécurité incendie remonté un peu partout sur le net...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 13 mars 2021 à 05:42:17
Tous les contrats OVH ont cette phrase:
En  raison  de  la  haute  technicité  du  Service,  OVH  n’est soumise  qu'à  une  obligation  de  moyens
Ca n'est pas si simple. Encore une fois, ce que tu écris dans un contrat n'est pas forcément acceptable vis à vis de la justice.
2 exemples : pour le transport de personne, et pour les télécom (à destination des clients finaux), la justice ou le législatifs ont déjà tranchés.
Leurs offres sont assorties d'obligations de résultat, même si le contrat dit le contraire. Ces 2 types d'acteurs ne peuvent pas prétendre à une obligation de moyens.
C'est à priori déjà dans la loi pour le transport de personne, et c'est uniquement dans la "jurisprudence" pour les télécoms.

Je ne suis pas juriste, mais ça ne m'étonnerait pas qu'un "cloud provider" soit traité de la même façon.

En cas de force majeure (des événements externes à l'entreprise, et imprévisibles, comme une catastrophe naturelle, des actes de vandalismes, une épidémie de COVID qui empêche les salariés de venir bosser), l'obligation de résultat se transforme implicitement en obligation de moyens.
Là, un incendie déclenché à l'intérieur d'OVH, ça n'est pas un cas de force majeure.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 13 mars 2021 à 08:11:19
La question primaire du dossier n’est pas si OVH est tenu a une obligation de moyen ou de résultat mais :
Si OVH est responsable réellement du sinistre. Une opération de maintenance avait en effet eu lieu peu avant l’incendie.

Si c’est le cas, OvH pourra facilement se retrancher derrière la responsabilité de son prestataire.

Si on vient a retenir la responsabilité ou co responsabilité d’OVH, faut il encore qu’un client puisse démontrer avec CERTITUDE l’importance des données qu’il avait sur serveurs et leurs valeurs... je ne connais aucune jurisprudence sur la valeurs d’une données

Existe des décisions sur une coupure de service ou perte de CA

ovh offre 3 à 6 mois de service et la justice ( a tord peut etre) evalue souvent le préjudice en fonction du coût du service...

Ovh pourra aisément plaider que quand une entreprise est dépendante du service pour son activité, un backup, autres solutions est essentielle. Ovh n’étant pas tenue 
A un devoir de conseil

Les chances de succès sont infimes et un tel procès en France (avec les appels, expertises, renvois...) durerait a minima 5 ans...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: patrick_01 le 13 mars 2021 à 08:25:29
Les chances de succès sont infimes et un tel procès en France (avec les appels, expertises, renvois...) durerait a minima 5 ans...
Et c'est pas plus mal, parce que ça montrera aux dirigeants d'entreprise et aux DSI que non, un contrat de prestation avec un cloud provider n'est pas une garantie, et qu'on ne peut pas se retrancher derrière (le prestataire nous le garantit contractuellement) pour éviter de garder au minimum en interne les compétences nécessaires à garantir la continuité / la reprise d'activité.

Pour ceux qui doivent arrêter toute leur activité ne serait-ce qu'une semaine, les 6 mois de service offerts ... bah...

ovh offre 3 à 6 mois de service et la justice ( a tord peut etre) evalue souvent le préjudice en fonction du coût du service...
Ben oui, c'est comme si tu achètes un PC tout neuf et que le disque explose avant la fin de la garantie... On va te changer ton disque, mais on ne va pas te remttre les données perdues ni te les indemniser, et si tu veux tenter des méthodes ésotériques de restauration, c'est toi qui payes...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Steph le 13 mars 2021 à 09:22:49
Cloudns a perdu un de ses dns chez ovh.
ns103.cloudns.net [217.182.183.225] (time out 2000ms)

|------------------------------------------------------------------------------------------|
|                                      WinMTR statistics                                   |
|                       Host              -   %  | Sent | Recv | Best | Avrg | Wrst | Last |
|------------------------------------------------|------|------|------|------|------|------|
|                              k-box -    0 |   36 |   36 |    1 |    1 |    3 |    1 |
|                                -    0 |   35 |   35 |    2 |    2 |    4 |    3 |
|                      Request timed out. -  100 |    8 |    0 |    0 |    0 |    0 |    0 |
|                        -    0 |   35 |   35 |   11 |   11 |   14 |   11 |
|                  ovh-2.par.franceix.net -    0 |   35 |   35 |   12 |   15 |   63 |   42 |
|                      Request timed out. -  100 |    8 |    0 |    0 |    0 |    0 |    0 |

|________________________________________________|______|______|______|______|______|______|
   WinMTR v1.00 GPLv2 (original by Appnor MSP - Fully Managed Hosting & Cloud Provider)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 13 mars 2021 à 09:36:59
Ca n'est pas si simple. Encore une fois, ce que tu écris dans un contrat n'est pas forcément acceptable vis à vis de la justice.
2 exemples : pour le transport de personne, et pour les télécom (à destination des clients finaux), la justice ou le législatifs ont déjà tranchés.
Leurs offres sont assorties d'obligations de résultat, même si le contrat dit le contraire. Ces 2 types d'acteurs ne peuvent pas prétendre à une obligation de moyens.

Oui enfin on ne sait toujours pas bien précisément à quel résultat ils seraient astreints. A mon avis, il faudrait déjà commencer par là.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Optix le 13 mars 2021 à 09:52:00
Petit rappel, l'obligation de moyen/résultat c'est simplement une question de, à qui revient la charge de la preuve :
- résultat : c'est l'entreprise de service qui doit prouver son manquement (ce qui peut sauter en cas de manquement du client (genre défaut de paiement), d'un tiers, ou force majeure.
- moyen : c'est au client de prouver le manquement de l'entreprise à ses propres obligations (et non au préjudice subi du manquement, attention, le raccourci est facile).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 10:05:42
Candysan, un site qui importe des choses vendues uniquement au Japon est indisponible, ils étaient hébergés a SBG2 et certaines de leur sauvegardes étaient a SBG2 égaiement.

Je découvre et aujourd'hui il ont mis un site temporaire ou ils ne vendent qu'un produit, un "Pack Découverte" composé de 20 friandises sucrées et salées vendues au Japon.
(https://lafibre.info/images/bistro/202103_candysan_pack_decouverte.webp)

Voici la vidéo tournée l'aprés-midi du jour de l'incendie :

https://lafibre.info/videos/datacenter/202103_ovh_incendie_strasbourg_impact_candysan.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: letsar le 13 mars 2021 à 10:29:40
J'ai souvenir avoir posé une question sur twitter à OLES sur la protection incendie en 2013, suite au sujet OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/)

De mémoire la réponse était qu'il y avait des centaines de caméras de surveillance et du personnel 24h/24, ce qui était suffisant.

J'aimerais bien retrouver son message, mais retrouver un message de 2013 sur twitter, c'est pas simple. Vous avez une idée ?

C'était pas plutôt aux alentours du 20 septembre 2012 qu'une réponse avait été apportée ?

https://lafibre.info/ovh-datacenter/data-center-ovh-roubaix-4/24/ (https://lafibre.info/ovh-datacenter/data-center-ovh-roubaix-4/24/)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 10:31:53
Par pur négligence et connerie de "conception" de ce barbecue à Strasbourg la casse sociale va être énorme..

J'ai déjà plusieurs exemples de boites de e-commerce qui n'ont plus rien, donc une de 20 salaries, l'autre de 12 ! plus de base de données NADA ! Ils n'ont plus qu'a déposer le bilan au plus vite pour éviter de passer en negatif.

Imaginez demain la même chose à Gravelines ? ou tout est dans le même bâtiment ? .... no comment...

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 13 mars 2021 à 10:43:14
Par pur négligence et connerie de "conception" de ce barbecue à Strasbourg la casse sociale va être énorme..

J'ai déjà plusieurs exemples de boites de e-commerce qui n'ont plus rien, donc une de 20 salaries, l'autre de 12 ! plus de base de données NADA ! Ils n'ont plus qu'a déposer le bilan au plus vite pour éviter de passer en negatif.

Imaginez demain la même chose à Gravelines ? ou tout est dans le même bâtiment ? .... no comment...

Oué enfin à un moment donné, on est censé s'occuper de faire ses backups soi-même aussi
Quand son activité dépend de base de données ou d'un site web, on prend ses précautions.
Malheureusement, les gens n'y connaissent pas grand chose l'apprenne à la dur

Sinon ce que je comprends pas, c'est la volonté de mettre les onduleurs etc ... dans les même salles que les serveurs en bout de rangé
Pourquoi pas mettre tout ça dans un couloir opposé, avec des sécurités supplémentaires (ventilation extractive etc ...)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 10:44:24
Par pur négligence et connerie de "conception" de ce barbecue à Strasbourg la casse sociale va être énorme..

J'ai déjà plusieurs exemples de boites de e-commerce qui n'ont plus rien, donc une de 20 salaries, l'autre de 12 ! plus de base de données NADA ! Ils n'ont plus qu'a déposer le bilan au plus vite pour éviter de passer en negatif.
On dirait les mecs qui se font choper a 200 sur l'autoroute, qui perdent leur permis et qui accusent les flics de leur avoir fait perdre leur boulot.

Si tu perds tout ton business à cause de la défaillance d'un prestataire, c'est que tu avais toi même fait preuve de négligence et de "connerie de conception".

C'est comme les boites qui tournent sur une FTTH Pro et qui pleurent quand le lien coupe, qui ne peuvent plus travailler et mettent tout le monde au chomage technique.

L'IT c'est pas un monde magique ou tout est indestructible et 100% fiable. L'incendie de SBG aura eu le mérite de le rappeler à tous.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 10:45:41
Sinon ce que je comprends pas, c'est la volonté de mettre les onduleurs etc ... dans les même salles que les serveurs en bout de rangé
On est sûr que c'est le cas ? De ce que disait Vivien j'avais cru comprendre que les onduleurs étaient dans une salle en dur au RDC.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 10:45:46
Sinon ce que je comprends pas, c'est la volonté de mettre les onduleurs etc ... dans les même salles que les serveurs en bout de rangé
Des infos que j'ai entendu passer, ce n'était pas le cas, les onduleurs étaient apparemment regroupés dans une partie "durcie" du batiment.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 13 mars 2021 à 10:48:10
Des infos que j'ai entendu passer, ce n'était pas le cas, les onduleurs étaient apparemment regroupés dans une partie "durcie" du batiment.

Ah j'ai rien dit alors, mais étonnant que ça puisse se répandre aussi rapidement alors  :-\
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 10:48:18
Ces gens en questions avait une offre de backup OVH, et ne récupèreront rien.





Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 10:49:20
Selon les pompiers le feu s'est propagé depuis les conteneurs donc ça voudrait dire que les UPS étaient dedans si c'est ce qu'ils ont vu brûler en premier avec les caméras thérmiques..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 10:51:05
Nous en revenons au même constat que depuis toujours,

OVH c'est bien pour le blog de Mme Michu, le club de Tennis du coin.

MAIS PAS POUR LES TPE PME et encore moins GRAND COMPTE.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 13 mars 2021 à 10:51:46
Une des leçons de cet incendie est qu'un feu d'onduleur, avec ses batteries, est très difficilement maîtrisables, et qu'il faut les  mettre à l'extérieur du bâtiment, pour pouvoir les isoler plus facilement.

Si ce sont bien des batteries lithium/ion, à vérifier :

Citer
Les dispositifs d’extinction classiques agissent souvent par étouffement du feu. Mais les batteries lithium, en s’embrasant, génèrent de l’oxygène, ce qui accélère le départ de feu. A ce titre, l'américain Johnson Controls a conçu un extincteur qui refroidit les cellules de batterie en surchauffe.

https://www.infoprotection.fr/un-extincteur-contre-les-explosions-de-batteries-au-lithium/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 13 mars 2021 à 10:54:31
Nous en revenons au même constat que depuis toujours,

OVH c'est bien pour le blog de Mme Michu, le club de Tennis du coin.

MAIS PAS POUR LES TPE PME et encore moins GRAND COMPTE.

Pour les grands comptes, je pense que OVH ne remplit pas les critères de toute manière
C'est ridicule de dire que OVH convient pas aux TPE/PME, ça reste un accident, ultra rare, mais possible...
Conditionné sa capacité de fonctionnement à un prestataire externe c'est de la négligence, du client.
Même quand j'avais un serveur minecraft quand j'avais 17ans, je faisais des backups automatique la nuit, que je rapatriais sur un DD externe chez moi
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 11:02:25
Selon les pompiers le feu s'est propagé depuis les conteneurs donc ça voudrait dire que les UPS étaient dedans si c'est ce qu'ils ont vu brûler en premier avec les caméras thérmiques..

Oui alors comment dire...

Tu tiens les infos des pompiers ? ou via la video d'Octave.

Octave est un "bon communiquant", bravo pour sa réussite mais c'est quand même surtout depuis toujours un énorme menteur et manipulateur.

Déjà a ses débuts à P11 Rue Amelot (salle mise à dispo par Free) il disait avoir un groupe électrogène, en réalité il n'y avait rien ! tout était alimenté depuis plusieurs Tarif Jaunes et à chaque coupure elec il devait trouver une explication bidon. J'ai encore le souvenir d'un ami qui a travaillé la bas quelques temps, il me disait que certains endroit de la salle c'était dur de ne pas faire un malaise tellement il y faisait chaud !

A P19 (ex site free aussi) idem, pas de secours électrique ! en cause l'interdiction de stocker du carburant dans le périmètre des tours Mercuriales (IGH)

Et des mensonges comme ça il y en a des centaines ! Roubaix a tenu aussi des années sur un seul chemin fibre !!! Vous savez comme au Canada aussi ou le jour ou ça a peté "ah il y en avait un second en construction".

Bref vu l'état du brassier à l'arrivée les pompiers n'ont pu rentrer DANS le site, donc impossible pour eux de voir un point plus chaud qu'un autre.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 11:08:25
Nous en revenons au même constat que depuis toujours,

OVH c'est bien pour le blog de Mme Michu, le club de Tennis du coin.

MAIS PAS POUR LES TPE PME et encore moins GRAND COMPTE.

N'importe quoi. C'est faux, tu ne sais manifestement pas de quoi tu parles.

Ici on est pas sur #frnog, on est sur un forum serieux, alors tes discussions de comptoir avec ton avis bien à toi sur ce genre de sujets, tu peux te les garder.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 11:10:13
Pour les grands comptes, je pense que OVH ne remplit pas les critères de toute manière
Si si, y'a plein de grosses boites chez OVH. Mais elles ont les moyens d'avoir un CDP dédié + des équipes en interne qui passent plus de 30s à étudier un produit avant de l'acheter de de baser toute leur IT dessus.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 11:10:35
Bref vu l'état du brassier à l'arrivée les pompiers n'ont pu rentrer DANS le site, donc impossible pour eux de voir un point plus chaud qu'un autre.
Euh, le repérage avec une caméra thermique aurait eu lieu 15 min après le déclenchement des alarmes. A ce moment là on peut penser que le feu n'avait pas encore l'intensité qu'il a atteint plusieurs heures plus tard.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 11:13:03
N'importe quoi. C'est faux, tu ne sais manifestement pas de quoi tu parles.

Ici on est pas sur #frnogbar, on est sur un forum serieux, alors tes discussions de comptoir avec ton avis bien à toi sur ce genre de sujets, tu peux te les garder.

Chacun son point de vue.

Par ailleurs je vous présente la première fibre Optique OVH à Roubaix.

https://www.google.fr/maps/@50.6910805,3.2003933,3a,15y,92.63h,93.04t/data=!3m7!1e1!3m5!1swIl7dCw9crtvA61kUidJKQ!2e0!5s20130601T000000!7i13312!8i6656

(oui c'est un BPE colsonné avec la fibre ensuite sur les candélabres. )
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 11:16:12
Non, ce n'est pas une histoire de point de vue, tu fais une vérité générale de ton avis.

OVH a plein de défauts, personne ne le niera, mais a un moment, il faut voir ce qu'on a en face.

La principale différence entre AWS et OVH, par exemple, c'est qu'il y'en a un qui cloisonne sa communication à l'extrême, et un qui est transparent et qui communique sur chaque intervention.
Chacun ses choix de fournisseurs, mais OVH a des atouts non négligeables.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 11:19:08
Des infos que j'ai entendu passer, ce n'était pas le cas, les onduleurs étaient apparemment regroupés dans une partie "durcie" du batiment.
Moi, j'ai compris que les onduleurs et les batteries étaient au rez-de-chaussé du bâtiment.

Un tweet de oles en mai 2011 explique que c'est le rez-de-chaussé de Roubaix 4, datacenter de conception identique à SBG2.

On voit deux onduleurs :
(https://lafibre.info/images/ovh/201105_rbx4_nouveaux_onduleurs.jpg)

Les batteries semblent a coté, même si aucun tweet n'indique leur étage : (il serait étonnant de les placer dans les étages si les onduleurs sont en bas, vu l'intensité, les batteries sont généralement à proximité des onduleurs.)
(https://lafibre.info/images/ovh/201105_rbx4_les_batteries.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 13 mars 2021 à 11:19:39
Selon les pompiers le feu s'est propagé depuis les conteneurs donc ça voudrait dire que les UPS étaient dedans si c'est ce qu'ils ont vu brûler en premier avec les caméras thérmiques..
OVH c'est bien pour le blog de Mme Michu, le club de Tennis du coin.
MAIS PAS POUR LES TPE PME et encore moins GRAND COMPTE.
Pour les grands comptes, je pense que OVH ne remplit pas les critères de toute manière
Messieurs, (ou mesdames, je n'en sais rien) je vous en supplie, arrêtez de diffuser des fausses informations.
OVH est très utilisé par les grands comptes. Et dans beaucoup de cas, ça se passe assez bien. OVH vend plein de produits différents, adaptés à tout type de besoins, et toute taille d'entreprise. Et en général, les grands comptes savent ce qu'ils achètent, le niveau de qualité qu'ils peuvent attendre d'un OVH (plus faible que la moyenne), donc ils ont peu de surprise.

Pour les onduleurs, on l'a déjà dit plusieurs fois ici : les onduleurs + transfo + TGBT étaient évidemment dans des salles en dur, au centre de la tour. Donc les onduleurs ne sont pas dans la structure légère et préfabriquée du bâtiment.
Reste à voir si ces salles onduleur étaient équipés de parois coupe feu, et de quelle catégorie. Peut-être que nous ne le saurons jamais.
La très grande majorité des datacenter ont des batteries dans le même bâtiment que les serveurs.

Une des leçons de cet incendie est qu'un feu d'onduleur, avec ses batteries, est très difficilement maîtrisables, et qu'il faut les  mettre à l'extérieur du bâtiment, pour pouvoir les isoler plus facilement.

Si ce sont bien des batteries lithium/ion, à vérifier :
https://www.infoprotection.fr/un-extincteur-contre-les-explosions-de-batteries-au-lithium/
On l'a déjà dit : la très grande majorité des onduleurs de datacenter, c'est des batteries au plomb, beaucoup moins dangereuses et instables que les batteries Li-Ion. A OVH, c'est clairement des batterie au plomb. C'est sur et certain.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 11:23:55
Tu tiens les infos des pompiers ? ou via la video d'Octave.

Les pompiers.

Octave est un "bon communiquant", bravo pour sa réussite mais c'est quand même surtout depuis toujours un énorme menteur et manipulateur.

Bof, Xavier Niel est quand même plus fort. OVH a toujours été connu pour être de la petite qualité bon marché.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 11:24:51
Oh une boule de Sapin de Noel  8)

https://www.google.fr/maps/@50.6913781,3.2003227,3a,67.4y,84.74h,133.08t/data=!3m7!1e1!3m5!1s_qDsaGCNP_ApZLLa149luA!2e0!5s20140801T000000!7i13312!8i6656
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 13 mars 2021 à 11:24:59
Chacun son point de vue.

Il n'y a pourtant rien à discuter sur le fait qu'une PME peut payer des backups multi-sites... je reprends l'exemple de vivien en disant qu'il suffit de vendre le paquet de XX friandises japonaises par exemple 3,35€ et non pas 3,25€ pour payer cette prestation.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 11:25:31
Pour les onduleurs, on l'a déjà dit plusieurs fois ici : les onduleurs + transfo + TGBT étaient évidemment dans des salles en dur, au centre de la tour. Donc les onduleurs ne sont pas dans la structure légère et préfabriquée du bâtiment.

Fausses informations ? Regarde la vidéo avec les pompiers.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 11:29:15
Je confirme que de nombreux datacenter on des onduleurs et batteries directement dans les salles des serveurs.
Il y a même des systèmes qui prennent place entre deux rack.

Là pour SBG2, c'est pas dans les salles des serveurs, mais en dessous.

Pour SBG1, le datacenter constitué de 12 containers, je ne sais pas où sont les onduleurs / batteries.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 11:30:40
Selon les pompiers le feu s'est propagé depuis les conteneurs donc ça voudrait dire que les UPS étaient dedans si c'est ce qu'ils ont vu brûler en premier avec les caméras thérmiques..
On est d'accord que les conteneurs c'est SBG1 et que ça voudrait dire que le feu serait parti de SBG1 avant de s'étendre à SBG2 ? Jusqu'à présent j'ai toujours entendu l'inverse.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 11:33:14
On est d'accord que les conteneurs c'est SBG1 et que ça voudrait dire que le feu serait parti de SBG1 avant de s'étendre à SBG2 ? Jusqu'à présent j'ai toujours entendu l'inverse.

C'est ce que les pompiers disent dans la vidéo. Ils disent qu'ils étaient là avant que ça se propage à SBG2 ce qui dit bien à quel point ça brûle facilement. Donc si c'est à cause des onduleurs ça veut bien dire que ce sont ceux qui sont dans SBG1.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 11:36:02
L'incendie a affecté en premier les salles 71 et 72 de SBG2, c'est un fait indiscutable. Donc l'incendie est bien partie de SBG2.

Comment by OVH - Wednesday, 10 March 2021, 01:22AM
Plusieurs services sont actuellement impactés majoritairement dans les salles 71 et 72 du datacentre de SBG(Strasbourg).

====

Many services are currently impacted mainly in room 71 an 72 of SBG(Strasbourg) datacenter.


(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb2_apres_incendie.png)

Je ne connais pas la localisation des salles 71 et 72, mais je suis prêt à parier que ce sont les salles du 1er étage de SBG2 ou des salles alimentées reliée au TGBT de l'onduleur qui a pris feu.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 11:43:24
L'incendie a affecté en premier les salles 71 et 72 de SBG2, c'est un fait indiscutable. Donc l'incendie est bien partie de SBG2.

Comment by OVH - Wednesday, 10 March 2021, 01:22AM


Je pense que c'est de la connerie, regarde l'heure déjà, ça faisait longtemps que ça brûlait et les pompiers étaient déjà sur place. C'est sûrement parce que dans SBG2 ils ont plus de survéillance que dans les conteneurs. Ce commentaire a dû être posté par des opérateurs qui ne sont même pas sur place.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 11:45:02
Vivien, peut être que les salles de SBG2 étaient alimentées sur des onduleurs dans SBG1 ? (tout est possible)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 11:57:51
SBG2 et SBG1 sont indépendants, ils ont leur propres groupes, propres onduleur.

Enfin, cela devrait être le cas en 2021 : (pour comprendre, lors de la panne de 2017, SBG3 venait d'être achevé et n'était pas encore ouvert commercialement)

Saluons le message d'Octave, qui donne une partie des piéces du puzzle pour comprendre comment l'impossible est arrivé.

Je le reprend ici pour mémoire :

Bonjour,
Ce matin à 7h23, nous avons eu une panne majeure sur notre site de Strasbourg (SBG) : une coupure électrique qui a mis dans le noir nos 3 datacentres SBG1, SBG2 et SBG4 durant 3h30. Le pire scénario qui puisse nous arriver.

Le site de SBG est alimenté par une ligne électrique de 20KVA composée de 2 câbles qui délivrent chacun 10MVA. Les 2 câbles fonctionnent ensemble, et sont connectés à la même source et sur le même disjoncteur chez ELD (Strasbourg Électricité Réseaux). Ce matin, l’un des 2 câbles a été endommagé et le disjoncteur a coupé l’alimentation des datacentres.

Le site SBG est prévu pour fonctionner, sans limite de temps, sur les groupes électrogènes. Pour SBG1 et SBG4, nous avons mis en place, un premier système de 2 groupes électrogènes de 2MVA chacun, configurés en N+1 et en 20KV. Pour SBG2, nous avons mis en place 3 groupes en N+1 de 1.4MVA chacun. En cas de coupure de la source externe, les cellules haute tension sont reconfigurées automatiquement par un système de bascule motorisé. En moins de 30 secondes, les datacentres SBG1, SBG2 et SBG4 sont ré-alimentés en 20KV. Pour permettre toutes ces bascules sans couper l’alimentation électrique des serveurs, nous disposons d’onduleurs (UPS) sachant fonctionner sans aucune alimentation durant 8 minutes.

Ce matin, le système de basculement motorisé n’a pas fonctionné. L’ordre de démarrage des groupes n’a pas été donné par l’automate. Il s’agit d’un automate NSM (Normal Secours Motorisé), fournit par l’équipementier des cellules haute-tension 20KV. Nous sommes en contact avec lui, afin de comprendre l’origine de ce dysfonctionnement. C’est toutefois un défaut qui aurait dû être détecté lors des tests périodiques de simulation de défaut sur la source externe. Le dernier test de reprise de SBG sur les groupes date de la fin du mois mai 2017. Durant ce dernier test, nous avons alimenté SBG uniquement à partir des groupes électrogènes durant 8H sans aucun souci et chaque mois nous testons les groupes à vide. Et malgré tout, l’ensemble de ce dispositif n’a pas suffi aujourd’hui pour éviter cette panne.

Vers 10h, nous avons réussi à basculer les cellules manuellement et nous avons recommencé à alimenter le datacentre à partir des groupes électrogènes. Nous avons demandé à ELD de bien vouloir déconnecter le câble défectueux des cellules haute tension et remettre le disjoncteur en marche avec 1 seul des 2 câbles, et donc limité à 10MVA. La manipulation a été effectuée par ELD et le site a été ré-alimenté vers 10h30. Les routeurs de SBG ont été joignables à partir de 10h58.

Depuis, nous travaillons, sur la remise en route des services. Alimenter le site en énergie permet de faire redémarrer les serveurs, mais il reste à remettre en marche les services qui tournent sur les serveurs. C’est pourquoi chaque service revient progressivement depuis 10h58. Notre système de monitoring nous permet de connaitre la liste de serveurs qui ont démarré avec succès et ceux qui ont encore un problème. Nous intervenons sur chacun de ces serveurs pour identifier et résoudre le problème qui l’empêche de redémarrer.

A 7h50, nous avons mis en place une cellule de crise à RBX, où nous avons centralisé les informations et les actions de l’ensemble des équipes. Un camion en partance de RBX a été chargé de pièces de rechange pour SBG. Il est arrivé à destination vers 17h30. Nos équipes locales ont été renforcées par des équipes du datacentre de LIM en Allemagne et de RBX, ils sont tous mobilisés sur place depuis 16H00. Actuellement, plus de 50 techniciens travaillent à SBG pour remettre tous les services en route. Nous préparons les travaux de cette nuit et, si cela était nécessaire, de demain matin.

Prenons du recul. Pour éviter un scénario catastrophe de ce type, durant ces 18 dernières années, OVH a développé des architectures électriques capables de résister à toutes sortes d’incidents électriques. Chaque test, chaque petit défaut, chaque nouvelle idée a enrichi notre expérience, ce qui nous permet de bâtir aujourd’hui des datacentres fiables.

Alors pourquoi cette panne ? Pourquoi SBG n’a pas résisté à une simple coupure électrique d’ELD ? Pourquoi toute l’intelligence que nous avons développée chez OVH, n’a pas permis d’éviter cette panne ?

La réponse rapide : le réseau électrique de SBG a hérité des imperfections de design liées à la faible ambition initialement prévue pour le site.

La réponse longue :
En 2011, nous avons planifié le déploiement de nouveaux datacentres en Europe. Pour tester l’appétence de chaque marché, avec de nouvelles villes et de nouveaux pays, nous avons imaginé une nouvelle technologie de déploiement de datacentres, basée sur les containers maritimes. Grâce à cette technologie, développée en interne, nous avons voulu avoir la souplesse de déployer un datacentre sans les contraintes de temps liées aux permis de construire. A l’origine, nous voulions avoir la possibilité de valider nos hypothèses avant d’investir durablement dans un site.

C’est comme ça que début 2012, nous avons lancé SBG avec un datacentre en containers maritimes : SBG1. Nous avons déployé 8 containers maritimes et SBG1 a été opérationnel en seulement 2 mois. Grâce à ce déploiement ultra rapide, en moins de 6 mois nous avons pu valider que SBG est effectivement un site stratégique pour OVH. Fin 2012, nous avons décidé de construire SBG2 et en 2016, nous avons lancé la construction de SBG3. Ces 2 constructions n’ont pas été faites en containers, mais ont été basées sur notre technologie de « Tour » : la construction de SBG2 a pris 9 mois et SBG3 sera mis en production dans 1 mois. Pour pallier aux problèmes de place début 2013, nous avons construit très rapidement SBG4, l’extension basée encore sur les fameux containers maritimes.

Le problème est qu’en déployant SBG1 avec la technologie basée sur les containers maritimes, nous n’avons pas préparé le site au large scale. Nous avons fait 2 erreurs :
1) nous n’avons pas remis le site SBG aux normes internes qui prévoient 2 arrivées électriques indépendantes de 20KV, comme tous nos sites de DCs qui possèdent plusieurs doubles arrivées électriques. Il s’agit d’un investissement important d’environ 2 à 3 millions d’euros par arrivée électrique, mais nous estimons que cela fait partie de notre norme interne.
2) nous avons construit le réseau électrique de SBG2 en le posant sur le réseau électrique de SBG1, au lieu de les rendre indépendant l’un de l’autre, comme dans tous nos datacentres. Chez OVH, chaque numéro de datacentre veut dire que le réseau électrique est indépendant d’un autre datacentre. Partout sauf sur le site de SBG.

La technologie basée sur les containers maritimes n’a été utilisée que pour construire SBG1 et SBG4. En effet, nous avons réalisé que le datacentre en containers n’est pas adapté aux exigences de notre métier. Avec la vitesse de croissance de SBG, la taille minimale d’un site est forcèment de plusieurs datacentres, et donc d’une capacité totale de 200.000 serveurs. C’est pourquoi, aujourd’hui, pour déployer un nouveau datacenter, nous n’utilisons plus que 2 types de conceptions largement éprouvées et prévues pour le large scale avec de la fiabilité :
1) la construction de tours de 5 à 6 étages (RBX4, SBG2-3, BHS1-2), pour 40.000 serveurs.
2) l’achat des bâtiments (RBX1-3,5-7, P19, GRA1-2, LIM1, ERI1, WAW1, BHS3-7, VIH1, HIL1) pour 40.000 ou 80.000 serveurs.

Même si l’incident de ce matin a été causé par un automate tiers, nous ne pouvons nous dédouaner de la responsabilité de la panne. A cause du déploiement initial basé sur les containers maritimes, nous avons un historique à rattraper sur SBG pour atteindre le même niveau de normes que sur les autres sites d’OVH.

Cet après-midi, nous avons décidé du plan d’actions suivant :
1) la mise en place de la 2ème arrivée électrique, totalement séparée, de 20MVA ;
2) la séparation du réseau électrique de SBG2 vis-à-vis de SBG1/SBG4, ainsi que la séparation du futur SBG3 vis-à-vis de SBG2 et SBG1/SBG4;
3) la migration des clients de SBG1/SBG4 vers SBG3 ;
4) la fermeture de SBG1/SBG4 et la désinstallation des containers maritimes.

Il s’agit d’un plan d’investissement de 4-5 millions d’euros, que nous mettons en route dès demain, et qui, nous l’espérons, nous permettra de restaurer la confiance de nos clients envers SBG et plus largement OVH.

Les équipes sont toujours en train de travailler sur la remise en route des derniers clients impactés. Une fois l’incident clos, nous appliquerons les SLA prévus dans nos contrats.

Nous sommes profondèment désolés pour la panne générée et nous vous remercions des encouragements que vous nous témoignez durant cet incident.

Amicalement
Octave


la fermeture de SBG1/SBG4 annoncée n'a pas été réalisée...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 12:01:39
C'est ce que les pompiers disent dans la vidéo. Ils disent qu'ils étaient là avant que ça se propage à SBG2 ce qui dit bien à quel point ça brûle facilement. Donc si c'est à cause des onduleurs ça veut bien dire que ce sont ceux qui sont dans SBG1.
Je ne sais pas de quelle vidéo on parle mais dans l'interview du commandant des pompiers (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847656/#msg847656), il dit très clairement que leur action a évité que le feu se propage aux bâtiments de gauche (SBG1) et de droite (SBG3) ce qui semble confirmer que l'incendie est bien partie de SBG2.

Petite recap du commandant de pompier qui est intervenue :
https://lafibre.info/videos/datacenter/202103_incendie_ovh_strasbourg_2.mp4
Source: StrasTV
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cali le 13 mars 2021 à 12:11:27
Je ne sais pas de quelle vidéo on parle mais dans l'interview du commandant des pompiers (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847656/#msg847656), il dit très clairement que leur action a évité que le feu se propage aux bâtiments de gauche (SBG1) et de droite (SBG3) ce qui semble confirmer que l'incendie est bien partie de SBG2.

Il dit aussi que le feu s'est propagé  à la structure de gauche. Je pense que les conteneurs sont reliés à SBG2 et que la fumé a été aspirée par SBG2. Si c'est le contraire j'ai du mal à imaginer que SBG1 ne soit pas complètement détruit car je vois pas comment les pompiers pouvaient facilement arroser les conteneurs et sur les vidéos on peut voir qu'ils sont encore fermés.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 12:24:58
Il dit aussi que le feu s'est propagé  à la structure de gauche.
Il dit "le feu s'est rapidement propagé à la structure qu'on peut voir sur notre gauche qui a fait une sorte de cheminée en fait et l'action des sapeurs-pompiers a pu éviter la propagation sur le bâtiment à droite et le bâtiment à gauche".

Pour moi "la structure qu'on peut voir sur notre gauche qui a fait une sorte de cheminée" c'est clairement SGB2.

Quand il dit que "le feu s'est rapidement propagé à la structure", c'est dans le sens d'embrassement généralisé du bâtiment sinon ce qu'il dit ensuite sur la propagation qui a pu être évitée sur le bâtiment de droite (SBG3) et de gauche (SBG1) n'aurait pas de sens.

Si c'est le contraire j'ai du mal à imaginer que SBG1 ne soit pas complètement détruit car je vois pas comment les pompiers pouvaient facilement arroser les conteneurs et sur les vidéos on peut voir qu'ils sont encore fermés.
Je comprends pas ce qui empêcherait d'arroser les conteneurs ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 13 mars 2021 à 12:29:27
Il dit aussi que le feu s'est propagé  à la structure de gauche. Je pense que les conteneurs sont reliés à SBG2 et que la fumé a été aspirée par SBG2. Si c'est le contraire j'ai du mal à imaginer que SBG1 ne soit pas complètement détruit car je vois pas comment les pompiers pouvaient facilement arroser les conteneurs et sur les vidéos on peut voir qu'ils sont encore fermés.

Dans ce bout de video, on voit qu'ils ont été ouvert, peut être à posteriori ..
https://youtu.be/CdPAELPzKSQ?t=167

Je suis pas un expert incendie, mais ce serai pas déconnant, que des containers résistent mieux à des incendies, s'ils sont plus ou moins isolés, l'oxygène à l'intérieur doit rapidement se consommer en cas de flamme, et des cubes d'acier ça doit être plus isolants aux flammes que des planchers en bois, surtout si tu les arroses à l'eau
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 12:35:29
Tu as raison, un container maritime c'est très solide, sauf que sur la vidéo tu peux voir que les flancs sont découpés pour mettre des grilles d'aération. La chaleur, des flammes ou des éléments incandescents n'ont eu aucuns mal à pénétrer dans SBG1 pour enflammer le tout.

La fumée est en gros à 600 degrés et suffit à enflammer des éléments proches. Et les flemmes entre 1200 et 1500 degrés, autant dire que ça ne s'approche pas facilement un foyer d'incendie :(



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: atome le 13 mars 2021 à 12:37:30
Je confirme que de nombreux datacenter on des onduleurs et batteries directement dans les salles des serveurs.
Il y a même des systèmes qui prennent place entre deux rack.
À noter aussi que de nombreux datacenter, surtout ceux qui font de l'housing, l'interdisent formellement. Chez LDCom à Marseille, devenu SFR, puis encore plus tard Interxion, les onduleurs rackables étaient strictement interdits.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: disco67 le 13 mars 2021 à 12:58:08
Toussa dehors ! Un onduleur n'a rien à faire dans un DC !!!!
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 13:13:14
Voici le plan du site, je ne suis pas sur de moi pour SBG4, mais je ne vois pas où il serait sinon :

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_plan.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 13 mars 2021 à 13:17:20
Nous en revenons au même constat que depuis toujours,

OVH c'est bien pour le blog de Mme Michu, le club de Tennis du coin.

MAIS PAS POUR LES TPE PME et encore moins GRAND COMPTE.

Bof. On a un esx à SBG3. Ca nous en a touché une sans faire bouger l'autre qu'il soit indisponible.

Tout simplement parce qu'on a toujours anticipé qu'il pouvait être indisponible (et irrécupérable).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 13 mars 2021 à 13:20:46
Cela veut dire que vous avez deux ESX redondants, sur deux sites différents, synchronisés ? Cela a un coût...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 13 mars 2021 à 13:28:13
ça veut surtout dire qu'on a des sauvegardes qui nous permettent de tout reconstruire rapidement.

Mais on a aussi quelques services critiques sur cet esx, qui eux sont redondés chez online sur une machine à 10€/mois.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kaffeine le 13 mars 2021 à 14:25:46
Mail reçu a l'instant par un ami :

(https://lafibre.info/images/ovh/202103_ovh_communication_client_datacenter_strasbourg_suite_incendie.png)
Merci Hugues pour la copie complète de l'email. Faute de ne l'avoir toujours pas reçus par la voie officielle, ça permet de savoir qu'il ne m'aurait pas appris grand chose de plus ^^.

Sinon, ils ont mis à jour les emplacements des VPS dans l'interface client, par exemple de mon côté :
Zone (Cluster)
os-sbg1-014 (cluster-001)
Localisation
Strasbourg (SBG1) - France

Est devenu :
Region OpenStack: os-sbg4
Localisation
Strasbourg (SBG) - France
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Erveka85 le 13 mars 2021 à 14:47:16
En lisant l'historique de l'implantation d'OVH à Strasbourg, on est surpris des décisions successives prises dans l'urgence et à moindre coût pour la construction de bâtiments stratégiques. Cela explique le sinistre. Un data center construit par un empilement de containers maritimes !!!! Même le plus mauvais des préventionistes aurait dû sonner l'alerte ! Dans les règles de l'art, tout Data Center doit être protégé contre l'incendie et être construit exclusivement avec des matériaux non combustibles. Les Data Center d'Orange, ou encore mieux, ceux de Data4 à Marcoussis sont des références. C'est un non sens absolu d'héberger de type d'activité critique dans des boites en métal installées à la va vite dans un coin d'une zone portuaire. Facile à dire après mais, on voit de plus en plus de fournisseurs, y compris de renom international, proposer des solutions hyper rapides en Algécos installés en moins de 2 mois. Dans le cas d'OVH SG2, outre le bois, je me pose la question de l'isolant utilisé dans les conteneurs. Aux vues des flammes et du panache de fumées, j'ai de sérieux doutes sur la présence d'isolant en PU, ce qui constituerait là un cas incroyable (mais on en a vu d'autres). Dans le cas de SBG2, outre les mauvaises infrastructures de base, se pose la question de la protection incendie. A priori, il n'y avait pas de sprinkleurs, ou en tous les cas il aurait dû faire au moins son office s'il avait été conçu de manière normale, pas d'extinction gaz, pas de watermist non plus je pense. J'espère me tromper, mais aux vues des images de l'incendie, tout porte à croire que ce data center critique était tout simplement équipé de .... détecteurs incendie et était bourré de matériaux combustibles.
Autrement dit de moyens efficaces pour sonner l'alarme et inviter les gens au spectacle !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 13 mars 2021 à 14:51:30
Les conteneurs c'est SBG1 qui a été détruit partiellement par l'incendie de SBG2 qui n'utilisait pas cette technique de construction (même si c'est aussi de la construction légère pour les étages).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 13 mars 2021 à 14:56:41
J'ai l'impression que c'est moins le cas aujourd'hui, mais OVH a toujours cherché à faire des économies pour faire baisser les coûts, ce système à des limites. Comme l'a dit Klaba pour les containers c'est au final une infra pas très opti pour leur activité, et que OVH a évolué sur ça, mais qu'ils ont hérité de toute une infra "legacy' qui faudrait mettre à la poubelle un jour.
Quand on voit SBG sur Google maps, ça fait vraiment terrain vague aménagé à la va-vite, et l'extérieur fait très foutoir .. (pas très pratique pour les pompiers...)
Par contre je m'interroge sur la pertinence d'installer leurs datacenters, à proximité d'entreprise Seveso, au bord de l'eau, et à proximité d'un site nucléaire (pour Graveline), ça ajoute pas mal de facteurs environnementaux
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 13 mars 2021 à 15:18:34
On m'a dit que le choix de Gravelines était d'avoir des latences faibles vers Londres avec un prix réduit
comparé aux offres anglaises.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 13 mars 2021 à 15:29:14

Cet après-midi, nous avons décidé du plan d’actions suivant :
1) la mise en place de la 2ème arrivée électrique, totalement séparée, de 20MVA ;
2) la séparation du réseau électrique de SBG2 vis-à-vis de SBG1/SBG4, ainsi que la séparation du futur SBG3 vis-à-vis de SBG2 et SBG1/SBG4;
3) la migration des clients de SBG1/SBG4 vers SBG3 ;
4) la fermeture de SBG1/SBG4 et la désinstallation des containers maritimes.

Il s’agit d’un plan d’investissement de 4-5 millions d’euros, que nous mettons en route dès demain, et qui, nous l’espérons, nous permettra de restaurer la confiance de nos clients envers SBG et plus largement OVH.

Les équipes sont toujours en train de travailler sur la remise en route des derniers clients impactés. Une fois l’incident clos, nous appliquerons les SLA prévus dans nos contrats.

Nous sommes profondèment désolés pour la panne générée et nous vous remercions des encouragements que vous nous témoignez durant cet incident.

Amicalement
Octave[/color][/size]

SBG2 et SBG1 sont indépendants, ils ont leur propres groupes, propres onduleur.

Enfin, cela devrait être le cas en 2021 : (pour comprendre, lors de la panne de 2017, SBG3 venait d'être achevé et n'était pas encore ouvert commercialement)

la fermeture de SBG1/SBG4 annoncée n'a pas été réalisée...
Du coup la mise en place d'une 2ème arrivée,totalement séparée, de 20MVA ça n'a jamais été fait non plus ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 13 mars 2021 à 16:32:26
Du coup la mise en place d'une 2ème arrivée,totalement séparée, de 20MVA ça n'a jamais été fait non plus ?

Pour être passé devant le site, il y a bien une 2nd arrivée électrique qui fut mit en place à l’extrémité nord du site (on le voit sur la photo sat aussi).

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 16:36:54
Perso je les vois ici :
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_plan_apple.jpg)

Et ici tout à gauche :
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_2.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 16:38:16
On voit d'ailleurs sur la photo du bas la présence d'une voie pompiers qui fait le tour du site. Encore un élément qui permet de montrer que le site n'était peut-être pas aussi mal préparé à un incendie que ce que l'on a pu penser au départ.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 13 mars 2021 à 16:46:08
Une voie pompier, ou une route faisant le tour pour avoir un sens unique de circulation sur le site et reduire le risque d’accident automobile et piétons ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 13 mars 2021 à 16:47:20
Par contre je m'interroge sur la pertinence d'installer leurs datacenters, à proximité d'entreprise Seveso, au bord de l'eau, et à proximité d'un site nucléaire (pour Graveline), ça ajoute pas mal de facteurs environnementaux

C'était un ancien site Arcelor Mittal avec déjà de fortes capacités de courant disponibles. C'est ce qui a motivé le choix de OVH de s'installer ici (comme pour Gravelines).

https://twitter.com/EPorteneuve/status/308545222642647041 (Octave se plaignait de la "lenteur" d'EDF/RTE pour construire une ligne supplémentaire à Roubaix )

Je ne retrouve plus son tweet Original, mais c'était peut être sur la mailling list OVH / Dedicated servers)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 13 mars 2021 à 16:49:15
Une voie pompier, ou une route faisant le tour pour avoir un sens unique de circulation sur le site et reduire le risque d’accident automobile et piétons ?
Le site a toujours été interdit au public par conséquent je ne pense pas que le traffic piéton/voitures soit énorme sur place, je doute aussi que ce soit un circuit de Karting pour les pauses, donc je vote aussi pour une voie pompier
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 13 mars 2021 à 17:14:56
et on voit bien sur la photo des pompiers qu'au milieu de l'incendie, SBG2 totalement en flamme, SBG1 n'était pas touché du tout (voir photos) avec les conteneurs pendant que ça brule à SBG2 puis après les 2 conteneurs du haut sont cramé (mais pas celui du RDC).

Ce qui tend à étayer que l'incendie a bien démarré sur SBG2 avant de se propager à SBG1 sur la fin.

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_7.jpg)

(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_8.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 18:20:54
C'est quoi le bâtiment blanc à l'extrémité gauche de la photo ?
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_aerien_2.jpg)

Il n'est pas présent sur les différents vue satellites (Google maps / Geoportail) :
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_plan.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 18:25:41
Une voie pompier, ou une route faisant le tour pour avoir un sens unique de circulation sur le site et reduire le risque d’accident automobile et piétons ?
C'est beaucoup trop clean par rapport au reste pour être une simple route pour les employés, on voit que ça a suivi un cahier des charges strict (pour supporter le poids de gros camions de pompiers)

C'est quoi le bâtiment blanc à l'extrémité gauche de la photo ?

SBG5
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 13 mars 2021 à 18:45:27
C'est beaucoup trop clean par rapport au reste pour être une simple route pour les employés, on voit que ça a suivi un cahier des charges strict (pour supporter le poids de gros camions de pompiers)
Une route belle et propre, avec marques bien délimitées à ne pas encombrer, c'est aussi très utile pour les camions et autres engins de levage qui sont nécessaire sur un tel site. Il faut pouvoir amener du matériel, gruter des groupes électrogènes, amener du carburant, etc... Un tel datacenter, c'est un site industriel.
Donc pas certain que OVH ait réalisé cette route exclusivement dans l'esprit d'améliorer la situation pour les services de secours.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 18:47:33
On m'a confirmé que c'était une voie pompier :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 19:04:36
SBG5

Exact, j'avais loupé la construction de ce nouveau datacentre...

J'ai trouvé peu de photos :

Mai 2020 :
(https://lafibre.info/images/ovh/202005_ovh_sbg5_construction.jpg)

Juin 2020 : Les cuves pour les groupes sont enterre

(https://lafibre.info/images/ovh/202006_ovh_sbg5_construction.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 13 mars 2021 à 19:08:22
On m'a confirmé que c'était une voie pompier :)

ON?

Oui après un sinistre incendie ca peut servir d’argument...

Mais ne rien avoir comme dispositif d’extinction automatique  incendie et prévoir une route pompier...

Ca tient pas debout

Clairement si le sdis avait du rendre son avis lors d’une dt ou pc, il y aurait eu une recommandation voir obligation d’avoir un tel dispositif
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 19:23:36
ON?
Oui, des gens qui n'ont pas d'intérêt a me raconter des bétises. Je ne dis pas de trucs pour me faire mousser ;)

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 13 mars 2021 à 19:59:04
Il y a quand même de grosses chances que les assurances exigent des accès pompiers pour une telle surface
de bâtiments.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 13 mars 2021 à 20:06:18
Tu peux mettre un accès pompier et avoir un réservoir d’eau naturel à proximité  ;)

si tu n’intervient pas dans les premières minutes pour stopper l’incendie c’est inutile de voiloir sauver le bâtiment ensuite
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 13 mars 2021 à 20:13:08
Une route belle et propre, avec marques bien délimitées à ne pas encombrer, c'est aussi très utile pour les camions et autres engins de levage qui sont nécessaire sur un tel site. Il faut pouvoir amener du matériel, gruter des groupes électrogènes, amener du carburant, etc... Un tel datacenter, c'est un site industriel.
Donc pas certain que OVH ait réalisé cette route exclusivement dans l'esprit d'améliorer la situation pour les services de secours.

La route ne semble pas faire le tour du terrain. Elle semble construite pour la mise en place de DC5. Je ne pense pas que sa construction ait été pensée uniquement pour l’accès pompier, même si son utilisation est aujourd'hui en voie pompier.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cl3f le 13 mars 2021 à 20:20:13
Pour moi qui bosse dans l’éducation,  cet incendie me fait penser a ceux des collèges à structure métallique construits dans les années 60.
Les choix architecturaux d’ovh sont avant tout économiques et ne me semblent pas illogiques dans un établissement qui n’accueille pas de public.
https://www.lesechos.fr/1998/12/ces-pailleron-la-structure-metallique-toujours-en-debat-804756
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 13 mars 2021 à 20:40:21
La route ne semble pas faire le tour du terrain. Elle semble construite pour la mise en place de DC5. Je ne pense pas que sa construction ait été pensée uniquement pour l’accès pompier, même si son utilisation est aujourd'hui en voie pompier.
Regarde bien les photos, tu verras que DC5 n'est pas du tout sur le chemin de la route et a sa propre entrée.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 20:55:06
C'est visiblement AXA qui va douiller (même si je pense qu'un dossier comme ça ne va pas se gérer en 1 semaine...), les primes pour les autres hébergeurs et SSII va encore grimper comme à l'époque de l'incident REDBUS !

https://www.argusdelassurance.com/les-assureurs/incendie-chez-ovh-qui-sont-les-assureurs-du-datacenter-de-strasbourg.179284

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 13 mars 2021 à 21:53:38
Donc maintenant le DC SBG3 n'est pas cramé mais détrempé et probablement "noir" par les fumées voisines :/

On y apprends aussi que la RAME HTA (donc il n'y en avait qu'une pour les 2 câbles en // à cramée, rendant donc impossible l'alimentation des autres DC.. et de plus par sécurité le distributeur locale (ce n'est pas ENEDIS à Strasbourg) a consigné l'arrivée. Donc contrairement à ce qui était annoncé chaque DC n'est pas électriquement indépendant les uns les autres :/

Bon courages aux gens sur place.. ça ne doit pas être simple à gérer.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)

Les bulletins précédents :
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Cryptage le 13 mars 2021 à 22:47:34
Perso depuis le départ je suis convaincu que tout ne sera pas si simple pour SBG3...

Je peux totalement me tromper mais je ne serais pas franchement étonné qu'une partie du matos ne démarre pas et surtout que sous quelques semaines des machines tombent comme des mouches.

J'ai vécu il y a quasi 15 ans un incident de ce type (incendie / eau) à proximité d'une petite salle info (on pouvait pas appeler ça un DC ;D ) et sur les 10 serveurs qui la composaient sur 6 d'entre eux on a eu des soucis dans le mois qui a suivi (quelques alimentations, 2 cartes mères me semble-t-il et surtout du disque dur en masse (ils n'ont pas du trop digérer le taux d'humidité élevé)).

Bon depuis les résistances des composants ont peut être évolué mais je suis curieux de voir ce que ça va donner...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 13 mars 2021 à 22:53:15
On y apprends aussi que la RAME HTA (donc il n'y en avait qu'une pour les 2 câbles en // à cramée, rendant donc impossible l'alimentation des autres DC.. et de plus par sécurité le distributeur locale (ce n'est pas ENEDIS à Strasbourg) a consigné l'arrivée. Donc contrairement à ce qui était annoncé chaque DC n'est pas électriquement indépendant les uns les autres :/
indépendant mais avec un spof en amont qui a cramé xD
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 04:23:31
update d'Octave a 11h20:

SBG1 : salle réseau  ok/ équipements en cours de vérification
SBG1 : 8 conteneurs ok / équipements en cours de vérification
SBG1 : 4 conteneurs détruits
SBG2 : complètement détruit
SBG3 : salles ok/ équipements ok / électricité coupée / pas d'ETA
SBG4 : salles ok/ équipements ok / électricité coupée / pas d'ETA
Mettre à jour 16h

Nous prévoyons de redémarrer le réseau SBG1 + SBG4 + d'ici le lundi 15 mars et SBG3 d'ici le vendredi 19 mars.

Chez RBX + GRA, nous avons le stock de nouveaux serveurs, pcc, pci prêts à être livrés pour tous les clients concernés. Bien sûr gratuitement. Nous ajouterons 10K serveurs dans les 3-4 prochaines semaines.


Source : Twitter OVH traduit par Google
La communication autour de DC3 était rassurante au début "SBG3 : salles ok/ équipements ok", sans publier de photos de tout ce qui est "ok". Le pincipal problème soulevé au début pour le redémarrage du site est l'électricité 20 000 volts de SBG3, mais plus on avance, plus on voit que ce n'est pas si simple... L'eau est rentrée par les nombreuses ouvertures de même que la fumée, car le faible vent poussait la fumée de DC2 en feu vers DC3.

SBG1, alimenté en 230v (donc possibilité de le faire fonctionner sur les groupes), avec une salle réseau intacte, là aussi on voit que ce n'est pas si simple. Le watercooling à été endommagé, il faut séparer les salles qui ont brûlées,...

Ils communiquent sur une nouvelle salle réseau SBG5, cela ne doit pas être que pour la redondance avec SBG1...

Autre problème indiqué par Octave : Le transfert des IPv4 attribuées à Strasbourg, que les clients souhaitent récupérer sur leur nouvelle infrastructure à Roubaix ou Gravelines.

Octave Klaba explique : we still have 20K IPv4 that are moving, ip per ip, from SBG to elsewhere. we are on it to accelerate it.

L'IPv6, cela ne sera sans doute pas la priorité.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 10:46:44
(https://lafibre.info/images/ovh/202103_ovh_incendie_temoignage_yoplanning.png)

par contre, ils croient que le RGPD les autorise à stocker les données des gens dans le cloud Microsoft, soumis au Cloud Act ??
#YOLO
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 10:55:39
On doit comprendre que SBG1 était relié sur un ou des transfos dans SBG2 qui ont cramés, je n'ai pas relu l'historique de leur incident de 2017 mais il possible d'imaginer qu'a l'ouverture du site de SBG1 le besoin électrique était modeste et qu'un tarif jaune 250 KVA était suffisant.

Qu'a la construction de SBG2 ils ont commandés un tarif vert en HTA et que l'arrivée distributeur et la rame de distribution HTA fut installée dans SBG2.. qu'au passage ils ont réalimenté en Base tension SBG1 depuis un transfo de SBG2..

Que par la suite à la construction de SGB3 etc ils ont ajoutés des inter/départ sur la rame HTA de SBG2 pour alimenter SBG3, 4 et 5.


Parcontre sur la partie groupe électrogène il y a 2 solutions, :

-Soit chaque TGBT de DC a ses propres groupes électrogènes et donc pourquoi ils n'ont pas depuis encore renvoyés de la tension ?!

-Ou l'ensemble des groupes électrogènes sont couplés entre eux avec ensuite un transformateur élévateur de tension pour réinjecter du 20KV dans la rame HTA commune dans SBG2.  (c'est la cas de TH2 qui relève la tension à 20KV en sortie de groupes électrogènes)







Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xillibit le 14 mars 2021 à 11:03:15
par contre, ils croient que le RGPD les autorise à stocker les données des gens dans le cloud Microsoft, soumis au Cloud Act ??
#YOLO
La CNIL avait rappelée ça quand il y a eu les histoires autour de Health Data Hub :

Citer
Elle rappelle aussi les obligations du RGPD qui « interdisent toute demande d’accès d'une juridiction ou d'une autorité administrative d'un pays tiers, adressée à des entreprises dont les traitements sont soumis au RGPD, en dehors d’un accord international applicable ou, selon l’interprétation du CEPD, de l’application d’une dérogation relative à l’intérêt vital de la personne concernée ».
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 14 mars 2021 à 11:04:10
C'est visiblement AXA qui va douiller (même si je pense qu'un dossier comme ça ne va pas se gérer en 1 semaine...), les primes pour les autres hébergeurs et SSII va encore grimper comme à l'époque de l'incident REDBUS !

https://www.argusdelassurance.com/les-assureurs/incendie-chez-ovh-qui-sont-les-assureurs-du-datacenter-de-strasbourg.179284

Je n’ai pas accès à l’article mais je doute que AXA débourse beaucoup car il y a certainement la clause qui va bien...

De plus, l’amortissement en informatique va très vite et que la valeur perd 30% / an...

Donc même si le capital assuré est important, ovh va devoir demontrer le préjudice réel...
Et du matos qui a plus de trois an, ca vaut plus rien pour une assurance

Et je doite que OVH a pris un contrat avec 0 vétusté car ca reviendrai plus cher que d’investir sur un système anti incendie performant

En droit des assurances, on ne peut en effet s’enrichir d’un sinistre
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 11:24:09
Sur un reportage Henryk KLABA annonçait que le cout de RBX4 (similaire a SBG2) était de 1 million € soit 20 fois moins qu'un DC "Normal".

Entre le faible terrassement, le montage de la structure métallique, le bardage, les panneaux bois et l'installation elec (Câbles, onduleur, transfo,) mais aussi les baies et les ventilateurs ça doit effectivement "coller".

Pour le prix des composants des serveurs là je ne suis pas assez expert sur le sujet pour chiffrer.

Reste que AXA pour le futur va surement faire réaliser des études de risques par un cabinet sur l'ensemble des sites.. et je doute qu'ils veuillent encore assurer longtemps OVH..  :-X


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 14 mars 2021 à 11:32:30
Reste que AXA pour le futur va surement faire réaliser des études de risques par un cabinet sur l'ensemble des sites.. et je doute qu'ils veuillent encore assurer longtemps OVH..  :-X
ça c'est sur qu'après un accident pareil les assureurs vont revoir leurs conditions, mais peut être qu'OVH aussi et va séparer les serveurs des onduleurs/batteries et peut être même des transformateurs ..

ça on va pouvoir "rapidement" en juger.. Si des travaux sont entrepris sur les autres DCs pour bien séparer les choses ou pas. Bien sur, ça ne se fera pas en un jour, mais on saura si des travaux en ce moment ont été entrepris d'ici 3 mois..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Steph le 14 mars 2021 à 11:41:13
Et je doite que OVH a pris un contrat avec 0 vétusté car ca reviendrai plus cher que d’investir sur un système anti incendie performant
C'est chaud, c'est bouillant, comme le sujet. ;)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 11:51:32
ça c'est sur qu'après un accident pareil les assureurs vont revoir leurs conditions, mais peut être qu'OVH aussi et va séparer les serveurs des onduleurs/batteries et peut être même des transformateurs ..

ça on va pouvoir "rapidement" en juger.. Si des travaux sont entrepris sur les autres DCs pour bien séparer les choses ou pas. Bien sur, ça ne se fera pas en un jour, mais on saura si des travaux en ce moment ont été entrepris d'ici 3 mois..

La c'est plutôt reconstruire entièrement des DC et les déménager dans d'autres zones si les assurances imposent un truc "sans trop de risques".
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 14 mars 2021 à 11:56:07
C'est chaud, c'est bouillant, comme le sujet. ;)

ou simplement que le risque incendie massif  d'un DC complet (et pas juste un courcircuit sur qq baies) n'a jamais était pris en compte par OVH.

Si le feu a effectivement comme origine et propagation un onduleur ( et/ou ces batteries plomb ? Lith-ion ?) ca devrait faire réfléchir l'industrie entière  de la batterie y compris la filière voiture électrique.



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 14 mars 2021 à 12:23:35
L'intro en bourse c'est mort.

Pour ce qui est de BLADE, ils pourraient tout de même le racheter si un DC est attelé à la vente...

Il suffierait de tout transferer les comptes BLADE sur les DC équivalent à SBG2 "all around the world"
qui vont, de facto, être limite assurable dorénavant.

Il restera intéréssant de compter le nombre de personnes dans X mois qui vont se barrer chez la concurrence a vu du fiasco...

Une pensée aussi aux 1000 voire 10000 personnes qui vont aller rejoindre pole emploi suite aux entreprises
qui vont couler faute de sauvegarde.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Myck205 le 14 mars 2021 à 12:30:31
ou simplement que le risque incendie massif  d'un DC complet (et pas juste un courcircuit sur qq baies) n'a jamais était pris en compte par OVH.

Si le feu a effectivement comme origine et propagation un onduleur ( et/ou ces batteries plomb ? Lith-ion ?) ca devrait faire réfléchir l'industrie entière  de la batterie y compris la filière voiture électrique.

Tu penses qu'ils attendaient que ça brûle chez OVH pour y réfléchir ? 😂
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 12:40:55
Blade n'a aucun serveurs, ils étaient loués à un tiers (il y a une grosse facture à payer).

C'est un rachat de technologie.

Il n'y a ni serveurs, ni datacenter.

Ça tombe bien, OVH est plutôt bon dans le hardware / datacenter (il y a un savoir faire très important) et a peu de compétences pour les couches hautes, même si ils veulent lancer un concurrent de Microsoft Office 365.

(https://lafibre.info/images/ovh/202102_ovh_alternative_office365_gsuite.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 14 mars 2021 à 12:54:28
ok dont acte. j'avais écrit cela rapidement on dira...

Reste que mettre cette technologie sur des equivalent SBG2 est toujours possible. plus aucun service pro ira dans ce type de DC sauf en connaissance de cause.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 14 mars 2021 à 13:04:28
ok dont acte. j'avais écrit cela rapidement on dira...

Reste que mettre cette technologie sur des equivalent SBG2 est toujours possible. plus aucun service pro ira dans ce type de DC sauf en connaissance de cause.

ce genre d'accident industriel ça remet en perspective le besoin d'avoir des compétences et une compréhension des technologies et pas uniquement écouter les vendeurs de rêves.



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 13:12:44
ça veut surtout dire qu'on a des sauvegardes qui nous permettent de tout reconstruire rapidement.

Mais on a aussi quelques services critiques sur cet esx, qui eux sont redondés chez online sur une machine à 10€/mois.

la bonne démarche. ca coute pas un rein, mais un peu de compétence...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 13:16:43
Un data center construit par un empilement de containers maritimes !!!!

un container maritime, c'est en acier, ca n'est donc pas combustible (d'ailleurs les locaux d'entrainement des pompiers sont souvent construits dans de tels containers).
par contre, un feu a l'extérieur peut transformer le container en four, et ce qui est dedans peut alors griller par surchauffe, mais ca c'est valable quel que soit le matériau de construction employé pour le batiment.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 13:24:26
Donc pas certain que OVH ait réalisé cette route exclusivement dans l'esprit d'améliorer la situation pour les services de secours.

un tel acces secours est obligatoire sur ce genre de site.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 14:01:22
un container maritime, c'est en acier, ca n'est donc pas combustible (d'ailleurs les locaux d'entrainement des pompiers sont souvent construits dans de tels containers).
par contre, un feu a l'extérieur peut transformer le container en four, et ce qui est dedans peut alors griller par surchauffe, mais ca c'est valable quel que soit le matériau de construction employé pour le batiment.


Le plancher d'un container est en bois :) certe mega solide et blindé de produits chimiques :)

Néanmoins une fois empilé il y a quand même le toit en acier corten pour "protéger" l'étage du dessus :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 14:06:32


Le plancher d'un container est en bois :) certe mega solide et blindé de produits chimiques :)

Néanmoins une fois empilé il y a quand même le toit en acier corten pour "protéger" l'étage du dessus :)

y'a meme 2 couches d'acier avec de l'air entre les 2...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 14:16:41
non, le dessous d'un container maritime est en bois (contreplaqué très épais), pas d'acier sauf les traverses.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 14:24:10
Je n'ai fait aucun publicité sur twitter pour ce sujet, mais c'est pourtant le plus populaire du forum

44 000 vues en seulement 4 jours et 7 heures, c'est énorme.

(https://lafibre.info/images/stats/202103_stats_lafibre_trafic_ip.png)

(https://lafibre.info/images/stats/202103_stats_lafibre_apache_accesses.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 14 mars 2021 à 14:25:09
Heureusement que ton forum n'étais pas là bas  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 14:42:07
Heureusement que ton forum n'étais pas là bas  8)

on peut supposer qu'il y a des backups hors sites, n'est-ce pas Vivien ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 14 mars 2021 à 14:57:24
un container maritime, c'est en acier, ca n'est donc pas combustible (d'ailleurs les locaux d'entrainement des pompiers sont souvent construits dans de tels containers).

Tu veux que l'on te rappelle les collègues type Pailleron à structure métallique ;) Le métal à l'état de poudre brûle très bien. A l'état solide, il fond et peut aussi brûler, à haute température.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 14 mars 2021 à 15:21:54
J'ai trouvé ce tableau :

http://www.jeanduperrex.ch/Site/Etat.html
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tick le 14 mars 2021 à 15:32:34
Blade n'a aucun serveurs, ils étaient loués à un tiers (il y a une grosse facture à payer).

C'est un rachat de technologie.

Il n'y a ni serveurs, ni datacenter.

Ça tombe bien, OVH est plutôt bon dans le hardware / datacenter (il y a un savoir faire très important) et a peu de compétences pour les couches hautes, même si ils veulent lancer un concurrent de Microsoft Office 365.

(https://lafibre.info/images/ovh/202102_ovh_alternative_office365_gsuite.jpg)

Je croyais que Blade acheté ses serveurs chez 2CRSi et les hebergés chez Equinix (et un autre dont j'ai oublié le nom où ils avaient eu un incendie)
Ils louent tout ça à qui du coup ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 14 mars 2021 à 15:48:35
un container maritime, c'est en acier, ca n'est donc pas combustible (d'ailleurs les locaux d'entrainement des pompiers sont souvent construits dans de tels containers).
par contre, un feu a l'extérieur peut transformer le container en four, et ce qui est dedans peut alors griller par surchauffe, mais ca c'est valable quel que soit le matériau de construction employé pour le batiment.
Le bâtiment qui a cramé n'était pas construit à base de containers, donc je ne sais pas pourquoi tu parles de ça.
Une route belle et propre, avec marques bien délimitées à ne pas encombrer, c'est aussi très utile pour les camions et autres engins de levage qui sont nécessaire sur un tel site. Il faut pouvoir amener du matériel, gruter des groupes électrogènes, amener du carburant, etc... Un tel datacenter, c'est un site industriel.
Donc pas certain que OVH ait réalisé cette route exclusivement dans l'esprit d'améliorer la situation pour les services de secours.
un tel acces secours est obligatoire sur ce genre de site.
Oui, et? Personne n'a dit le contraire. La route existait déjà avant. Ils l'ont juste refaite proprement.

Blade n'a aucun serveurs, ils étaient loués à un tiers (il y a une grosse facture à payer).

C'est un rachat de technologie.
Petit rappel : la proposition de rachat ne vient pas de OVHcloud, mais de Jezby-Ventures, une entreprise d'Octave Klaba qui finance et soutient des startup innovantes.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Myck205 le 14 mars 2021 à 15:53:20
Tu veux que l'on te rappelle les collègues type Pailleron à structure métallique ;) Le métal à l'état de poudre brûle très bien. A l'état solide, il fond et peut aussi brûler, à haute température.

Faut pas confondre non plus métaux et alliages, dont sont fait les containers

C'est mignon xp25, mais faudrait plutôt mettre un tableau qui concerne les alliages.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 16:02:48
Je croyais que Blade acheté ses serveurs chez 2CRSi et les hebergés chez Equinix (et un autre dont j'ai oublié le nom où ils avaient eu un incendie)
Ils louent tout ça à qui du coup ?
Blade doit payer 30,2 millions d'euros de commandes à 2CRSI : « 2CRSi est susceptible de ne pas être en mesure de recouvrer tout ou partie des sommes dues par le client [...] Les créances correspondantes dans les comptes consolidés au 28 février 2021 se montent à 10,8M€ (intérêts compris) [...] dans tous les contrats liant les deux sociétés, les serveurs fournis restent la propriété de 2CRSi jusqu'à ce que l'intégralité des loyers ou échéances soit payée par Blade ».

Donc si avec la liquidation judiciaire ces somme ne sont pas payées, le repreneur de Blade (probablement Jezby-Ventures, une entreprise d'Octave Klaba), ne récupéra pas les serveurs.

on peut supposer qu'il y a des backups hors sites, n'est-ce pas Vivien ?

J'ai même diffusé mon script, si cela peut aider :
=> Script bash simple pour faire une sauvegarde incrémentielle et différentielle d'un serveur et garder plusieurs sauvegardes, en ne stockant que les différentes entre-elles (https://lafibre.info/serveur-linux/sauvegarde-incrementielle/)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 14 mars 2021 à 17:07:54
Pour le coup, Blade loue aussi une partie de ses serveurs très haut de gamme à OVH (pas beaucoup par contre).
https://twitter.com/olesovhcom/status/1225460317762805762
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 17:08:35
Mise à jour de l'avancement des travaux :

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)

Les bulletins précédents :
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kaffeine le 14 mars 2021 à 17:22:08
Email enfin reçus à 15h28 aujourd'hui ^^. Voilà la différence entre un gros et un petit compte. Surtout que vu la réponse absolument pas personnalisée, il aurait très bien pu faire un mail groupé pour tous les utilisateurs impactés dès vendredi... La preuve du copier/coller malheureux : l'histoire des 6 fois la gratuité par rapport à la facture de février ne veut rien dire dans un cas comme le mien où cette facture de février égale 0 car prépayé à l'avance... Je suppose qu'ils vont plutôt me faire une prolongation de l'offre d'avril à octobre de 2022. Sauf que c'est tellement lointain qu'il pourra se passer plein de chose entre temps (notamment l'arrivé de la fibre qui rendra caduc la partie OVH de mon infra ^^). Je suis d'ailleurs pas le seul à le penser, il y a même une pétition qui s'est ouverte à ce sujet :https://www.change.org/p/ovh-pour-une-indemnisation-financi%C3%A8re-suite-%C3%A0-l-incendie-du-datacenter-ovh-%C3%A0-strasbourg (https://www.change.org/p/ovh-pour-une-indemnisation-financi%C3%A8re-suite-%C3%A0-l-incendie-du-datacenter-ovh-%C3%A0-strasbourg).

Sinon, je suis pas étonné du pic de trafic sur ce sujet du forum. J'ai moi même envoyé le lien à plusieurs connaissances externes au forum (et je dois surement pas être le seul). C'est probablement un des endroits du net où l’événement est le mieux traité d'un point de vue info et intervenants techniques. Ce qui permet de glisser un merci à Vivien pour la mise à disposition de cet espace ;).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 14 mars 2021 à 17:30:50
Un groupe a revendiqué l'incendie d'OVH, je vous laisse lire  ;D

Revendication de l’incendie d’OVH

Nous devons révéler cette information que les médias du monde entier ne manqueront pas de passer sous silence. Nous pensons être à l’origine de l’incendie qui dévasta, ce mercredi 10 mars, les data centers strasbourgeois d’OVH, premier hébergeur français. OVH, c’est 400.000 serveurs, 32 data centers, 2.500 salariés, 600 millions d’euros de chiffre d’affaires en 2019. Pour combien de Kilowatts d’énergie consommée ? On ne le sait pas exactement. Nous savons par contre que le numérique consommait 10 % de l’électricité mondiale en 2015. Aujourd’hui ce doit être pire.

Nous refusons les nuisances de l’industrie numérique, depuis les mines chinoises de métaux rares jusqu’aux décharges du Ghana et du Nigeria, en passant par la production d’électricité atomique, houillère, et renouvelable, partout sur la planète. Aussi, nous refusons le mode de vie imposé par l’industrie numérique, qu’accélère l’épidémie de Covid. Nous refusons la déshumanisation des rencontres et l’automatisation du travail. Nous refusons la 5G, la 4G, la fibre optique, et toutes ces technologies qui concourent au pilotage numérique de la planète et des comportements. Nous refusons la passivité imposée des écrans. Nous refusons l’enfermement sectaire et le genre de relations barbares engendrés par les bulles sociales que certains nomment encore « réseaux sociaux ». Nous luttons contre notre obsolescence programmée. Nous luttons plutôt pour la vie.

La date de notre action n’a pas été choisie au hasard. L’incendie devait se déclarer le 11 mars, pour le dixième anniversaire de la catastrophe de Fukushima. Nous avons remonté le flux numérique depuis un grille-pain connecté pour nous introduire jusqu’au data center d’OVH et déclencher un court-circuit, cela par la seule force de notre esprit, aidés seulement de quelques cartons de LSD. Mais les cartons étaient trop dosés, une fois à l’intérieur, on a fait n’importe quoi, et le feu s’est déclaré trop tôt – si toutefois la seule puissance de nos cerveaux défoncés peut causer de tels dommages, ce qu’on ne saura malheureusement jamais.

Voilà, désolé pour le contre-temps. Bonne journée.

L’Organisation Vraiment Hinfaillible.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 17:51:08
Email enfin reçus à 15h28 aujourd'hui ^^. Voilà la différence entre un gros et un petit compte. Surtout que vu la réponse absolument pas personnalisée, il aurait très bien pu faire un mail groupé pour tous les utilisateurs impactés dès vendredi...

ca prend un temps d'envoyer des dizaines de milliers de mails...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 14 mars 2021 à 17:51:55
L'intro en bourse c'est mort.

Il restera intéréssant de compter le nombre de personnes dans X mois qui vont se barrer chez la concurrence a vu du fiasco...

Une pensée aussi aux 1000 voire 10000 personnes qui vont aller rejoindre pole emploi suite aux entreprises
qui vont couler faute de sauvegarde.

Je n’en suis pas si sur.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: sxpert le 14 mars 2021 à 17:52:49
je vous laisse lire  ;D

y'a un typo, c'est "rire" que tu voulais écrire  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Steph le 14 mars 2021 à 18:00:33
Nous avons remonté le flux numérique depuis un grille-pain connecté pour nous introduire jusqu’au data center d’OVH et déclencher un court-circuit, cela par la seule force de notre esprit, aidés seulement de quelques cartons de LSD. Mais les cartons étaient trop dosés, une fois à l’intérieur, on a fait n’importe quoi, et le feu s’est déclaré trop tôt[/b] – si toutefois la seule puissance de nos cerveaux défoncés peut causer de tels dommages, ce qu’on ne saura malheureusement jamais.
OCB en 1994...
https://www.youtube.com/watch?v=40oNO7TlT8Q
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 14 mars 2021 à 18:03:01
Y a pas à se moquer des autistes  :'(
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: tomito le 14 mars 2021 à 18:58:36
J'ai perdu mon VPS non sauvegardé. À vrai dire ce n'est pas bien grave j'avais juste Serposcope d'installer dessus...
J'espérerai être épargné mais non... car en fait openstack-sbg1 était localisé dans SBG2

Citer
Concernant Public Cloud, les régions OpenStack directement affectées par l'incendie sont : openstack-sbg1, openstack-sbg2, openstack-sbg3 et openstack-sbg4 (physiquement dans le datacentre SBG2). Les régions openstack-sbg5 et openstack-sbg6 sont indisponibles (physiquement dans le datacentre SBG3), mais elles seront remises en service dès que SBG3 sera fonctionnel.

https://help.ovhcloud.com/fr/faq/strasbourg-incident/which-datacentres-are-affected-strasbourg/
https://help.ovhcloud.com/fr/faq/strasbourg-incident/datacenter-localisation-vps/

Tout ça pour dire qu'avant aujourd'hui il était difficile de savoir où était vraiment situé le VPS.


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: domi570 le 14 mars 2021 à 19:11:35
Bonjour,
Quant ont vois que l'ont veut faire le zéro papier et tout stocker en ligne,
il y en à qui vont avoir des surprises.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Invarion le 14 mars 2021 à 19:13:29
Bonjour,
Quant ont vois que l'ont veut faire le zéro papier et tout stocker en ligne,
il y en à qui vont avoir des surprises.
Dans un incendie, le papier ne se défend pas mieux.  ;D
Le problème c'est surtout les politiques de sauvegarde qui sont insuffisantes dans beaucoup d'entreprises.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Steph le 14 mars 2021 à 19:50:51
Mes informations importantes sont gravées sur des tablettes de marbre et dans ma tête.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 14 mars 2021 à 20:16:14
‘’C’était lieux avant’’

Oui oui, la sauvegarde sur disquette que l’on accrochait sur l’armoire avec un aimant  :D

Pour dire qu’aucun support n’est jamais infaillible..

Plus la data est importante, plus il faut multiplier les copies / sauvegarde...

Surtout qu’avec les techniques modernes tout peut être automatisé, ce qui limite le risque d’oubli et le facteur humain...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Lucien le 14 mars 2021 à 20:39:55
Oui oui, la sauvegarde sur disquette que l’on accrochait sur l’armoire avec un aimant  :D
J'ai croisé une secrétaire qui faisait ses sauvegardes consciencieusement, sortait le listing des fichiers et agrafait la disquette 5"1/4 avec la feuille avant de trouyoter l'ensemble pour le ranger dans son classeur.... 8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 14 mars 2021 à 21:16:42
Un petit sondage sur ce topic serait intéressant pour connaître le pourcentage de membres du forum qui ont tout perdu dans cet incendie :o

Question du genre :

- J'ai tout perdu, j'avais pas de backup
- j'ai tout perdu à SGB mais j'avais un backup @desk
- j'avais un backup sur le même site et j'ai tout perdu
- j'avais un backup sur le même site mais dans une partie qui n'a pas cramé "i'm feeling lucky"
- j'ai un backup sur GRV, RBX ou ailleurs heureusement
- je n'ai pas d'hébergement chez OVH
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: KalNightmare le 14 mars 2021 à 21:29:33
Un petit sondage sur ce topic serait intéressant pour connaître le pourcentage de membres du forum qui ont tout perdu dans cet incendie :o

Question du genre :

- J'ai tout perdu, j'avais pas de backup
- j'ai tout perdu à SGB mais j'avais un backup @desk
- j'avais un backup sur le même site et j'ai tout perdu
- j'avais un backup sur le même site mais dans une partie qui n'a pas cramé "i'm feeling lucky"
- j'ai un backup sur GRV, RBX ou ailleurs heureusement
- je n'ai pas d'hébergement chez OVH

Il manque :
- j’ai rien à SBG parce que c’est la ou il y a/avait le plus de problème chez OVH :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 14 mars 2021 à 21:33:42
Ah oui, on peut rajouter ça en effet  :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: patrick_01 le 14 mars 2021 à 21:51:55
Un petit sondage sur ce topic serait intéressant pour connaître le pourcentage de membres du forum qui ont tout perdu dans cet incendie :o
Je n'ai chez OVH que deux VPS "jetables", c'est à dire des services sans données stateful, que je peux reconstruire en 1 minute avec Ansible sur n'importe quel datacenter de n'importe quel fournisseur. Il ne sont pas à Strasbourg, puisqu'ils ne se sont pas arrêtés. Dommage, si ce datacenter est (était ...) vraiment le pire, c'est là qu'aurait dû se trouver ce genre de machines poubelles.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: bco_ le 14 mars 2021 à 22:18:44
Un petit sondage sur ce topic serait intéressant pour connaître le pourcentage de membres du forum qui ont tout perdu dans cet incendie :o

Question du genre :

- J'ai tout perdu, j'avais pas de backup
- j'ai tout perdu à SGB mais j'avais un backup @desk
- j'avais un backup sur le même site et j'ai tout perdu
- j'avais un backup sur le même site mais dans une partie qui n'a pas cramé "i'm feeling lucky"
- j'ai un backup sur GRV, RBX ou ailleurs heureusement
- je n'ai pas d'hébergement chez OVH

J'ai perdu un VPS qui n'était pas backup, car ce n'était qu'un DNS. Les 3 autres DNS sont sur d'autres sites d'OVH / d'autre provider. Donc VPS perdu mais 0 impact. Il faudra juste resync Bind avec le master :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 14 mars 2021 à 23:51:02
la bonne démarche. ca coute pas un rein, mais un peu de compétence...

surtout qu'aujourd'hui, avec des solutions comme xen-orchestra et xcp-ng, tu peux faire ça pour vraiment pas cher si tu n'as pas de moyens.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 07:09:04
OVH vient de publier une page avec la localisation des backup.
https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/

C'est assez surprenant et choquant de voir que pour plusieurs services, le backup était localisé dans le même datacenter, et pire, dans la même salle que le service lui même! Donc perdu définitivement.
C'est le cas pour le "Hosted private cloud", qui est censé être une offre haut de gamme, à plus de 1000euros par mois.

Bref, dans le cas de telles offres, je ne suis pas d'accord avec ceux qui disent "le client n'avait qu'à faire des sauvegardes". Ici, les sauvegardes étaient vendues par OVH.

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_backup_location.png)

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zorobabel le 15 mars 2021 à 07:55:22
Bref, dans le cas de telles offres, je ne suis pas d'accord avec ceux qui disent "le client n'avait qu'à faire des sauvegardes". Ici, les sauvegardes étaient vendues par OVH.

C'est marrant je vois ça de manière à peu près inverse.

Faire une sauvegarde, c'est juste faire une copie des données. Ces copies peuvent elles-mêmes être détruites selon l'ampleur du sinistre. Une sauvegarde, ce n'est pas une assurance de récupérer les données quoi qu'il arrive.

Alors autant le client qui prend un VPS à quelques euros, je peux comprendre qu'il ne réalise pas l'inconscience qu'il y a à confier l'intégralité de la gestion de ses données à un prestataire externe sans rien conserver par ailleurs. Autant ceux qui ont les moyens d'y mettre 1000€/mois et plus, je ne comprends pas. Sur de telles offres comme tu dis, c'est de l'incompétence.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 15 mars 2021 à 07:59:50
C'est le cas pour le "Hosted private cloud", qui est censé être une offre haut de gamme, à plus de 1000euros par mois.

même ceux qui ont demandé https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/zerto/

Ouille. même si on sait pas quel est le nombre de grands comptes qui avait pris cette option.

L'argent récupéré de l'assurance lui serviera à payer les procès aux fesses des pertes d'exploitation et
les plus grands comptes même pas touchés vont avoir tendance à se barrer. Ambiance.


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 15 mars 2021 à 08:03:42
Une sauvegarde, ce n'est pas une assurance de récupérer les données quoi qu'il arrive.

Exact.Tout dépend de sa redondance/QoS.

On a quand même vu très rarement une moyenne ou grosse boite couler parce que ses triples sauvegardes
multi-DC ont été mortes...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 15 mars 2021 à 08:19:37
OVH vient de publier une page avec la localisation des backup.
https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/

C'est assez surprenant et choquant de voir que pour plusieurs services, le backup était localisé dans le même datacenter, et pire, dans la même salle que le service lui même! Donc perdu définitivement.
C'est le cas pour le "Hosted private cloud", qui est censé être une offre haut de gamme, à plus de 1000euros par mois.

Bref, dans le cas de telles offres, je ne suis pas d'accord avec ceux qui disent "le client n'avait qu'à faire des sauvegardes". Ici, les sauvegardes étaient vendues par OVH.

Leon.

C'est clair que le PrivateCloud est l'infra qui a le plus morflé comparativement à son prix.
Par contre je ne sais pas d'accord avec ton analyse (le tableau d'OVH est peut-être trompeur), les Datastore dans le même salle c'est pour de la haute en dispo en aucun cas c'était du backup  (ou ça n'aurait pas du être vendu comme tel)....


Par contre là ou ça craint je trouve c'est la perte des 2/3 du "Managed Veeam Backup (Local DC)" pour ceux qui avaient pris l'option
Reste à savoir si le cette offre de backup était effectivement pour chaque client dans le même DC que les données primaire (SBG2-->SBG2) ou si c'était croisé entre bâtiments.

En tout cas ceux qui on choisi cette option en local sur le même DC/site, je ne connais pas quels étaient les options lors de la souscription.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 15 mars 2021 à 08:25:23
C'est assez surprenant et choquant de voir que pour plusieurs services, le backup était localisé dans le même datacenter, et pire, dans la même salle que le service lui même! Donc perdu définitivement.
C'est le cas pour le "Hosted private cloud", qui est censé être une offre haut de gamme, à plus de 1000euros par mois.

Leon.

De mémoire (a vérifier ) il existe une offre de sauvegarde pour les hosted private cloud qui permet d'externaliser la sauvegarde sur un autre DC.

Si c'est bien le cas et que le client ne prend pas cette option, c'est bien de la responsabilité du client.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 08:27:21
C'est clair que le PrivateCloud est l'infra qui a le plus morflé comparativement à son prix.
Par contre je ne sais pas d'accord avec ton analyse (le tableau d'OVH est peut-être trompeur), les Datastore dans le même salle c'est pour de la haute en dispo en aucun cas c'était du backup  (ou ça n'aurait pas du être vendu comme tel)....
Je ne comprends pas ton propos.
Regarde le tableau : on ne parle pas de High-Availability ici, mais bien de backup.
Il y a 2 colonnes, une pour l'offre elle même et une pour le backup de l'offre. Backup inclus ou en option d'ailleurs.
On parle bien de datastore et de backup du datastore. Les 2 étaient dans la même salle.

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_backup_location.png)

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 15 mars 2021 à 08:32:30
Je ne comprends pas ton propos.
Regarde le tableau : on ne parle pas de High-Availability ici, mais bien de backup.
Il y a 2 colonnes, une pour l'offre elle même et une pour le backup de l'offre. Backup inclus ou en option d'ailleurs.
On parle bien de datastore et de backup du datastore. Les 2 étaient dans la même salle.

Leon.

Internal Backup (DC/Service) : Sauvegardes effectuées par OVHcloud pour ses besoins de gestion du service (non contractuelles).
Internal Backup Status : L'état actuel de l'Internal Backup.


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 15 mars 2021 à 08:35:24
Exact.Tout dépend de sa redondance/QoS.

On a quand même vu très rarement une moyenne ou grosse boite couler parce que ses triples sauvegardes
multi-DC ont été mortes...

Suite à l'explosion d'AZF à Toulouse 80 sociétés ont déposées le bilan faute de ne plus avoir d'informatique, (l'onde de chocs a provoquée la destructions des disques durs).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 15 mars 2021 à 08:38:11
Suite à l'explosion d'AZF à Toulouse 80 sociétés ont déposées le bilan faute de ne plus avoir d'informatique, (l'onde de chocs a provoquée la destructions des disques durs).

même cause, même conséquences.

Ne pas négliger les backup et les avoir sur d'autres sites physique......
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 15 mars 2021 à 09:17:47
Ouest-France explique les problématiques de https://www.lampe-avenue.fr/ et https://sol-avenue.fr/ :

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_impact_incendie_sur_lampe-avenue.fr.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 15 mars 2021 à 10:22:54
On parle bien de datastore et de backup du datastore. Les 2 étaient dans la même salle.

Rien de choquant sur le principe : ça se voit chez nombre d'infogéreurs.
Dans ma société, les sauvegardes sont soit sur site (tarification de base), soit croisées sur le site de DRP, option supplémentaire, plus chère, à laquelle le client souscrit, ou pas.

Tu sembles penser que des sauvegardes externalisées c'est le standard du marché, à tord à mon avis : pour la bonne et simple raison que déporter des sauvegardes, par essence volumineuses, représente un coût important.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 15 mars 2021 à 10:30:29
en PCC, tu avais le choix entre les backups tier-1 qui étaient sur le site, et les backups tier2-3 qui étaient ailleurs.

Contrairement à Léon, je pense que ceux qui avaient du PCC sont ceux qui savent comment marche des sauvegardes et n'ont donc rien perdu.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 15 mars 2021 à 10:51:44
Sauf que les backup avec réplication hors site sont arrivé que début 2020 :
https://web.archive.org/web/20200409034940/https://www.ovhcloud.com/fr/enterprise/products/hosted-private-cloud/veeam-backup-managed/

L'offre de backup veeam avant 2020 :
https://web.archive.org/web/20191229060154/https://www.ovh.com/fr/private-cloud/options/veeam.xml
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Steph le 15 mars 2021 à 11:20:31
Ouest-France explique les problématiques de https://www.lampe-avenue.fr/ et https://sol-avenue.fr/ :
"On a retrouvé un site avec l'archivage de nos pages..."

C'est beau la naïveté!
C'est typiquement l'ère magique où tout se fait toujours tout seul et que la solution est ou vient d'internet...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Douks le 15 mars 2021 à 11:31:02
Ouest-France explique les problématiques de https://www.lampe-avenue.fr/ et https://sol-avenue.fr/ :

Il me semble avoir lu, pour cette entreprise, qu'ils allaient se baser sur archive.org pour reconstruire leur site.
C'est quel niveau dans l'amateurisme ?

C'est le moment de monter une société d'infogérance
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: geoffreyj le 15 mars 2021 à 11:40:41
Oui enfin a un moment faut arrêter de se voiler la face !
Je bouillonne quand je lis "On a tout perdu, même les sauvegardes" ou alors "on savait pas que les sauvegardes étaient au même endroit"
OVH est à blâmer sur certains points, oui c'est possible et probable, comme n'importe quelle boite aujourd'hui !
Mais faut aussi taper sur celui qui a commandé ou recommandé l'offre choisi !

Avant de commander on a fait un mini cahier des charges :
Qu'avons-nous besoin et comment sauvegarder les datas et où, ca nous a pris 1h de le définir.
En plus lors de la commande on a le choix de la localisation donc on a fait simple, sur un raisonnement cohérent :
Le PCC à Roubaix, car c'est le siège d'OVH, on s'est dit que c'était mieux !
Le backup (un serveur FS MAX) forcement et obligatoirement sur un site différent, on a pris Gravelines.
On a ca depuis juillet 2017 !

En suite : qui fait les sauvegardes et à quelles fréquences ?
Forcement nous, car on veut être certains de ce qu'on fait !
Et donc on est un peu parano, on backup aussi tout cela chez nous !

Certes car coute des €€€ mais au final on sait ce qu'on fait et surtout, on sait ce qu'on a commandé !

Pour 5k€/mois, ce qui n'est pas énorme, c'est le meilleurs compromis qu'on est trouvé !

Donc oui, quand on prend un PCC c'est pas pour héberger le site de la boutique de déco du coin !
Et on se doit d'être prévoyant

Ensuite pour le petit site de e-commerce, il prend un service, souvent chez un presta qui lui fait le site et lui dit "prenez ca chez OVH, ca fait papa maman et c'est pas cher".
Sauf qu'il oublie ou ne mentionne pas qu'un accident peut arriver !
Et ca, je le vois partout, même encore ce matin : "On quitte OVH, on va chez AWS" mais vos sauvegardes ? "C'est AWS qui s'en charge" "Ah et tu en est certains" "Oui c'est écrit qu'il font des backups" Ou Quand Comment ? Donc on prend les mêmes et on recommence !

Ca me fait chier de voir une boite comme OVH prendre une claque, mais ca me fait aussi sourire toutes ces petites structures qui ont vendu un monde de bisounours à d'autre petites boites qui connaissaient rien.
La faute est partagée sur les 3, mais avec des responsabilités différentes !

Néanmoins, ce qui s'est passé ne me fera pas changer d'avis et on continuera de prendre du service chez OVH et toujours en réfléchissant à "mais si un sinistre arrive" "oui, mais imagine, on sait jamais, si ca arrive !"
Mais toujours en ajouter notre couche qui compense ce manque qu'OVH ne peut nous proposer, ou pour être à 100% certains de ce qu'on propose à nos clients.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: kgersen le 15 mars 2021 à 11:58:10
On peut savoir comment marche les sauvegardes et "parier" sur le fait que tout un DC ne va pas partir en fumée...
C'est toujours une histoire de mesure de risques/coûts. Qu'une grosse boite se fasse avoir c'est de sa faute mais une petite pme d'e-commerce je serais plus indulgent.

Et le communication d'OVH n'a jamais laissé entendre que tout un DC pouvait disparaître du jour au lendemain. Ce qui a ma connaissance est une première mondiale non ?

Et je comprend toujours pas pourquoi on laisse faire un DC sur plusieurs étages au lieu d'imposer un seul étage (enfin je fais celui qui comprend pas...).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 12:09:11
Et le communication d'OVH n'a jamais laissé entendre que tout un DC pouvait disparaître du jour au lendemain. Ce qui a ma connaissance est une première mondiale non ?
Oh que non, loin de là.
Des incendies majeurs de datacenter, il y en a eu déjà plusieurs.
https://www.techerati.com/the-stack-archive/data-centre/2018/08/03/fatal-fire-in-aws-tokyo-data-centre/
https://www.reddit.com/r/tmobile/comments/alrvh3/we_are_migrating_tmobile_datacenter_to_the_cloud/
https://www.datacenterknowledge.com/archives/2014/04/20/data-center-fire-leads-outage-samsung-devices

Et je comprend toujours pas pourquoi on laisse faire un DC sur plusieurs étages au lieu d'imposer un seul étage (enfin je fais celui qui comprend pas...).
Quand tu as la place, oui, un bâtiment de plein pied semble plus judicieux.

Et j'irais même plus loin : faire un "campus" avec des bâtiments de taille moyenne, espacés les uns des autres, ça limiterait encore plus les risques.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: seb30 le 15 mars 2021 à 12:10:39

Ca me fait chier de voir une boite comme OVH prendre une claque, mais ca me fait aussi sourire toutes ces petites structures qui ont vendu un monde de bisounours à d'autre petites boites qui connaissaient rien.
La faute est partagée sur les 3, mais avec des responsabilités différentes !

Néanmoins, ce qui s'est passé ne me fera pas changer d'avis et on continuera de prendre du service chez OVH et toujours en réfléchissant à "mais si un sinistre arrive" "oui, mais imagine, on sait jamais, si ca arrive !"
Mais toujours en ajouter notre couche qui compense ce manque qu'OVH ne peut nous proposer, ou pour être à 100% certains de ce qu'on propose à nos clients.

Je crois que ça résume bien la situation.

Pour l'intro en bourse, je pense qu'ils communiquent suffisamment bien et en transparence pour ne pas trop dégrader le capital confiance, je ne sais pas si ça aurai été aussi transparent chez un AWS ou autre.
On est quand même dans le Fukushima du DC,  je n'ai pas connaissance non plus d'un bâtiment entier détruit !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 15 mars 2021 à 12:14:39
Et j'irais même plus loin : faire un "campus" avec des bâtiments de taille moyenne, espacés les uns des autres, ça limiterait encore plus les risques.

Genre un peu comme SBG1/2/3/4, l'espacement en plus ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: seb30 le 15 mars 2021 à 12:15:00
Oh que non, loin de là.
Des incendies majeurs de datacenter, il y en a eu déjà plusieurs.
https://www.techerati.com/the-stack-archive/data-centre/2018/08/03/fatal-fire-in-aws-tokyo-data-centre/

Leon.

Celui-là il était encore en construction non ? pas en exploitation.

Communication non transparente : "The building management company, Mitsui Fusodan, said that the name of the building owner could not be revealed due to confidentiality restrictions"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: geoffreyj le 15 mars 2021 à 12:25:25
On peut savoir comment marche les sauvegardes et "parier" sur le fait que tout un DC ne va pas partir en fumée...
C'est toujours une histoire de mesure de risques/coûts. Qu'une grosse boite se fasse avoir c'est de sa faute mais une petite pme d'e-commerce je serais plus indulgent.

Et le communication d'OVH n'a jamais laissé entendre que tout un DC pouvait disparaître du jour au lendemain. Ce qui a ma connaissance est une première mondiale non ?

Et je comprend toujours pas pourquoi on laisse faire un DC sur plusieurs étages au lieu d'imposer un seul étage (enfin je fais celui qui comprend pas...).

Oui enfin "OVH n'a jamais laissé entendre que tout un DC pouvait disparaître du jour au lendemain"... c'est limite, on vit dans un monde réel hein...
Faut etre conscient de la réalité, on peut avoir un accident de voiture, ta maison peut bruler, tu peux mourir dans un accident d'avion...
Bref, c'est des choses rares avec un facteur de probabilité faible, MAIS CA PEUT ARRIVER ! et faut le prendre en compte !

Et Interxion PAR3/PAR5 sont sur 2 étages et pour ces derniers les GE sont au RDC ainsi que les onduleurs.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: aplufr le 15 mars 2021 à 13:16:57
Celui-là il était encore en construction non ? pas en exploitation.

Communication non transparente : "The building management company, Mitsui Fusodan, said that the name of the building owner could not be revealed due to confidentiality restrictions"

C’est que j’ai cru comprendre aussi, incendie d’un bâtiment en travaux qui devait être un DC AWS.

Oui enfin "OVH n'a jamais laissé entendre que tout un DC pouvait disparaître du jour au lendemain"... c'est limite, on vit dans un monde réel hein...
Faut etre conscient de la réalité, on peut avoir un accident de voiture, ta maison peut bruler, tu peux mourir dans un accident d'avion...
Bref, c'est des choses rares avec un facteur de probabilité faible, MAIS CA PEUT ARRIVER ! et faut le prendre en compte !

Ça a déjà été dit ici il me semble, on a connu deux tours jumelles de l’autre côté de l’océan et a aucun moment les gens qui étaient dedans ni les pompiers ne se sont dit « ça peut disparaitre »… Là c’est un incendie, demain ça sera peut être un avion, hélico, une météorite, un tremblement de terre, un ouragan etc qui va faire tomber dans un DC.

Le gros soucis depuis le début c’est des clients direct ou indirect d’OVH qui n’ont simplement pas d’éducation ni de « culture informatique » et s’en remettent au côté magique et Bisounours du « cloud » (avec éventuellement un presta au milieu qui est supposé s’y connaitre) et pour la (quasi?) totalité d’entre eux les sauvegardes ils ne savent peut être même pas ce que ça signifie.

Il suffit de regarder, même dans des (grosses) boites d’informatique (sic) ou la sauvegarde du document hyper important pour le projet X c’est fait sur le même disque dur dans le même pc ou mieux on fait un raccourci du document vers une clé usb (vécu…).

C’est un problème d’éducation et de culture informatique et ça prendra du temps (et probablement quelques claques comme celle là) pour que les personnes comprennent un peu mieux comment ça marche derrière.

Quand aux pages alléchantes du site sur ovh à l’époque pour dire c’est cette offre qu’il faut prendre, j’appelle ça une page de pub. Je ne suis pas client chez ovh mais je suis sûr qu’à un moment avant de payer il y'a forcement eu la case « j’ai lu et j’accepte ». Ce qui fera foi c’est le document du « lu et j’accepte » pas la page de pub pour présenter les offres disponibles (après le fait que personne ne lisent ces documents, c’est un autre sujet…)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 15 mars 2021 à 13:27:36
J'espère que ça va les vacciner ce qui c'est passé.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 13:31:29
Genre un peu comme SBG1/2/3/4, l'espacement en plus ?
Comme Data4 Marcousis.
https://www.data4group.com/data-center-paris-france/

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 13:34:43
Le gros soucis depuis le début c’est des clients direct ou indirect d’OVH qui n’ont simplement pas d’éducation ni de « culture informatique » et s’en remettent au côté magique et Bisounours du « cloud » (avec éventuellement un presta au milieu qui est supposé s’y connaitre) et pour la (quasi?) totalité d’entre eux les sauvegardes ils ne savent peut être même pas ce que ça signifie.
Oui, il y a un manque d'éducation des clients, c'est certain.
Les cloud-provider, dont OVH, sont en grande partie coupables. C'est en grande partie aux vendeurs (les cloud provider) d'expliquer ce qu'ils vendent.

Si un cloud provider comme OVH vend une prestation de sauvegarde sans préciser où est localisée la sauvegarde, ça ne participe pas à l'éducation du client.
Si OVH veut vendre à un tarif différent des offres de sauvegarde sur site et hors site, il faut qu'ils l'expliquent clairement. Et qu'ils le proposent pour TOUTES les offres de sauvegarde. Pas juste pour 1 ou 2 produits.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 15 mars 2021 à 13:47:35
OVH ne fait pas de géo-redondance sur ses offres de base ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Twist59 le 15 mars 2021 à 14:25:50
Ceux qui disent vouloir bouger chez Azure ou AWS, on peut savoir combien vous payez avant et pour quels services souscrits, et combien vous allez payer et pour quels services souscrits ?
Faut comparer des choses comparables.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 15 mars 2021 à 14:31:34
OVH ne fait pas de géo-redondance sur ses offres de base ?
Cela à un coût de transférer des Tb/s entre sites.

On est quand même dans le Fukushima du DC
Je trouve que c'est plus la catastrophe nucléaire de Tchernobyl qu'il faut évoquer, plutôt que la catastrophe nucléaire de Fukushima.

Fukushima était une centrale de qualité. Tchernobyl avait bien peu de sécurité.

=> OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/) qui date de 2013 et met l'accent sur l'absence de protection incendie dans certains sites OVH.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: geoffreyj le 15 mars 2021 à 15:06:58
=> OVH et la protection incendie. (https://lafibre.info/ovh-datacenter/ovh-et-la-protection-incendie/) qui date de 2013 et met l'accent sur l'absence de protection incendie dans certains sites OVH.

Et oui, c'est aussi à prendre en compte dans la gestion du risque.
Pour moi payer 10€/mois un hebergement ou 150€/mois... au final y a forcement une explication...

Pourquoi Interxion me facture 3 fois plus que ce que me propose OVH ??? C'est pas forcement anodin ...
C'est exactement le même principe pour la voiture... avec ou sans les airbags latéraux, le franchissement de ligne, détection de somnolence etc...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: chantoine le 15 mars 2021 à 15:25:50
Comme Data4 Marcousis.
https://www.data4group.com/data-center-paris-france/

Leon.

Magnifique...ment situé sous le couloir aérien principal des décollages d'Orly au passage.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: quentin96 le 15 mars 2021 à 15:32:36
Magnifique...ment situé sous le couloir aérien principal des décollages d'Orly au passage.

Ou encore sur leur site
Citer
Alimentation du site par le poste de transformation électrique de Villejust, parmi les plus puissants d’Europe -> deux lignes enterrées très haute tension de 90.000 volts chacune

Donc si les transfo de Villejust sont détruit, il n'y a plus d'alim
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 15 mars 2021 à 15:46:04
Une grand banque française a déménager une partie de sont infra critique il y a 15 ans environs a cause des risques aérien de l'aéroport de Lille
On vous bien l'image en dessous, le site était vraiment a 200 mètre de l'axe de la piste principale.

Sur la seconde image, on voit bien que Data4 n'est pas vraiment dans l'axe des piste, ni principal ni secondaire. Il y a environs 10 km de distance !

ha oui, j'oublié, la grande banque française a déménager a Data4  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 15 mars 2021 à 16:03:54
Comme Data4 Marcousis.
https://www.data4group.com/data-center-paris-france/

Leon.
Exemple intéressant effectivement. Sachant qu'ils ont en plus un site à quelques km pour encore plus de sécurité.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: patrick_01 le 15 mars 2021 à 16:51:38
Sur la seconde image, on voit bien que Data4 n'est pas vraiment dans l'axe des piste, ni principal ni secondaire. Il y a environs 10 km de distance !
À une telle distance de l'aéroport, être exactement dans l'axe de piste ne change pas grand chose. Les avions se crashent rarement en ligne droite après le décollage (oui, je sais, le Concorde...).
1) Les routes de départ ne sont pas en ligne droite. Dans le cas d'Orly, en configuration face à l'ouest (quand les avions décollent vers l'ouest, normalement de la piste 24), pour les départs vers le Sud il y a un virage à droite qui fait passer pas bien loin du datacenter.
2) En cas de vraies emmerdes, si l'appareil reste manoeuvrable, le pilote va tout faire pour rejoindre l'aéroport et s'y poser, donc il ne va évidemment pas continuer sur une ligne droite. Si l'avion n'est plus manoeuvrable, c'est tout sauf certain qu'il ira en ligne droite.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: chantoine le 15 mars 2021 à 17:30:17

Sur la seconde image, on voit bien que Data4 n'est pas vraiment dans l'axe des piste, ni principal ni secondaire. Il y a environs 10 km de distance !


J'ai vécu 25 ans juste à côté. La plupart des avions amorcent un virage après le décollage d'Orly et passent juste au dessus.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 15 mars 2021 à 18:16:34
J'ai travaillé 6 ans juste à côté. Je n'ai pas constaté que les avions passaient au dessus. Par contre, aux Ulis, ou à Villebon, oui ils passent pas loin.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: chantoine le 15 mars 2021 à 18:19:46
Pour un avion, Villebon, Les Ulis ou Nozay, ça ne change pas grand chose. Et quand tu as un problème au décollage, tu ne suis pas le plan de vol prévu.

On va formuler autrement : ce DC est pile dans la zone grise où un avion venant de décoller d'Orly est susceptible de se crasher.

Ça te va mieux ?

En plus c'est un plateau, pas très construit, de quoi attirer l'oeil quand on est en perdition, plutôt que d'aller taper une colline boisée...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 15 mars 2021 à 18:26:03
La probabilité qu'un avion s'écrase sur Data4 Marcousis me semble plus faible à une destruction de la tour de Roubaix 4 par un incendie (Roubaix 4 est très proche de SBG2 au niveau conception).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Myck205 le 15 mars 2021 à 18:30:22
La probabilité qu'un avion s'écrase sur Data4 Marcousis me semble plus faible à une destruction de la tour de Roubaix 4 par un incendie (Roubaix 4 est très proche de SBG2 au niveau conception).

Il doit y avoir la même probabilité qu'un astéroïde se crache sur l'IDF, ça a du arriver une fois, on peut le voir dans le reportage Armageddon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 15 mars 2021 à 18:35:18
Moi, ce que l'on m'avait dit, c'est que le site de Data4 avait été choisi justement pour sa sécurité. Sur un plateau, pas de risque d'inondation, dans un zone non sismique, loin des grands axes, autoroutes, donc d'un camion qui sort à pleine vitesse de la route et crashe le bâtiment, ou transportant des éléments combustibles ou explosifs, pas de ligne de train, et deux alimentations électriques par lignes haute tension indépendantes. Le site est entourés de bois et de champs.

Et effectivement, les datacenters sont séparés d'au moins 100m.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Lucien le 15 mars 2021 à 18:37:15
Crash en 1973 juste pas loin à Saulx les Chartreux.

A l'époque, le site était le centre de recherche de la CGE et la CILAS mettait au point des lasers.

Quelques tirs ont des fois déviés de la cible....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 18:39:12
J'ai donné l'exemple de Data4 Marcousis, juste pour montrer que l'espacement des bâtiments, des salles, ça réduit très probablement la propagation d'un incendie, rien de plus.
C'était juste pour discuter de l'architecture des datacenter, pas pour dire "Data4 c'est trop bien" ou pour discuter de son implantation...

Il y a aussi d'autres exemples de datacenter sous forme de campus à plusieurs bâtiments espacés, comme le datacenter de SFR à Achères.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 15 mars 2021 à 18:43:14
Je viens de regarder une vue Google earth du site, et je vois que cela s'est pas mal densifié. Déjà, quand je suis parti d'où je travaillais à côté, ils avaient levé 250 millions d'euros je crois, pour construire de nouveaux datacenters, et sur le site il y avait pas mal de travaux.

Sinon, il n'y a plus d'activités d'Alcatel, ou de tirs de laser sur place. C'est de l'histoire ancienne.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 15 mars 2021 à 19:24:04
https://www.futura-sciences.com/tech/actualites/informatique-microsoft-experience-data-center-sous-eau-reussite-totale-61458/

Pas de vibrations, moins de changement de température, moins de corrosion, un risque d’incendie nul, bref moins de problèmes techniques selon cette expérience..

A voir le coût d’implantation et les frais de fonctionnement par rapport a un dc sur la terre ferme
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 15 mars 2021 à 19:33:36
Oui et le jour où s'ouvre une faille ou que la terre se décide à recracher une poche de gaz/magma et provoque une explosion pile là où il y a le caisson, ça fera une SGB v2 noyée au sel de mer.

Il y a aussi des chances de voir ton caisson voler grâce à l'onde de choc de l'explosion, pense à prendre ton télescope  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 15 mars 2021 à 19:35:38
un risque d’incendie nul

A voir. L'incendie peut très bien se déclencher à l'intérieur. C'est sûr qu'il sera vite éteint en ouvrant les écoutilles, mais il ne restera plus grand chose en fonctionnement ensuite...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 15 mars 2021 à 19:38:10
Greenpeace en sueur en voyant les caissons que OVH va immerger dans le Rhin ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tounet le 15 mars 2021 à 19:46:26
Quelqu'un a une liste des datacenters qui ont un incident majeur de destruction dans le monde ?
Par exemple pour celui d'aws a Tokyo, je ne savais pas.

En France il y a quelques paires d'années, je me souviens d'un incident majeur pour la boite adp (pas aeroport de paris) mais le logiciel de paie (adp gsi). Et il me semble bien qu'il s'agissait d'un incendie. Le PRA n'avait pas fonctionné comme il aurait du. Je me souviens que ma boite (qui est une grosse industrie) à du rejouer les paies du mois précèdent en attendant qu'adp se relève, ce qui avait pris entre 1 semaine et 15 jours si mes souvenirs sont bons.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 15 mars 2021 à 19:58:36
Je viens de regarder une vue Google earth du site, et je vois que cela s'est pas mal densifié. Déjà, quand je suis parti d'où je travaillais à côté, ils avaient levé 250 millions d'euros je crois, pour construire de nouveaux datacenters, et sur le site il y avait pas mal de travaux.
Mais même en ne comptant que les 4 "historiques", on est bien loin des >100m entre chaque DC. Plutôt 15-20m. Sans doute suffisant (ou raisonnable) pour le risque incendie, enfin j'imagine.

Ceci dit comme je disais, leur offre PCA/PRA est constituée d'un DC à 2km à vol d'oiseau dans la ZAC au NO.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 15 mars 2021 à 20:00:15
Ceci dit comme je disais, leur offre PCA/PRA est constituée d'un DC à 2km à vol d'oiseau dans la ZAC au NO.

Sachant qu'ils "louent" aussi des salles à des tiers/infogérants qui ont leur propre offre DRP sur d'autres sites.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 15 mars 2021 à 20:01:57
Yep, d'ailleurs 2km c'est pas énorme pour un PCA/PRA, mais ça a l'avantage d'être gérable à "pas cher" pour passer de la capa entre les 2 sites (il y a une boucle optique entre les 2).

On en revient à la problématique de la sauvegarde offsite : il faut un peu de BP entre les 2.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 15 mars 2021 à 20:10:49
On en revient à la problématique de la sauvegarde offsite : il faut un peu de BP entre les 2.

Pour la sauvegarde hors site (1/jour), mais aussi pour le PRA  (réplication continue de baies de stockage type EMC SRDF).
Dans ma boite, les PRA sont plutôt implémentés sous forme de bascule rapide en cas de perte de site, avec une perte de données inférieure à quelques minutes (RTO<2-4h / RPO<2min).

Restaurer un backup d'une BDD Oracle de 15 To c'est plus long et ça sort de la problématique du PRA en tant que tel.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: jack le 15 mars 2021 à 20:23:13
Pour la sauvegarde hors site (1/jour), mais aussi pour le PRA  (réplication continue de baies de stockage type EMC SRDF).
Dans ma boite, les PRA sont plutôt implémentés sous forme de bascule rapide en cas de perte de site, avec une perte de données inférieure à quelques minutes (RTO<2-4h / RPO<2min).

Restaurer un backup d'une BDD Oracle de 15 To c'est plus long et ça sort de la problématique du PRA en tant que tel.

Certes, ça demande du travail et du temps (de cerveau)
À base de snapshot + pitr, on peut faire des trucs très rapide sur les databases (je ne sais pas pour oracle spécifiquement, mais j'imagine ?)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 15 mars 2021 à 20:35:40
Pour la sauvegarde hors site (1/jour), mais aussi pour le PRA  (réplication continue de baies de stockage type EMC SRDF).
Dans ma boite, les PRA sont plutôt implémentés sous forme de bascule rapide en cas de perte de site, avec une perte de données inférieure à quelques minutes (RTO<2-4h / RPO<2min).

Restaurer un backup d'une BDD Oracle de 15 To c'est plus long et ça sort de la problématique du PRA en tant que tel.
Juste pour comprendre : c'est quel type d'usages une database de 15To? Ca existe vraiment?

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 15 mars 2021 à 20:45:06
Genre un peu comme SBG1/2/3/4, l'espacement en plus ?

Regarde Gravelines en vue aériennes  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 15 mars 2021 à 20:46:53
Juste pour comprendre : c'est quel type d'usages une database de 15To? Ca existe vraiment?

Leon.
Oh tu sais, ça peut aller vite même pour des petites applications...
Indirectement dans mon scope, il y a une appli spécifique qui tourne, basé sur un CRM open source, et qu'ils ont customisé avec du json bien verbeux directement stocké en base, et au bout de 6mois c'était déjà a quelques centaines de go... Le MySQL prend cher... Et régulièrement la VM se fait rajouter du paquets de go supplémentaires en attendant qu'ils revoient l'architecture logiciel...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 15 mars 2021 à 20:57:59
Mais même en ne comptant que les 4 "historiques", on est bien loin des >100m entre chaque DC.

Quand je les voyais horizontalement, ils semblaient plus éloignés les uns des autres, mais je ne devais pas voir ceux qui étaient derrière.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Thornhill le 15 mars 2021 à 21:02:04
Juste pour comprendre : c'est quel type d'usages une database de 15To? Ca existe vraiment?

Pour en côtoyer, oui ça existe : ERP, Datawarehouse, c'est pas exceptionnel dans le monde des opérateurs telcos par exemple.
Et il y a bien plus gros en BDD relationnelle, et ne parlons pas du NoSQL.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: aplufr le 15 mars 2021 à 21:22:48
Juste pour comprendre : c'est quel type d'usages une database de 15To? Ca existe vraiment?

Oui ça existe vraiment.
Celle là fait un peu moins de 15To mais on s’y rapproche quand même : https://munin.openstreetmap.org/openstreetmap.org/karm.openstreetmap.org/postgres_size_openstreetmap_9_5_main.html
WIkipedia en 2012 : https://en.wikipedia.org/wiki/Wikipedia:FAQ/Technical#How_big_is_the_database?

Et en entreprise c’est fréquent :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 15 mars 2021 à 23:02:43

Octave est un "bon communiquant", bravo pour sa réussite mais c'est quand même surtout depuis toujours un énorme menteur et manipulateur.

Et des mensonges comme ça il y en a des centaines ! Roubaix a tenu aussi des années sur un seul chemin fibre !!! Vous savez comme au Canada aussi ou le jour ou ça a peté "ah il y en avait un second en construction".


En tout cas sur l'énergie, la situation de strasbourg reste quand même louche, tout semblait quand meme passer par un SPOF dans SBG2 pour l'énergie de SBG1 et 3 et 4....

et idem sur la fiber room, les fiber room de son réseau A et B devait être 100% sur SBG2 vu ce qu'il indique aujourd'hui donc un 2nd SPOF.
"
Network:
- fibers Room A<>B ongoing
- fibers Room A<>SBG1/SBG4 will be started asap
- fibers Room A<>SBG3 Floor 1/2/3/4/5 ongoing
- fibers Room B<>SBG3 Floor 1/2/3/4/5 ongoing
"
alors que sa salle réseau dans SBG1 n'était pas touché, on aurait pu penser qu'il pouvait redémarrer facilement SBG1/3/4 sur la base de cette unique salle réseau (au moins temporairement).

Ça donne au final l'impression d'une accumulation de choix legacy lorsque le site était très petit, sans remise à plat d'archi lors de la croissance du site SBG 1-->2 -->3 -->4 -->(5) permettant une bonne autonomie de chaque DC sur le site.

le problème est finalement double:
- perdre SBG2 ca fait mal
- mettre 10 à 15J pour re-démarrer SBG3/4 et le bout de SBG1 alors qu'ils n'étaient pas impacté
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 15 mars 2021 à 23:29:55
En tout cas sur l'énergie, la situation de strasbourg reste quand même louche, tout semblait quand meme passer par un SPOF dans SBG2 pour l'énergie de SBG1 et 3 et 4....

et idem sur la fiber room, les fiber room de son réseau A et B devait être 100% sur SBG2 vu ce qu'il indique aujourd'hui donc un 2nd SPOF.


Ou alors les câbles passaient près de SBG2 et ont brulé / ne sont plus utilisables...

Mais la théorie du complot c'est plus à la mode :P
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: cmer le 15 mars 2021 à 23:54:39
Beaucoup de gros hébergeurs rencontrent des problèmes, mais a la différence d'OVH ils ne communiquent absolument pas pour éviter les bads buz...
 
Il y a 4 mois en pleine période de black Friday, j'ai subis une interruption totale chez (Azure South Africa) de mes sites e-commerce pour l'Afrique du Sud..
La page status est rester au vert avec aucun incident déclarer... Après contact avec le support, j'ai réussi à avoir l'information que le datacenter a subis une inondation et que tous les serveurs étais à l'arrêt...

Le comble, c'est que l'incident a crée des indisponibilités d'accès de récupération des datas sur la région Azure de Cape Town a 1000km de Johannesburg.

(https://lafibre.info/images/datacenter/202011_azure_panne_site_afrique_du_sud.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 16 mars 2021 à 04:01:47
OVH ayant communiqué que le fait que les fibres étaient toujours ok, de même que la salle réseau de SBG1, c'est vrai que j'ai du mal à comprendre la nécessité, autre que pour la redondance, de créer en urgence une nouvelle salle réseau SBG5.

Pour le container pour la réalimentation haute tension de SBG3, ce sont des cellules 20 000 volts pour connecter le réseau électrique ou c'est autre chose ?

Pour les suies, je pense que le mot "éventuelles" devrait être supprimé : il y a visiblement des suies (pas forcément dans toutes les salles)

C'est un vrai défit logistiques ces travaux visiblement. Je ne m'attendais pas du tout à ca quand ils ont annoncés que SBG3/4 étaient "préservés".


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)

Les bulletins précédents :
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: zenon le 16 mars 2021 à 09:37:38
Tiens le site viasante.fr est aussi touché:

INFORMATION SPÉCIALE

Un data center OVH a malheureusement pris feu dans la nuit du 10/03/21, ce qui rend impossible l'accès à nos plateformes Jevisbien-être.fr et VIASANTÉ & Vous, et nos sites web Optique et Audition VIASANTÉ. Nous vous tenons informés dès que l'accès sera de nouveau disponible. Merci de votre compréhension.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 16 mars 2021 à 15:20:45
J'ai séparé l'histoire de celle qui vit de son site web (payé 5€/mois) sans avoir de sauvegarde, dans un sujet à part
=> Elle vit de son site web mais ne fait aucune sauvegarde ! (https://lafibre.info/techno-du-web/elle-vit-de-son-site-web-mais-ne-fait-aucune-sauvegarde/)

Une vendeuse sur Internet qui n'a visiblement fait aucune sauvegarde.

L'hébergement du suite qui la fait vivre doit lui coûter 5€/mois, si c'est bien 6 mois de geste commercial qui est réalisé (30€).


(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_geste_commercial_30euros.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hiroko le 16 mars 2021 à 15:22:49
Il n'a toujours pas beaucoup d'information qui circule sur l'inefficacité des systèmes anti incendie qui n'ont de toutes évidence par joué leur rôle, ce serait vraiment intéressant de savoir s'ils n'ont pas fonctionnés ou s'ils n'étaient pas adapté ou les deux.
Comme le disait un membre il y aura sans doute un avant et un après 10 mars mais encore faudrait il comprendre ce qui doit être changé ( et ca ne concerne pas qu'OVH )
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 16 mars 2021 à 15:26:20
L'inefficacité de l'absence de système d'extinction automatique d'incendie est maintenant prouvé !

A priori, dite moi si je me trompe, le site était équipé d'extincteurs comme dans n’importe quel bureau, mais pas de système d'extinction automatique à eau ou à gaz, présents presque systématiquement dans les data-center sous différente forme.

Maintenant je connais de nombreux sites où l'extinction incendie n'est pas complète (par exemple absent dans le local où il y a les onduleurs).

Je connais aussi des sites où les batteries sont dans la même salle que les serveurs.

Je parle d'onduleurs et de batterie, c'est une piste pour SBG2. J’espère qu'on aura un rapport d’enquête digne de ce nom.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Phach le 16 mars 2021 à 15:36:54
Juste pour comprendre : c'est quel type d'usages une database de 15To? Ca existe vraiment?

Leon.

Alors j'ai plus vraiment les chiffres exacts en tête mais y a de ça 15 ans, j'ai vu des POOC où le besoin client était effectivement de plusieurs To de BDD. Pour te donner une idée des clients, c'était style Nestlé, Infosys, voilà ceux dont je me souviens, mais c'était des infra à plusieurs dizaines, voir centaines de milliers d'euros. Faire tourner des ERP de dingue qui gère plusieurs continents. Et c'était y a 15 ans.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 16 mars 2021 à 16:42:35
Mon quotidien n'est plus disponible en ligne depuis le 10/03

1€/jours * 35000 abonnés = ...

Je ne comprends pas qu'aucun plan B (diffusion d'un PDF par mail, liseuse...) n'ai pas encore été mis en place...

Je ne demanderai pas d'avoir car je connais la situation de la presse papier mais bon c'est pas trés sérieux..

Il y a d'autres journaux spécifiques également indisponibles ou en mode très dégradé (que des vieilles archives...)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tounet le 16 mars 2021 à 17:10:51
En parlant d'efficacité du système anti incendie, j'ai retrouvé ca :

https://www.lemagit.fr/actualites/2240201509/Arret-de-Chorus-les-raisons-de-la-panne-du-datacenter-de-Bull (https://www.lemagit.fr/actualites/2240201509/Arret-de-Chorus-les-raisons-de-la-panne-du-datacenter-de-Bull)

Heureusement tout le monde est train de passer sur du SSD, sauf pour les backups  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Law3r le 16 mars 2021 à 17:17:47
Ca chauffe moins, c'est plus fiable et le prix au GO se rapproche...

On y viendra!
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 16 mars 2021 à 17:26:26
Exactement, le gaz inerte n'est pas sans conséquences.
Le pression à laquelle le gaz est poussé dans la salle a des conséquences sur les têtes des HDD.
ça m'est déjà arrivé en 2015, j'ai perdu un vieux serveur en fin de vie sans importance après un relâchement de gaz "par accident".
des confrères dans les racks a côté n'ont pas eu cette chance.. de RAID entiers impossible à reconstruire.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: seb30 le 16 mars 2021 à 18:11:05
Il ne faut pas crier trop fort non plus :

https://www.youtube.com/watch?v=tDacjrSCeq4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 16 mars 2021 à 18:57:31
Exactement, le gaz inerte n'est pas sans conséquences.
Le pression à laquelle le gaz est poussé dans la salle a des conséquences sur les têtes des HDD.
Ça date mais je connais un endroit où les évents pour équilibrer la pression en cas de relâchement du gaz avaient été oubliés lors de la construction. Un jour il y a eu un déclenchement accidentel du système d'extinction, ça fait tomber un mur. ::)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 16 mars 2021 à 19:17:48
Il ne faut pas crier trop fort non plus :

Amusant et intéressant.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 16 mars 2021 à 21:38:48
Point journalier, après avoir renouvelé le 20 000 v, le réseau avec une nouvelle salle de routage on voit que des UPS sont endommagés dans SBG1 dans les salles qui n'ont pas été détruites.

Visiblement de nombreux serveurs vont avoir un nettoyage intensif et ne vont pas redémarrer. Sur les dédiés, il faut probablement s'attendre à des changement de carte mère (j'avais déjà eu ça il y longtemps + de 10ans, je m'était aperçu que le CPU n'était plus le même, j'étais passé d'un Celeron à un Atom sur un petit dédié, en gardant le même disque dur)


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)

Les bulletins précédents :
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 16 mars 2021 à 21:50:30
Nouvelle vidéo d'Octave Klaba incluant quelques photos des travaux :

L'origine du sinistre se concentre sur l'onduleur et les batteries, une nouvelle vidéo avec plus de détails sur l'origine sera tournée vendredi prochain.


https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg_2.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hwti le 16 mars 2021 à 23:06:23
Il parle de cartes mères à changer, probablement à cause de la fumée qui aurait déposé des suies conductrices.
Bizarre qu'il ne parle pas des alimentations, parce que c'est beaucoup plus risqué de ce côté là.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Hugues le 16 mars 2021 à 23:07:45
C'est pas des alims mutualisées sur les serveurs ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 16 mars 2021 à 23:15:56
C'est pas des alims mutualisées sur les serveurs ?

il me semble effectivement qu'il alimente directement chaque serveur en courant faible
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hwti le 16 mars 2021 à 23:21:59
il me semble effectivement qu'il alimente directement chaque serveur en courant faible
Ah, si toutes les machines sont alimentées en 48V par exemple, il y a effectivement beaucoup moins de risque.
En 230V, s'il y a des dépôts conducteurs entre primaire et secondaire, ça peut amorcer un arc, et dans ce cas il y a un risque d'endommager tout ce qu'il y a derrière.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Gilum le 17 mars 2021 à 00:13:16
il me semble effectivement qu'il alimente directement chaque serveur en courant faible

Dans la dernière vidéo on voit bien une alimentation 230V
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 17 mars 2021 à 03:34:11
Les serveurs OVH classiques avec watercooling ont leur propre alimentation électrique 230v comme le monte les photos.

On note par contre qu'OVH a eu (et a peut-être encore) des serveurs basse consommation (uniquement Intel Atom ?) alimentés en 19v continu avec batterie dans la baie :

OVH se lance donc dans les baies alimentées en courant continu.

On apprend que:
* les serveurs sont alimentés en 19V. En fait, des cartes mères avec alim en 19V, ça existe. Les alimentations ATX acceptant le 19V aussi.
* Il y a 3 batteries par chaines : 3 batteries au plomb de 6V montés en série. On voit 2 séries de 3 batteries. Je ne sais pas si c'est pour la redondance.
* les redresseurs (boitiers noirs avec ventilateur et poignée) sont redondants en N+1 : 3 redresseurs là où 2 suffiraient.
* le chassis du "PDU" (power distribution unit) est fait maison.
* les connecteurs sont semblable à ceux qu'on trouve au cul d'un PC portable (=bof). C'est le standard des alims 19V, mais c'est adapté à des contraintes très différentes de l'industrie : c'est prévu pour un grand nombre de connexion/déconnexion, et il n'y a pas de verrou. Des connecteurs industriels auraient sans doute été plus adaptés.

(https://lafibre.info/images/ovh/201312_ovh_serveurs_alimentation_continue_19v_3.jpg) (https://lafibre.info/images/ovh/201312_ovh_serveurs_alimentation_continue_19v_2.jpg)

En fait, ça ressemble aux montages de facebook ou Google. Le principe est avant tout de placer les batteries au plus près des serveurs, au plus près de là où il y avait déjà du courant continu (=dans les serveurs). On supprime donc les onduleurs, qui sont des équipements chers et complexes. Surtout que chez OVH, les onduleurs étaient visiblement rarement redondants.

Mais ici, ça me semble quand même moins optimal que Google ou Facebook : le "PDU" est en 19V, et octave dit alimenter des serveurs de 300W. Ca fait donc ~15A à transporter. Même sur 1m, c'est un courant important, et il doit y avoir des pertes. Sans parler de l'échauffement des connecteurs et des câbles. Bref, le montage me surprend, mais ça a du être étudié.

La grosse différence avec Google et Facebook, c'est que de la "très basse tension" est gérée en continu sur ~1m, tout le temps. Chez Facebook, cette très basse tension sur plus d'1m n'est utilisée qu'en cas de coupure du courant alternatif. Un serveur Facebook a 2 alimentations : 240V alternatif en temps normal, et 48V continu de secours.

Leon.

Voici un article d'OVH qui explique un peu leur vision du concept de datacenter à courant continu.

https://www.ovh.com/fr/news/articles/a1792.repenser-distribution-electrique-datacentres-reduire-risque-panne

(https://www.ovh.com/fr/images/news/reseau-electrique-ovh-zoom.png)

Leon.


Scaleway aussi a testé la technologie continue et l'a abandonné :
Bonjour Arnaud (online_fr),

J'ai vu que vous aviez fait des serveur en 48V continu dans les débuts de Online. Tu peux nous faire un petit retour d'expérience là dessus, stp? Pourquoi avoir choisi du continu? Est-ce que les batteries étaient directement intégrées dans le réseau 48V?
https://www.facebook.com/media/set/?set=a.172190216322748.1073741832.147829252092178&type=1 (https://www.facebook.com/media/set/?set=a.172190216322748.1073741832.147829252092178&type=1)

De plus, en tant que gros hébergeur, qui possède ses propres datacenters et serveurs, est-ce que vous réfléchissez à passer en "haute tension continue"? Est-ce que les équipementiers (HP, Dell, Shneider, etc...) sont ouverts pour travailler sur ce genre de sujet?

(https://lafibre.info/images/online/201311_online_serveurs_alimentation_continue_48v_1.jpg)

(https://lafibre.info/images/online/201311_online_serveurs_alimentation_continue_48v_2.jpg)

Leon.
Je n'étais pas passé ici depuis quelques temps :-)

Bien vu Leon, nous avons effectivement utilisé du -48V massivement (Oui, le + c'est la masse, donc 0V), de 2005 à 2007 sur les premières générations de serveurs.
Nous avons abandonné la technologie pour pas mal de raisons, notamment (non exhaustif) en raison de la section des câbles à mettre en oeuvre et le coût des alimentation DC/DC. Le deuxième problème est la fiabilité très aléatoire des "petites" batteries (du même genre que celles utilisées par notre confrère) dont la durée de vie et la grande sensibilité à la température rends non viable son utilisation dans un process critique comme un datacenter.

Par la suite, nous avons développé notre propre alimentation 220V, qui avait fait l'objet d'une présentation à un Frnog à l'époque avec un peu de chance, il doit y avoir encore des traces sur Internet.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 17 mars 2021 à 07:00:12
Côté Backup, est-ce que quelqu'un a tout compris la page d'OVH?
https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/

Petit rappel des 2 types de sauvegarde:
* Internal Backup (DC/Service) : Sauvegardes effectuées par OVHcloud pour ses besoins de gestion du service (non contractuelles).
* Service Backup (en option si souscrite par client) : Pour permettre à nos clients de mettre en sécurité leurs données, OVHcloud propose des services de backup optionnels gratuits ou payants, dans le même datacentre (local) ou dans un autre datacentre (multi-DC).

2 questions par exemple, pour expliquer ce que je ne comprends pas :
* A quoi correspond un "internal backup" (effectué par les soins d'OVHcloud, non contractuel) dans le cas de serveurs bare-metal?? On voit bien des cellules "internal backup" pour les serveurs bare-metal dans le tableau.
* Comment peut-on avoir une ligne "backup FTP" pour les VPS alors que l'offre n'est pas présentée sur le site OVH? Le site OVH ne présente que des offres de sauvegarde VPS par snapshot (automatique ou manuelle) ce qui est très différent. https://www.ovhcloud.com/fr/vps/options/

C'est franchement pas clair...

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 17 mars 2021 à 07:57:31
+1 Ce n'est pas bien compréhensible pour comprendre quoi correspond à quoi.

C'est un peu comme deviner qu'un VPS de la région "SBG3" n'est pas hébergé à SBG3 mais à SBG2 physiquement !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: 970Adsl le 17 mars 2021 à 08:15:25
Je me demande si maintenant il va vouloir changer le PRA uniquement à Strasbourg ou partout ? 🤔
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: spectrolazer le 17 mars 2021 à 08:37:52
+1 Ce n'est pas bien compréhensible pour comprendre quoi correspond à quoi.

C'est un peu comme deviner qu'un VPS de la région "SBG3" n'est pas hébergé à SBG3 mais à SBG2 physiquement !
Il ne faut pas s'étonner après si le client lambda ne comprend pas.
On en reste toujours à se faire pigeonner pour ne pas avoir lu entre les lignes des CGU/CGV.
J'aime beaucoup le "backups optionnels payants ou gratuits", ça a le mérite d'être clair.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: q05 le 17 mars 2021 à 08:55:47
Il me semble que l'avenir est au cloud hyper-redondant.
Il est devenu trop lourd pour une petite équipe de tout gérer.
Et comme aucune organisation n'est à l'abri d'une attaque extérieure ou interne, il faut prévoir ceinture et bretelles.
Pour réaliser son backup hors ovh, il y a tout ce qu'il faut dans le commerce pour pas cher:
-ftth. A du 1gb/s on transfère +- 5TB/jour
-disque dur: on trouve des WD books à 250€ pour 14TB.
-un nas ou un petit serveur Linux.
Ou bien opter pour backblaze ou autre mais en tout cas ne pas se contenter des seuls backups ovh.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 17 mars 2021 à 09:13:56
Il me semble que l'avenir est au cloud hyper-redondant.
Il est devenu trop lourd pour une petite équipe de tout gérer.
Et comme aucune organisation n'est à l'abri d'une attaque extérieure ou interne, il faut prévoir ceinture et bretelles.
Pour réaliser son backup hors ovh, il y a tout ce qu'il faut dans le commerce pour pas cher:
-ftth. A du 1gb/s on transfère +- 5TB/jour
-disque dur: on trouve des WD books à 250€ pour 14TB.
-un nas ou un petit serveur Linux.
Ou bien opter pour backblaze ou autre mais en tout cas ne pas se contenter des seuls backups ovh.
oui mais tu dis ca car tu as une culture informatique...

madame michu qui s'est fait plumer par la boite web trucmuche pour se faire sa boutique en ligne de vente de bracelet, elle n'y connait rien, on lui a dit "vous inquiétez pas, ils sont Français, c'est pas cher mais c'est parcqu'ils ont tout optimisé, vous aurez peut etre des coupures de temps en temps, mais ca reviendra, et vu votre budget y'a pas mieux, croyez moi"
et derrière la boite web lui pond un site web basé sur une solution toute faite, avec un template custom légèrement personnalisé entre chaque client, encaisse la totalité et dit au revoir, et oublie son devoir de conseil, ca coute trop cher et ca tape dans la marge :p

petite boutique, parfois, va devenir grosse sans prévenir, on va alors embaucher du monde pour gérer les commandes, la communauté, mais pas d'informaticien, ca coute trop cher et y'a michu de la compta qu'est un kisikoné en informatique, tu verrais, c'est un dieu de l'excel, il a meme réussi à changer le titre du site sans passer par ces escrocs d'agence web qui voulait facturer 300€ pour ça!!

la déjà tu retrouves un paquet des sites qui se plaignent d'avoir tout perdu  :-X

pour les sites qui avaient une équipe informatique, bon sauf si c'est parcque la direction refusé le budget backup (et meme dans ces cas la, comme tu dis, un backup auto vers un disque d'entreprise...), bah pas trop d'excuse de ne pas pouvoir redémarrer. Sauf si petite structure, et types qui se sont fait avoir par les nomenclatures et phrases commercial des plaquettes ovh promettant de la sauvegarde en gros, alors que dans la meme pièce/batiment.

pour de la moyenne/grosse structure, pas trop d'excuse, ils sont censés pouvoir s'aider et être à plusieurs à valider/relire les procédures de reprise, donc ils doivent aussi avoir le budget de prendre a minima un serveur basic chez un concurrent ou dans une autre localisation physique ovh pour faire un backup.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 17 mars 2021 à 12:40:09
On sait si la billettique est revenue pour la société de transports en communs ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 17 mars 2021 à 14:23:28
On sait si la billettique est revenue pour la société de transports en communs ?
je ne me souviens plus si c'est de celle la que tu parles, mais twisto (site de transports pour caen) est a nouveau disponible (sauf boutique en ligne)
https://twitter.com/TwistoCaen/status/1371462004343463941
Titre: Incendie sur un site OVH à Strasbourg
Posté par: xp25 le 17 mars 2021 à 15:56:02
Je pensais plus à lui :

France Bleu Lorraine relate l'ASNL et le réseau des bus de Nancy (Réseau Stan)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: bco_ le 17 mars 2021 à 17:00:44
1er rack de retour en ligne
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: bco_ le 17 mars 2021 à 17:03:24
Concernant les victimes, il y a une communauté de commune : https://www.facebook.com/paysduzes/posts/4068776596486440

Budget-insights également ( Fintech du crédit mutuel / Arkea ) : https://twitter.com/BudgetInsight/status/1369613218683949057 ( Mais ils avaient des backups ;) )
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: butler_fr le 17 mars 2021 à 17:45:28
ça troll sévère:
http://watercooling.ovh/

 ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 17 mars 2021 à 17:58:15
Point journalier.

Je suis étonné par "SBG4 tous les serveurs et tous les étages sont préservés" : SBG4 n'est pas déployé sur un seul niveau ?

Il faut comprendre par contre que le dernier étage de SBG3, celui qui a le plus souffert, tous les serveurs ne sont pas préservés ?

SBG4 étant peu touché par l'incendie (il est physiquement éloigné du feu, alors que SBG1 et SBG3 touche SBG2), c'est étonnant de ne pas le remettre rapidement en service si tout est prêt. Il ne devait pas y avoir de nettoyage et séchage de serveur sur SBG4, non ? SBG4 sera pourtant le dernier à redémarrer si je comprends bien.


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)

Les bulletins précédents :
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: underground78 le 17 mars 2021 à 18:06:47
C'est pas juste que SBG4 est considéré comme moins prioritaire car plus petit ou contenant moins de services importants ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 17 mars 2021 à 18:17:00
Je pense la même chose : SBG4, c'est tout petit à priori, et c'est exclusivement du SoYouStart et du Kimsufi. Si j'ai bien compris...
SBG4 c'est 80 baies, contre 600 baies pour feu SBG2.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: joel19 le 17 mars 2021 à 18:25:14
Panique chez les clients d'OVH en défaut de sauvegarde

Moins d'une semaine après le terrible incendie qui a frappé le datacenter d'OVH à Strasbourg, la tension est vive. Les raisons de l'incident ne sont pas encore pour l'heure établies clairement.
L'hypothèse d'un acte malveillant ne peut pas être totalement écarté.Des scellées sont effectuées sur les onduleurs, batteries, vidéo surveillance afin de faire avancer l'enquête. « On pense avoir été très transparents et au-dessus des standards de l'industrie, il faut monter ces standards pour que ces types d'incidents n'arrivent plus jamais et que pour des pertes de disques, les données puissent toujours être récupérées », a indiqué dans une dernière vidéo le fondateur d'OVH Octave Klaba. Au dessus des standards de l'industrie ?
Pas vraiment, puisque OVH ne souscrit pas aux onéreuses certifications de l'Uptime Institute.

(....)

En attendant, on peut quand même s'interroger sur les circonstances de cet incident qui ont clairement été mal maitrisées par OVH. Plusieurs points de faiblesse peuvent expliquer la situation. En adoptant un modèle low cost, la société fait sans aucun doute ressortir des lacunes en termes de sécurité incendie mais aussi de certifications. Par rapport à d'autres opérateurs comme Equinix ou Interxion, OVH n'a par exemple pas pris le train de l'Uptime Institute, organisme mondialement reconnu pour ses benchmarks de datacenters, allant même jusqu'à revendiquer s'y conformer sans en être certifié. Le monde à l'envers.
De même, toujours afin de comprimer les coûts, de possibles défaillances des maigres systèmes de sécurité incendie [des extincteurs à mains obligatoires], qui se sont révélés incapables de circonscrire le sinistre sur un périmètre restreint, doivent être éclaircies. Le manque de technologies de détection, atténuation ou lutte contre les incendies (brouillard d'eau, sprinkler, gaz, mousse mais aussi détecteur de chaleur, fumée ou flamme...) est un vrai problème dans le datacenter strasbourgeois d'OVH. De conception ancienne ( 10 ans) et low cost, ce dernier ne bénéficie pas des avancées présentes chez d'autres opérateurs de datacenters.

(....)

Parmi les clients touchés, on trouve de nombreuses mairies (Artenay, Arras, Saint-Ouen, Cherbourg, Vichy, Vitry-sur-Seine...), des clubs sportifs (AS Cannes, ASM Rugby, l'US Créteil Handball, l'AS Saint-Priest, club de rugby de Clermont-Ferrand....). Des PME (Nautex International, Duysens Immobilier, Groupe Gorioux, BEG Ingénierie, bureau d'études d'Orléans-La Source, le fabricant de monuments funéraires Stonest...) et éditeurs de services en ligne (Rust, Freshmile Direct, The Artist Academy...). Ou encore des organismes culturels, religieux et touristiques (Frac Bretagne, Centre Pompidou à Paris, Office de tourisme de Colmar et de Saverne, Diocèse de StBrieuc...), des médias (Maddyness, Agro Distribution, L'Essor Isère, La Semaine ...), des services administratifs (datagouv, plateforme de dématérialisation des marchés publics, défenseur des droits...) et de nombreuses associations (CRAIF, CIRSES, Ligue contre l'obésité...), l'aéroport de Strasbourg...

(....)

Suite à ce ravage, 3,6 millions de sites web et sous-domaines auraient ainsi été impactés avec des problèmes d'accès de quelques dizaines de minutes ou plusieurs heures pour les plus chanceuses, quand d'autres connaissent l'angoisse d'une indisponibilité totale parfois pour toujours.


https://www.lemondeinformatique.fr/actualites/lire-incendie-ovh-strasbourg-des-sites-toujours-touches-les-dirigeants-s-expliquent-82266.html (https://www.lemondeinformatique.fr/actualites/lire-incendie-ovh-strasbourg-des-sites-toujours-touches-les-dirigeants-s-expliquent-82266.html)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 17 mars 2021 à 18:57:59
Je pense la même chose : SBG4, c'est tout petit à priori, et c'est exclusivement du SoYouStart et du Kimsufi. Si j'ai bien compris...
SBG4 c'est 80 baies, contre 600 baies pour feu SBG2.
Non, il y a également du VPS sur SBG4, ceux qui sont nommés SBG6 il me semble.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: eahlys le 17 mars 2021 à 19:45:49
Vraiment celui qui a eu l'idée d'utiliser la même nomenclature pour l'infra physique et l'infra logique, je sais pas ce qu'il se passe de mal dans sa vie mais il a pas l'air d'être en grande forme je pense :(
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 17 mars 2021 à 19:47:41
Je ne retrouve plus la correspondance entre la région VPS et la localisation physique.

Localisations VPS SBG1, SBG2 et SBG4 => Datacenter SBG2
Localisations VPS SBG6 => Datacenter SBG3

Par contre cet article dit bien qu'il y a des VPS à SBG4 :

quelques infos a 20h

Etat des sauvegardes de données suite à l'incendie sur le campus d'OVHCloud à Strasbourg
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_reprise_apres_incendie_1.png)

Si il n'y a pas de VPS dans le DC SBG4 il faut que je recontacte mon service informatique, https://jalerte.arcep.fr/ est censé être un VPS sur le DC SBG4 (prod et pré-prod)
Comme ce n'est pas critique, ils attendent que le VPS soit remis en service.

il y a peut être eu une confusion avec la région VPS SBG4 qui est dans le datacentre SBG4, donc détruite.
Dans ce cas là, il faut partir des sauvegardes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Leon le 17 mars 2021 à 20:11:28
Je ne retrouve plus la correspondance entre la région VPS et la localisation physique.
Tout est ici
https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/
Je ne vois aucun VPS à SBG4.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 02:43:07
J'ai demandé à mon SI de vérifier où est l'hébergement de J'alerte l'Arcep.

Les snapshots des VPS SBG1, SBG3 et SBG4, (serveur hôte physiquement à SBG2) il y a deux cas :
- Si les offres « VPS Snapshot Cloud/CloudRam » / « VPS Snapshot SSD Range » ont été souscrites avant le 23 avril 2020, elles sont stockés sur des baies de disques d’appoint juste à côté des VPS, donc dans SBG2 et ils sont détruits.
- Si les offres « VPS Snapshot Cloud/CloudRam » / « VPS Snapshot SSD Range » ont été souscrites après le 23 avril 2020, elles sont stockés sur des baies de disques qui bénéficient de la technique d’Erasure Coding réparties sur SBG2 et SBG3 permettant une redondance comme un RAID5 de 5 disques physique. Si les morceaux répliqués sur SBG3 équivalent à 80% des données d’un serveur, alors ces VPS sont restaurable à 100%, car il y a 20% de redondance (il faut que tous les disques sur SBG3 redémarrent).

Pour le service de stockage « Public Cloud Archive » (PCA), c'est aussi des baies de disques en Erasure Coding réparties sur SBG2 et SBG3, mais SBG3 ne contient que 68 % de leurs morceaux, donc cela serait perdu.

Pour le service de stockage « Public Cloud Storage » (PCS), on reste en Erasure Coding, mais SBG3 contient 99,5 % des morceaux de la globalité du stockage, il est donc possible de restaurer la plupart des fichiers, sauf ceux dont plus de 20% du contenu dans SBG2.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 18 mars 2021 à 08:30:04
C'est vrai que je n'avais pas vu que le site 'J'alerte l'ARCEP' était indisponible.
https://jalerte.arcep.fr/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: ezivoco_163 le 18 mars 2021 à 09:12:07
J'ai demandé à mon SI de vérifier où est l'hébergement de J'alerte l'Arcep.

Les snapshots des VPS SBG1, SBG3 et SBG4, (serveur hôte physiquement à SBG2) il y a deux cas :
- Si les offres « VPS Snapshot Cloud/CloudRam » / « VPS Snapshot SSD Range » ont été souscrites avant le 23 avril 2020, elles sont stockés sur des baies de disques d’appoint juste à côté des VPS, donc dans SBG2 et ils sont détruits.
- Si les offres « VPS Snapshot Cloud/CloudRam » / « VPS Snapshot SSD Range » ont été souscrites après le 23 avril 2020, elles sont stockés sur des baies de disques qui bénéficient de la technique d’Erasure Coding réparties sur SBG2 et SBG3 permettant une redondance comme un RAID5 de 5 disques physique. Si les morceaux répliqués sur SBG3 équivalent à 80% des données d’un serveur, alors ces VPS sont restaurable à 100%, car il y a 20% de redondance (il faut que tous les disques sur SBG3 redémarrent).

Pour le service de stockage « Public Cloud Archive » (PCA), c'est aussi des baies de disques en Erasure Coding réparties sur SBG2 et SBG3, mais SBG3 ne contient que 68 % de leurs morceaux, donc cela serait perdu.

Pour le service de stockage « Public Cloud Storage » (PCS), on reste en Erasure Coding, mais SBG3 contient 99,5 % des morceaux de la globalité du stockage, il est donc possible de restaurer la plupart des fichiers, sauf ceux dont plus de 20% du contenu dans SBG2.

euh j'ai des connaissances basique mais ça veut dire qu'il n'y avait donc pas de vraie sauvegarde vers un autre site physiquement distant d'au moins plusieurs kilomètres ???  :o
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 18 mars 2021 à 09:28:07
euh j'ai des connaissances basique mais ça veut dire qu'il n'y avait donc pas de vraie sauvegarde vers un autre site physiquement distant d'au moins plusieurs kilomètres ???  :o
non, c'est une option payante apparu en 2020 si ma mémoire de ce qui s'est dit dans les précédentes pages est bonne...

OVH te vend un service d'hébergement à la base, et des options par dessus, soit tu prends, soit tu fais toi même... ceux qui n'ont rien pris ou ont lu trop vite les petites lignes des options....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 09:52:50
Merci Leon pour ta vigilance, pas de VPS avec l'hôte physiquement à sur le datacenter SBG4, J'alerte l'Arcep est sur l’hôte "SBG4" donc hébergé sur SBG2.
J'imagine que il doit y avoir pas mal de monde à faire la confusion et a attendre le retour des VPS SBG4.

Il est donc inutile d'attendre sa remise en service. Une nouvelle VM va être commandée.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 18 mars 2021 à 09:57:55
Merci Leon pour ta vigilance, pas de VPS avec l'hôte physiquement à sur le datacenter SBG4, J'alerte l'Arcep est sur l’hôte "SBG4" donc hébergé sur SBG2.
J'imagine que il doit y avoir pas mal de monde à faire la confusion et a attendre le retour des VPS SBG4.

Il est donc inutile d'attendre sa remise en service. Une nouvelle VM va être commandée.
oui, cette nomenclature qui se croise risque d'être une deuxième douche froide pour certains  :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vocograme le 18 mars 2021 à 15:18:45
Apparemment de gros changements sont à prévoir dans leurs offres de sauvegarde

https://cloud-computing.developpez.com/actu/313500/OVHcloud-Octave-Klaba-annonce-l-adoption-d-une-nouvelle-politique-de-sauvegarde-gratuite-des-donnees-de-tous-les-clients-et-la-remise-a-la-police-des-onduleurs-et-batteries-detruits-par-l-incendie/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: willemijns le 18 mars 2021 à 15:58:00
Un mea culpa indirect...

"les clients ne comprennent pas" tsss tsss tsss....

Bref. Offrir un service à forte valeur ajouté permettra de garder les clients qui ont pas coulé et qui ont pas assez d'argent pour aller payer plus cher ailleurs.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mirtouf le 18 mars 2021 à 16:36:29
Pour le service de stockage « Public Cloud Storage » (PCS), on reste en Erasure Coding, mais SBG3 contient 99,5 % des morceaux de la globalité du stockage, il est donc possible de restaurer la plupart des fichiers, sauf ceux dont plus de 20% du contenu dans SBG2.
Connait-on la durée d'une telle reconstruction ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 16:59:43
De mon coté, je me demande si l'électronique des disques qui a été soumis à beaucoup de fumée ne va pas être impactée.

Les carte mères, HS, OVH va les remplacer, mais pour les disques, c'est bien plus complexe...

Si on perd un % significatif de disques, cela pourrait anéantir pas mal de choses...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: dj54 le 18 mars 2021 à 18:29:51
vous pouvez suivre le statut des serveurs remis en Prod

http://travaux.ovh.com/vms/sbg/index.html
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: grosprob le 18 mars 2021 à 18:46:06
Bonjour à tous,

L'hébergeur suisse Infomaniak a publié ce jour l'article suivant => "Sécurité des datacenters : comment Infomaniak se prémunit-elle contre les pires scénarios ?" => https://news.infomaniak.com/securite-datacenters/

Citer
Comme l’actualité nous le rappelle tristement : le risque zéro n’existe pas. Le terrible incendie du datacenter d’OVH à Strasbourg nous montre que le cloud est fragile. À la suite de cet événement rarissime, notre service de support a reçu de nombreuses questions. Nous avons décidé d’y répondre en toute transparence dans cet article.

Citer
« La destruction d’un datacenter doit être une crise épouvantable à gérer pour les équipes d’OVH. Pour nous, cette situation cauchemardesque n’est pas envisageable et nous faisons tout pour l’éviter ». Boris Siegenthaler, co-fondateur et CSO d’Infomaniak


Bonne lecture ;)
Titre: Incendie sur un site OVH à Strasbourg
Posté par: vivien le 18 mars 2021 à 20:51:38
Pour SBG3, on voit que l'ancien outil de supervision n'avait pas le 4ème et 5ème étage.

Description :
S31x => 1er étage
S32x => 2ème étage
S33x => 3ème étage
S34x => 4ème étage
S35x => 5ème étage

A priori le 4ème et 5ème étage ce sont des serveurs récemment installés.
A priori ce sont eux qui ont été le plus impactés par les fumées.

http://travaux.ovh.net/vms/index_sbg3.html
(https://lafibre.info/images/ovh/202103_ovh_monitoring_sgb3_apres_incendie.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 21:15:45
Point journalier.

Une nouvelle tache est arrivée, le nettoyage spécifique préliminaire à la remise en service, c'est dommage de ne pas en dire plus. Je met une pièce sur le fait que cela concerne les serveurs SBG3 du 4ème et 5ème étage.

Pas d'explication sur le fait que SBG4, le bâtiment le moins touché soit le dernier dans les ETA.


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)

Les bulletins précédents :
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 21:27:00
Pour le service de stockage « Public Cloud Storage » (PCS), on reste en Erasure Coding, mais SBG3 contient 99,5 % des morceaux de la globalité du stockage, il est donc possible de restaurer la plupart des fichiers, sauf ceux dont plus de 20% du contenu dans SBG2.
Connait-on la durée d'une telle reconstruction ?
OVH  a annoncé une disponibilité pour les données restaurable au 8 avril, soit 29 jours après l'incendie.

=> https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/

Permis les 3,6 millions de sites web touchés par l'incendie, Le Monde informatique à relevé :

Parmi les clients touchés, on trouve de nombreuses mairies (Artenay, Arras, Saint-Ouen, Cherbourg, Vichy, Vitry-sur-Seine...), des clubs sportifs (AS Cannes, l'US Créteil Handball, l'AS Saint-Priest, club de rugby de Clermont-Ferrand....). Des PME (Nautex International, Duysens Immobilier, Groupe Gorioux, BEG Ingénierie, bureau d'études d'Orléans-La Source, le fabricant de monuments funéraires Stonest...) et éditeurs de services en ligne (Rust, Freshmile Direct, The Artist Academy...). Ou encore des organismes culturels, religieux et touristiques (Frac Bretagne, Centre Pompidou à Paris, Office de tourisme de Colmar et de Saverne, Diocèse de StBrieuc...), des médias (Maddyness, Agro Distribution, L'Essor Isère, La Semaine ...), des services administratifs (datagouv, plateforme de dématérialisation des marchés publics, défenseur des droits...) et de nombreuses associations (CRAIF, CIRSES, Ligue contre l'obésité...), l'aéroport de Strasbourg...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 18 mars 2021 à 21:39:00
Article de Stéphanie MANSUY dans l'Est Républicain (https://www.estrepublicain.fr/economie/2021/03/16/l-informatique-locale-en-berne-suite-a-l-incendie-de-l-hebergeur) :

L’informatique locale en berne suite à l’incendie de l’hébergeur OVH

Une semaine après l’incendie du data center OVH à Strasbourg, sites internet et messageries d’associations et entreprises touloises restent impactées et des données manquent à l’appel. Deux sociétés d’informatique hébergées chez OVH témoignent.

Au lieu des dizaines de mails quotidiens reçus dans la boîte de Parole d’Entreprises, Laure Delebarre, la chargée de mission pour cette association entre entrepreneurs, en a traité « trois ou quatre depuis vendredi ». La jeune femme est désemparée. D’autant qu’elle a envoyé un message important aux adhérents concernant le déménagement de son bureau, mi-avril, vers la pépinière d’entreprises d’Ecrouves. « J’attendais des réponses après avoir lancé un appel aux dons pour récupérer du mobilier d’occasion. » Une seule est arrivée. Pire, elle a comptabilisé une vingtaine d’échecs d’envoi de ce fameux mail vers des sociétés du secteur. Des entreprises dont le système informatique a, comme Parole d’Entreprises, fait les frais de l’incendie du data center OVH de Strasbourg, survenu il y a une semaine. Un fait divers qui impacte les messageries, met en carafe les sites, entraîne des difficultés pour récupérer des données stockées qui, parfois, restent introuvables.

Laure Delebarre tâche donc de garder le contact à coups de SMS, via les réseaux sociaux et en redirigeant ses interlocuteurs vers une autre boîte mail. Son prestataire Intermédia Conseil espérait que tout rentre dans l’ordre ce lundi. ça n’a pas été le cas.

Fixé en début de semaine

Sur la page d’accueil de son site, Alexandre Brochet, associé d’Intermédia Conseil, informe que deux de ses serveurs hébergés chez OVH sont actuellement hors service. Ces serveurs accueillaient plus de 250 sites de ses clients. « Je mets tout en œuvre pour rétablir le lien. Depuis le site, les clients peuvent créer une nouvelle adresse de messagerie pour ne pas être coupé du monde en attendant que ce soit réparé. » Quand ? L’informaticien l’ignore. « En début de semaine prochaine, on devrait être fixé du côté d’OVH. »

Même désarroi chez 6Thèmes Info , une société touloise également hébergée chez OVH. Fabrice Marchal, l’un des deux gérants, explique : « Nos clients ne sont pas tous, ni forcément complètement impactés. Une vingtaine est vraiment embêtée. Certains ont perdu leurs données, l’un chiffre ça à beaucoup… »

Ce « fait inédit », comme le qualifie le gérant, va surtout faire changer d’épaule l’entreprise qui compte proposer à ses clients, en plus d’un hébergement classique, une solution de stockage de proximité. « On envisage de positionner des serveurs de sauvegarde chez nous », clarifie Fabrice Marchal. En attendant, chez OVH, l’inventaire des données récupérables ou non récupérables n’est pas terminé. Et si elles ne sont pas perdues, le gérant annonce tout de même que leur remise dans le circuit prendra du temps.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 18 mars 2021 à 22:03:15
Il ne communique pas la dessus mais 700 serveurs bien noircie par la fumée ont fait un vol en jet privée vers Gravelines, oh bah enfin on va arriver vraiment à 20 grammes de CO2 par email  ;D ;D ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: py92 le 18 mars 2021 à 22:18:07
il semble y avoir un petit décalage entre la communication officielle sur SBG4 et le status réel.
sur le monitoring OVH, la majorité des baie de SBG4 sont up ce soir.

Le baremetal et meme le kimsufi sera up bien avant les VPS et les offres Cloud.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: bco_ le 18 mars 2021 à 22:32:56
SBG4 full UP : https://twitter.com/olesovhcom/status/1372661517280284672
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: mmickael le 19 mars 2021 à 00:02:17
Full up? A cette heure je vois encore 6 racks gris (tout down)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 19 mars 2021 à 00:10:58
Full up? A cette heure je vois encore 6 racks gris (tout down)
ca a peut être cramé après redémarrage  ;D :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 03:51:05
Bonne nouvelle.

J'étais quand même vraiment étonné que SBG4 soit up coté réseau et électrique, les serveurs n'ont pas du tout été touché par les fumés (SBG4 est éloigné et sur un seul niveau), donc l'absence de redémarrage me faisait dire qu'il y avait une censure des problèmes.

En fait il semble ne pas y avoir de problèmes sur SBG4 et il est presque entièrement up bien avant le 22 mars.

Sur SBG3, cela devrait par contre être difficile de tenir la date du 19 mars, surtout pour les serveurs qui sont partis en jet privé vers Gravelines (j'aurais plutôt imaginé que le principe aurais été d'envoyer des baies neuves de serveurs de remplacement, sans les disques. A l'arrivée ils nettoient minutieusement les disques/ssd et les placent dans les serveurs neufs). Il devrait être facile d'avoir le même hardware, je suis persuadé que le 4ème et 5ème étages, ceux qui sont bien abîmés, sont du matériel tout récent.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 08:40:50
Dessin de Soulcié (Thibaut) publié par Télérama le 19 mars 2021 :

L'accent allemand est là car des pompiers Allemand sont intervenus pour éteindre l'incendie (probablement à bord du bateau franco-allemand).

(https://lafibre.info/images/ovh/202103_telerama_incendie_ovh_strasbourg.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Optix le 19 mars 2021 à 08:49:45
L'accent allemand est là car des pompiers Allemand sont intervenus pour éteindre l'incendie (probablement à bord du bateau franco-allemand).
L'accent allemand est là parce que c'est l'Alsace tout simplement  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: tanuki le 19 mars 2021 à 09:28:06
Parce que c'est le Bas-Rhin  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 19 mars 2021 à 09:28:36
Le Grand Est quoi.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: buddy le 19 mars 2021 à 11:55:03
Sur SBG3, cela devrait par contre être difficile de tenir la date du 19 mars,, surtout pour les serveurs qui sont partis en jet privé vers Gravelines (j'aurais plutôt imaginé que le principe aurais été d'envoyer des baies neuves de serveurs de remplacement, sans les disques.
Pour le coup, ça redémarre sur SBG3 http://travaux.ovh.com/vms/index_sbg3.html
Après ils ont dit progressif.. Peut être que les derniers ce sera pour lundi ou mardi voire encore plus tard pour les derniers.

Ils n'ont peut être plus de stock pour faire de nouveaux serveurs de remplacement identique à ceux d'avant et faire comme à SBG1.
ils montent les disques sur des atoms, vous récupérez vos données puis vous repartez sur un nouveau serveur. https://twitter.com/olesovhcom/status/1372528841831370762
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 12:11:58
J'avais loupé la nécessité de remplacement des cartes mères sur deux salles de SBG1 :

(https://lafibre.info/images/ovh/202103_ovh_strabourg_changement_carte_mere.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: alain_p le 19 mars 2021 à 13:59:18
Pas terrible l'anglais et le français mauvaise traduction. The custom, je pense que c'est le 'customer', donc le client...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Kazer67 le 19 mars 2021 à 15:26:02
Le Grand Est quoi.

Tu veux un coup de barre à mine toi ? Nous mets pas dans le même sac ;D

C'est : Collectivité européenne d'Alsace  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 19 mars 2021 à 16:26:06
Dessin de Soulcié (Thibaut) publié par Télérama le 19 mars 2021 :

L'accent allemand est là car des pompiers Allemand sont intervenus pour éteindre l'incendie (probablement à bord du bateau franco-allemand).


Et en réalité les Pompiers étaient sur site en 15 minutes, mais ils n'ont commencés à s'attaquer au feu que 1H30 plus tard, le temps que le distributeur électrique coupe le courant sur tout le secteur. Donc en 1H30 il n'y avait déjà plus rien...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 16:45:12
L'arrivée 20 000 volts est au rez-de-chaussée de SBG2 ?

Si oui, je comprends les pompiers et la difficulté a ré-énergiser les autres DC.

Si non, il n'est pas possible de couper l'arrivée Strasbourg Électricité coté client ?

Autre point, cela n'a pas été précisé, mais je suppose que tous ce qui est sur site fonctionne actuellement via des groupes, non ?

Remettre l'arrivée de Strasbourg Électricité, cela n'a pas du être prioritaire.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 17:41:05
Point journalier.

Beaucoup de machines remises en services sur SBG1, SBG3 et SBG4.

Les deux salles de SBG1 où il faut remplacer toutes les cartes mères (soit les serveurs de 50 baies 61Exx et 62Exx) n'apparaissent pas en service.

OVH communiquant que toutes les baies des serveurs nettoyés sont opérationnelles. Je tente de faire un calcul.

Sur SBG1 on a donc :
- 60 baies (3 containers de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs. La restauration des données a le statut "Recoverable".

- 50 baies (2 containers de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs. La restauration des données est "Under investigation".

- 114 baies (4 containers de 20 baies, 1 container de 21 baies et 1 de 13 baies - 60C, 61B, 61C, 62B, 62C et 62D) détruites entièrement par l'incendie.statut "Non-recoverable".

C'est bien ça ?


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)

Les bulletins précédents :
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 19 mars 2021 à 17:51:24
Et en réalité les Pompiers étaient sur site en 15 minutes, mais ils n'ont commencés à s'attaquer au feu que 1H30 plus tard, le temps que le distributeur électrique coupe le courant sur tout le secteur. Donc en 1H30 il n'y avait déjà plus rien...

J'imagine le stagiaire Pompier :

Chef Chef, ça brule faut arroser là, qu'est-ce qu'on attend ??!!  :o

T'inquiète petit, tant que le courant n'est pas coupé on n'arrose rien du tout, profite du spectacle et du burning DC avec la chaleur qui nous réchauffe et qu'y t'es offert gracieusement par OVH et Octave Klaba, tu pourras tenir la lance et envoyer la flotte après mon signal, promis  8)

La vie est cruelle  :'(
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 19 mars 2021 à 17:53:50
L'arrivée 20 000 volts est au rez-de-chaussée de SBG2 ?

Si oui, je comprends les pompiers et la difficulté a ré-énergiser les autres DC.

Si non, il n'est pas possible de couper l'arrivée Strasbourg Électricité coté client ?

Autre point, cela n'a pas été précisé, mais je suppose que tous ce qui est sur site fonctionne actuellement via des groupes, non ?

Remettre l'arrivée de Strasbourg Électricité, cela n'a pas du être prioritaire.

Tu sais bien qu'Octave n'est depuis 20 ans jamais transparent en ce qui concerne l'alimentation électrique et le secours, mais à priori oui l'arrivée et le comptage était au RDC de SBG2, voila pourquoi il a annoncé dépêcher une unité mobile HTA, en gros un container avec des cellules HTA pour repartir le courant vers les autres bâtiments.

Apres quand il annonce "ses standard" de plusieurs alims... à Roubaix OK y'a pleins d'arrivées HTA du poste source.. mais Gravelines il n'a qu'un transformateur HTB/HTA.. le jour ou son unique transfo 225KV / 20KV a une avarie ou un incendie il va tourner des mois sur groupes électrogènes ...

Dans les Postes sources RTE il y a toujours à minima 2 transfos travaillant en parallèle pour la maintenance et en cas d'avarie.

De même sa ligne 225KV est un "piquage" depuis un pylône existant, le jour ou la ligne sera en maintenance plusieurs jours pour des travaux de renforcement de pylône sur le reste de la ligne, entretien, retente des câbles etc ça va être drôle :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 19 mars 2021 à 17:55:10
J'imagine le stagiaire Pompier :

Chef Chef, ça brule faut arroser là, qu'est-ce qu'on attend ??!!  :o

T'inquiète petit, tant que le courant n'est pas coupé on n'arrose rien du tout, profite du spectacle et du burning DC avec la chaleur qui nous réchauffe et qu'y t'es offert gracieusement par OVH et Octave Klaba, tu pourras tenir la lance et envoyer la flotte après mon signal, promis  8)

La vie est cruelle  :'(

La sécurité humaine avant tout, histoire de ne pas griller 10 pompiers en train d'envoyer de l'eau sur de la haute tension.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: xp25 le 19 mars 2021 à 18:09:53
Il aurait du dépêcher un Canadair avec le réservoir de flotte (Rhin) juste à coté  :P
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: e-TE le 19 mars 2021 à 18:33:41
L'arrivée 20 000 volts est au rez-de-chaussée de SBG2 ?

Si oui, je comprends les pompiers et la difficulté a ré-énergiser les autres DC.

Si non, il n'est pas possible de couper l'arrivée Strasbourg Électricité coté client ?

ca parait fou qu'il n'y ait pas un moyen de couper tout pour mettre en sécurité les pompiers, mais si ils ont conçut dans l'optique d'avoir 0 coupure d'elec sans prendre en compte du jour ou faut pouvoir tout couper dans la seconde...
vu la quantité d'énergie en jeu, je comprend que les pompiers se soient assurer de pouvoir y aller en toute sécurité avant de commencer à arroser... et c'est d'autant plus incompréhensible, à mon sens, de ne pas avoir de moyen interne au site de contenir l'incendie si en // il n'y a pas moyen d'assurer un accès rapide et sécurisé aux pompiers en cas de feu  :-X (et dans ce cas la, ca sert a rien d'avoir une voie pompier si ils peuvent juste venir et se tourner les pouces!)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 19:55:40
l'arrivée et le comptage était au RDC de SBG2, voila pourquoi il a annoncé dépêcher une unité mobile HTA, en gros un container avec des cellules HTA pour repartir le courant vers les autres bâtiments.

Mais cela tourne sur groupe ou sur le secteur en ce moment ?

Car j'ai souvenir que certains groupes sur Strasbourg sortent en 20 000 volts, donc les cellules HTA sont nécessaire même pour fonctionner sur groupe, non ?

Il me semble que si le secteur avait été remis, ils l'aurait annoncé, donc sans cette annonce, je pense que tout fonctionne sur groupe. Il a peut-être regretté d'avoir des groupes 20 000 volts, cela a du retarder la mise sous tension vs 400v.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 19 mars 2021 à 20:02:12
tu sais avec Octave tout est possible  :P
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 20:04:14
SBG4, 100% des serveurs sont maintenant ok :
(https://lafibre.info/images/ovh/202103_ovh_srasbourg_monitoring_sbg4_1.png)

Trop beau ?

A moins que ce 100% ok soit une panne du monitoring :

(https://lafibre.info/images/ovh/202103_ovh_srasbourg_monitoring_sbg4_2.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thenico le 19 mars 2021 à 20:14:17
C'est probablement une erreur; la carte était en mode "sapin de noël" il y a encore quelques minutes (https://web.archive.org/web/20210319190845/http://status.ovh.com/vms/index_sbg4.html).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Tomi le 19 mars 2021 à 20:15:23
Visite du sbg1 futuriste !

https://lafibre.info/videos/datacenter/201202_ovh_datacenter_strasbourg_sbg1.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: thenico le 19 mars 2021 à 20:20:01
J'aime bien ce dessin.

(https://lafibre.info/images/ovh/201202_ovh_datacenter_strasbourg_sbg1.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: domi570 le 19 mars 2021 à 20:21:40
Bonjour,
Sans jeux de mots ça dois " Chauffer et transpirer"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: web7 le 19 mars 2021 à 20:25:40
C'est probablement une erreur; la carte était en mode "sapin de noël" il y a encore quelques minutes (https://web.archive.org/web/20210319190845/http://status.ovh.com/vms/index_sbg4.html).

https://twitter.com/olesovhcom/status/1372979028970340360

cherie ça va couper !

(comprendre il y a une surcharge elec et faut que l'on coupes en urgence)

Mais comment ça ? SBG4 n'est pas autonome de SGB1 ?  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hwti le 19 mars 2021 à 20:41:51
Mais cela tourne sur groupe ou sur le secteur en ce moment ?

Car j'ai souvenir que certains groupes sur Strasbourg sortent en 20 000 volts, donc les cellules HTA sont nécessaire même pour fonctionner sur groupe, non ?

Il me semble que si le secteur avait été remis, ils l'aurait annoncé, donc sans cette annonce, je pense que tout fonctionne sur groupe. Il a peut-être regretté d'avoir des groupes 20 000 volts, cela a du retarder la mise sous tension vs 400v.
https://twitter.com/olesovhcom/status/1372156948204949507
Là il parle de 20KV OK, mais peut-être que ça veut juste dire vérifié et pas en service.

Sinon, pour le nettoyage des serveurs, mercredi il parlait de 12 à 16h par serveur, pour 1/3 de SBG3  :o
Et "We are looking for a special process to clean up the servers in SBG1/61E-62E. Some servers in SBG3/Floor 5 have the same issue." suggère que c'était encore pire, ce qui explique qu'ils préfèrent remplacer les cartes mères (à un moment ça revient moins cher de tout remplacer).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: Nico le 19 mars 2021 à 20:56:45
https://twitter.com/olesovhcom/status/1372979028970340360

cherie ça va couper !

(comprendre il y a une surcharge elec et faut que l'on coupes en urgence)

Mais comment ça ? SBG4 n'est pas autonome de SGB1 ?  8)
Comprendre :

#Strasbourg #OVH Nouvel incendie ce soir chez #OVHcloud, dix jours après celui qui a détruit un data center. Le feu a endommagé un conteneur avec 300 batteries de 25kg  #DNAinfos

https://twitter.com/abonin_DNA/status/1372997896207994880
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: vivien le 19 mars 2021 à 20:59:06
Les groupes de Strasbourg pour SBG3 ne sortent que du 20 000 volts, ils intègrent un transformateur pour élever la tension.

Donc pour remettre en service le datacenter sur groupe (hypothèse, car j'ai compris que le secteur ne serait pas rapidement remis en service), il faut des cellules 20 000 volts.

En sortie de chaque groupe, un transformateur 400v vers 20 000v :
(https://lafibre.info/images/ovh/201105_rbx1_en_sortie_de_chaque_groupe_un_transformateur_400V_vers_20000V2.jpg)

(https://lafibre.info/images/ovh/201105_rbx1_en sortie_de_chaque_groupe_un_transformateur_400V_vers_20000V.jpg)
Merci encore Vivien pour toutes ces photos. J'ai plusieurs interrogations.

1) "En sortie de chaque groupe, un transformateur 400v vers 20 000v"
C'est effectivement le cas, et on voit bien que les groupes sont raccordés en 20 000V. Mais je ne comprend pas pourquoi. Vous savez pourquoi on a un transfo 400?->20kV et juste derrière un transfo 20kV->400V?
J'ai déjà vu des installations industrielles, certes un peu moins puissante, où les groupes étaient directement en 400V.

2) Les 2 photos où tu parles de "Distribution 20 000v, depuis OVH a fortement simplifié cette partie dans ses nouveaux data-center :" et "Les cellules haute tension 20 000v :".
Désolé, mais c'est clairement de la basse tension 400V. Les grosses poutres sont caractéristiques des "bus bar" qui transportent de grosses intensités et de basses tension. Ce sont des lames de cuivre suffisamment large et épaisse pour transporter les milliers d'ampères nécessaires (5000A pour un poste 2MVA). C'est lourd, donc supporté par des poutres, et ici enfermé derrière des panneaux de protection.
La haute tension 20 000V, c'est les câbles gris.
De plus, on croit lire "onduleur salle x" sur le panneau. Donc ça ne peut pas être côté haute tension.

Leon.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: hwti le 19 mars 2021 à 21:00:15
Sur SBG1 on a donc :
- 60 baies (3 container de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs
- 50 baies (2 container de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs
- 114 baies (4 container de 20 baies, 1 container de 21 baies et 1 de 13 baies - 60C, 61B, 61C, 62B, 62C et 62C) détruites entièrement par l'incendie
Ils annonçaient 4 salles sur 12 endommagées, mais déjà sur la page je ne vois que 11 lignes.

Et c'était :
Citer
- Salles 61AD/62AD : serveurs non affectés
- Salles 61E/62D : nettoyage des serveurs en cours
Avec le dernier qui est peut-être 62E, sinon il y a un doublon.
Mais dans tous les cas ça fait 9 ou 10, pas 8  ???
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: charly1994 le 19 mars 2021 à 21:07:13
Nouvel incendie ce soir : https://c.dna.fr/faits-divers-justice/2021/03/19/nouvel-incendie-chez-ovh
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 30%.
Posté par: artiflo le 19 mars 2021 à 21:12:33
Les chats noirs

https://twitter.com/olesovhcom/status/1373001710801653767

(https://lafibre.info/images/ovh/202103_ovh_srasbourg_sbg1_feu_batteries.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: py92 le 19 mars 2021 à 21:31:26
et il semble que SBG3 soit à nouveau down aussi  (ou au mieux juste isolé du réseau IP)....

Il a vraiment pas de chances .... (ou alors .......)

vraiment hâte de lire son REX global, là ca sera un roman à écrire.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 19 mars 2021 à 21:32:54
Les container de SBG1 quand ils étaient en prototype sur Roubaix :
Un container prototype sur Roubaix :
(https://lafibre.info/images/ovh/201105_strasbourg_containers_1.jpg)

(https://lafibre.info/images/ovh/201105_strasbourg_containers_2.jpg)

Le container rempli :
(https://lafibre.info/images/ovh/201105_strasbourg_containers_3.jpg)

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 19 mars 2021 à 21:41:17
300 batteries de datacenter qui prennent feu alors qu'elles sont inutilisés et non connectées (c'est ce que je comprend d'Octave), c'est plausible ?

Nouvel incendie chez OVHcloud

Une semaine après le feu qui a ravagé un de ses quatre datacenters, un nouvel incendie a éclaté vendredi soir, à 19h, chez OVHcloud, rue du Bassin de l’Industrie, à Strasbourg. Des moyens en nombre ont été dépêchés sur place. Un seul conteneur a été touché.

Le sinistre aurait touché 300 batteries de 25 kg sur le data Center SBG1. Il a été éteint avec une lance à mousse. Les pompiers ont ensuite procédé à la ventilation du caisson et fait une reconnaissance dans les caissons voisins.

De source interne, le feu a pris dans un local isolé et non alimenté. Deux employés ont été légèrement incommodés par les fumées. Ils ont été examinés sur place.

Source: les Dernières Nouvelles d'Alsace (https://www.dna.fr/faits-divers-justice/2021/03/19/nouvel-incendie-chez-ovh), le 19 mars 2021

(https://lafibre.info/images/ovh/202103_ovh_srasbourg_sbg1_feu_batteries_2.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Nico le 19 mars 2021 à 21:42:31
Après le coup de chaud de l'incendie, pourquoi pas.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: thedark le 19 mars 2021 à 21:46:36
Ce datacenter est maudis.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 19 mars 2021 à 21:47:56
La cause du départ de l'incendie de SBG2 est peut-être ces batteries qui prennent feu spontanément...

Je suis quand même vraiment étonné.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: artiflo le 19 mars 2021 à 22:01:53
Ce datacenter est maudis.

J'avoue ça commence à faire beaucoup quand on reprend tout l'historique de SBG.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 19 mars 2021 à 22:02:45
Vous pariez combien que le distributeur locale à recoupé l'arrivée HTA ? :P

http://weathermap.ovh.net/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 19 mars 2021 à 22:02:52
Le site à des groupes en cas de coupure du réseau... mais pour moi ce n'est pas clair si le 20 000 v vient du réseau ou des groupes.

Une hypothèse de @Avelinnt :

Les batteries au plomb qui sont laissées en décharge deviennent très instables au bout d'un moment. Pour ça qu'il faut toujours les laisser branchées et effectuer des tests régulièrement

Effectivement plusieurs onduleurs ont été changés sur SBG1, donc cela peut être des batteries issues des onduleurs qui n'ont pas supporté l'incendie et qui sont stockées dans des conditions pas forcément idéales.

hypothèse de @pfoo07 :

300 batteries de 25kg visiblement, entassé dans un conteneur. J'imagine que les batteries tout en bas ont pas apprécié le poids de leurs consœurs..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 19 mars 2021 à 22:10:43
Non elles vont se dégrader au bout de X mois mais pas instable, parcontre ça n'aime pas la température au dessus de 20 degres.

Pour la HTA c'est un véritable SPOF dans l'archi électrique de Strasbourg.

En gros si le distributeur locale coupe; les groupes vont envoyer la tension en 20KV dans la même rame HTA et un automate va ouvrir ou fermer les interrupteurs des cellules. (c'est ce qui n'a pas fonctionné en 2017)

Mais si ce local ou la rame HTA FLAMBE tu ne peux ni alimenter via le réseau nominal, ni par les groupes électrogènes. D'ailleurs ce spof existe à TH2 ... ou la tension est remontée en 20KV à chaque étage.



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: underground78 le 19 mars 2021 à 22:26:22
Est-ce qu'on pourrait pas imaginer un bête court-circuit ? Des batteries entreposées dans un coin, peut-être à la va-vite à cause de l'incendie, quelque chose qui fait contact et met une batterie en court-circuit.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: itsmorefun le 19 mars 2021 à 22:30:26
Elles étaient déjà la avant le premier incendie: https://twitter.com/olesovhcom/status/1373020449198706688

Update March,19 10pm

The unused room with the unused batteries was in SBG1 in front of SBG2. The fire in SBG2 has probably damaged the batteries but the smoke started only 10 days after ...

Tomorrow, we start removing everything that is not needed on the site.

traduction Google :

La pièce inutilisée avec les batteries inutilisées était dans SBG1 devant SBG2. Le feu dans SBG2 a probablement endommagé les batteries mais la fumée n'a commencé que 10 jours après...

 Demain, nous commençons à supprimer tout ce qui n'est pas nécessaire sur le site.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: mirtouf le 19 mars 2021 à 22:56:29
Les emmerdes ça vole en escadrille. :-\
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Ienien77 le 20 mars 2021 à 00:42:20
Ils n'ont vraiment pas de chance si on peut dire ça comme ça.

J'ose même pas imaginer les clients qui etaient tout content de pouvoir commencer à récupérer leur données et ne peuvent soudainement plus.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: mmickael le 20 mars 2021 à 00:47:56
Une idée à creuser, à la place de SBG2 ils devraient construire une caserne de pompiers, ils gagneraient du temps
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Ienien77 le 20 mars 2021 à 01:22:34
Une idée à creuser, à la place de SBG2 ils devraient construire une caserne de pompiers, ils gagneraient du temps
Ça pourrait être une nécessité dans ce genre d'installations d'avoir une caserner interne.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: thenico le 20 mars 2021 à 04:33:46
Octave s'interroger publiquement sur le coût de fabrication des masques et de la pertinence d'acheter une usine de fabrication.
Ce ne serait donc pas etonant que la construction d'une caserne auxiliaire de pompier (comme sur certain site SEVESO) soitt sur la table du "comment on fait pour que cela ne se reproduise jamais"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: 970Adsl le 20 mars 2021 à 05:32:56
Va falloir que ovh modifie les paramètres du firewall car ça n'a pas l'air de fonctionner 😅😅😅

Blague à part, cela doit fait peur à ceux qui n'ont pas eu des soucis avec le premier incendie !!
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 20 mars 2021 à 08:18:15
La communication officielle :

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021_2.png)

Les bulletins d'information précédents :
- 19 mars 2021 N°1 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: zenon le 20 mars 2021 à 08:20:15
Ils n'ont vraiment pas de chance si on peut dire ça comme ça.

J'ose même pas imaginer les clients qui etaient tout content de pouvoir commencer à récupérer leur données et ne peuvent soudainement plus.

comme meteociel qui est vraiment très gentil.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: buddy le 20 mars 2021 à 09:05:10
ça me parait vraiment "amateur" de stocker des batteries qui ne servent pas dans un datacenter en fonctionnement.

Ils ne peuvent pas soit les stocker dans un autre bâtiment si elles sont neuves et en attente d'installation ou faire évacuer/recycler les vieilles/anciennes ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Leon le 20 mars 2021 à 10:48:14
https://twitter.com/olesovhcom/status/1373205544610230275
Update March,20 10:30am
SBG1/SBG4:
We don’t plan to restart SBG1 today. We want to remove all what is not needed. In parallel, we are working on the optional plan to move physically the servers from SBG1/4 to RBX.
SBG3:
We are restarting the operations in 1 hour.

Ils vont donc peut-être faire voyager des milliers de serveurs depuis Strasbourg vers Roubaix.
J'espère que le camion ne se fera pas braquer pendant le trajet !

En tout cas, le feuilleton n'est pas fini.
Heureusement qu'OVH est là, pour nous faire vivre autant d'histoires, avec autant de rebondissements. Et ça depuis leurs débuts il y a 20 ans.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: thedark le 20 mars 2021 à 10:51:04
https://twitter.com/olesovhcom/status/1373205544610230275
Update March,20 10:30am
SBG1/SBG4:
We don’t plan to restart SBG1 today. We want to remove all what is not needed. In parallel, we are working on the optional plan to move physically the servers from SBG1/4 to RBX.
SBG3:
We are restarting the operations in 1 hour.

Ils vont donc peut-être faire voyager des milliers de serveurs vers Roubaix.
J'espère que le camion ne se fera pas braquer pendant le trajet !

Leon.
Ne parle pas de malheur pour ces serveurs !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Steph le 20 mars 2021 à 10:59:11
Si le camions se fait braquer ou a un accident, ça fera film d'action et d'espionnage...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: netswitch le 20 mars 2021 à 12:06:23
Là pour le coup, c'est vraiment le sort qui s'acharne et ça doit faire mal à la motivation...

En gros ce serait une salle batterie de SBG1 qui a pris chaud avec l'incendie et qui fait une réaction chimique 10 jours après, difficilement prévisible..
Par contre ça remet en question tous les équipements sur place, il faudrait probablement tout remplacer...

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Cryptage le 20 mars 2021 à 12:38:16
Là pour le coup, c'est vraiment le sort qui s'acharne et ça doit faire mal à la motivation...

En gros ce serait une salle batterie de SBG1 qui a pris chaud avec l'incendie et qui fait une réaction chimique 10 jours après, difficilement prévisible..
Par contre ça remet en question tous les équipements sur place, il faudrait probablement tout remplacer...

Je ne suis pas tout à fait d'accord.
On peut largement imaginer qu'avec un incendie à côté il y aurait des conséquences (humidité, chaleur, suie...) et avec des équipements aussi sensibles que des batteries il ne faut pas faire n'importe quoi.

Je discutais avec des collègues le lendemain de l'incendie et je leur ai dit qu'une fois récupérés le peu de serveurs qu'on avait à SBG il fallait à tout prix les bouger car les pannes (cartes-mères, alimentations, disques...) et problèmes (électriques and co) allaient s'enchainer.

Ça s'est déjà en partie confirmé avec le nettoyage nécessaire d'un paquet de serveurs recouverts de suie dans SBG3 et cet incident avec les batteries à SBG1.
De mon point de vue ce n'est que le début des problèmes.

Et là où OVH est inexcusable c'est que c'est SBG1/4 devaient être démantelés en 2017 suite à l'incident électrique et ça n'a pas été fait.
Aujourd'hui ils en payent une nouvelle fois le prix fort de leur laxisme car le souci est encore localisé dans ces mêmes DC.

Cf ici : http://travaux.ovh.net/?do=details&id=28247

À long terme
------------
La technologie basée sur les containers maritimes ne sera plus utilisée par OVH. En effet, elle n’a été utilisée que pour construire SBG1 et SBG4, et hérite des imperfections de design liées à la faible ambition initialement prévue pour le site. Aujourd’hui, nous réalisons qu’elle n’est plus adaptée aux exigences de notre métier et aux normes OVH. Nous allons donc démanteler SBG1 et SBG4.

Pour cela, une migration de l’ensemble des services de nos clients hébergés sur SBG1 et SBG4 sera opérée vers SBG2 et SBG3 ou sur d’autres datacentres OVH.


Nous sommes sincèrement désolés pour cette panne et nous faisons le nécessaire afin que ce type d'incident ne se reproduise plus.

Personnellement je commence à en avoir marre d'être dérangé régulièrement jour et nuit par des incidents ou des maintenances non prévues dans les DC OVH (et on n'a pas du matos à 5€ / mois !).
Changer n'est pas si évident car on est contraints par des problématiques de souveraineté et les choix restent malgré tout très limités par rapport aux besoins, notamment de volumétrie et de performance.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: artiflo le 20 mars 2021 à 14:05:58
Si octave a de l'humour il pourrait changer d'avatar sur twitter en utilisant un même bien connu (je l'ai repompé de chez hfr).

(https://www.artiflo.org/images/f45sd456fs6.gif)

(https://www.artiflo.org/images/jerrycrazy.gif)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Ienien77 le 20 mars 2021 à 14:37:32
Si octave a de l'humour il pourrait changer d'avatar sur twitter en utilisant un même bien connu (je l'ai repompé de chez hfr).

(https://www.artiflo.org/images/f45sd456fs6.gif)

(https://www.artiflo.org/images/jerrycrazy.gif)

Pourquoi aussi petit ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 20 mars 2021 à 15:37:35
Ne parle pas de malheur pour ces serveurs !

La semaine passée 700 serveurs ont déjà fait un voyage en jet privée pour rejoindre Gravelines.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: thedark le 20 mars 2021 à 15:47:07
Citer
SBG1:
We don’t plan to restart SBG1. Ever.
Servers in 61A/D+62A/D will be moved to SBG4.
Servers in 61E/62E will be moved to Croix and clean up then restart in RBX/GRA.

SBG4:
working on the power + the network from SBG3. Then we restart SBG4.

SBG3:
60 tech works in the DC. we clean up the servers & we restart.

All the authorities (firefighters, préfet, police, insurances, experts, etc) are very supportive and understand the importance of restarting DCs. Everybody is doing the best. Thanks !
Source: https://twitter.com/olesovhcom/status/1373280258171019271

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_sbg1_ne_sera_pas_redemarre.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Leon le 20 mars 2021 à 15:53:22
La semaine passée 700 serveurs ont déjà fait un voyage en jet privée pour rejoindre Gravelines.
Salut. T'as une source fiable pour cette info?

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: e-TE le 20 mars 2021 à 16:01:48
HS
Pourquoi aussi petit ?
car c'était fait à la base pour en faire un smiley personnalisé sur hfr o:
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 20 mars 2021 à 16:06:28
Il ne communique pas la dessus mais 700 serveurs bien noircie par la fumée ont fait un vol en jet privée vers Gravelines, oh bah enfin on va arriver vraiment à 20 grammes de CO2 par email  ;D ;D ;D
La semaine passée 700 serveurs ont déjà fait un voyage en jet privée pour rejoindre Gravelines.
Ils ont apportés des serveurs de Roubaix vers Strabourg mais tu es sur qu'il y en a eu dans l'autre sens ?

Dans le sens Strabourg vers Roubaix, je pense que ce ne peut pas être des serveurs (si la carte mère est HS elle est changée) mais de disques. On peut se demander si électronique des SSD / disques fonctionne toujours quand la carte mère n'a pas survécu aux fumées ou à la chaleur.

On voit bien que ce que cherche OVH c'est de remettre en service un maximum de disques / SSD pour que les clients puissent récupérer leurs données.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: py92 le 20 mars 2021 à 16:14:37
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_sbg1_ne_sera_pas_redemarre.png)

C'est au final une descision très compréhensible de démanteler le reste de SBG1, reste à savoir combien de temps celà va prendre de déplacer les serveurs ? ou peut-être les conteneurs entiers? vers SBG4.

Ca facilitera les travaux de démantèlement de SBG2 dans qq mois.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 20 mars 2021 à 16:22:25
Salut. T'as une source fiable pour cette info?

Leon.

Bah un salarié OVH qui a voyagé avec.. :]
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 20 mars 2021 à 16:23:21
Ils ont apportés des serveurs de Roubaix vers Strabourg mais tu es sur qu'il y en a eu dans l'autre sens ?

Dans le sens Strabourg vers Roubaix, je pense que ce ne peut pas être des serveurs (si la carte mère est HS elle est changée) mais de disques. On peut se demander si électronique des SSD / disques fonctionne toujours quand la carte mère n'a pas survécu aux fumées ou à la chaleur.

On voit bien que ce que cherche OVH c'est de remettre en service un maximum de disques / SSD pour que les clients puissent récupérer leurs données.

Oui de SBG vers Gravelines pour les nettoyer et remettre en route.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: hwti le 20 mars 2021 à 16:59:55
Source: https://twitter.com/olesovhcom/status/1373280258171019271

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_sbg1_ne_sera_pas_redemarre.png)
Donc ce sont bien uniquement 6 salles qui sont "OK" (sous réserve de nettoyage), et au moins 5 détruites (60C, 61B, 61C, 62B, 62C).
Au début ils annonçaient 8 OK et 4 détruites, donc le comptage est toujours bizarre.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Hugues le 20 mars 2021 à 17:18:10
A/D ça ne pourrait pas dire de A à D plutôt ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: q05 le 20 mars 2021 à 17:32:09
Bah un salarié OVH qui a voyagé avec.. :]
Un jet privé je vois çà tout petit. Et pourquoi pas en camion ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: hwti le 20 mars 2021 à 17:42:12
A/D ça ne pourrait pas dire de A à D plutôt ?
Sur https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/, il y a bien "not recoverable" pour 61B, 61C, 62B et 62C.
60C n'est pas listée, et il manque encore une salle pour faire 12 (la salle réseau peut-être, mais ça aurait été très trompeur de la compter avec les autres, puisque si elle ne sert qu'à ça il n'y a aucune donnée des clients dedans).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: Cryptage le 20 mars 2021 à 18:07:52
Dernières news (un vrai feuilleton...) :

* Ils abandonnent définitivement SBG1 :
- Une partie ira dans SBG4
- Une partie ira à RBX/GRA.

* SBG4 toujours pas up :
- Ils doivent du coup câbler l'alimentation (edit : et le réseau) de SBG4 depuis SBG3.  :o

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_sbg1_ne_sera_pas_redemarre_2.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 20 mars 2021 à 18:52:58
Regardez bien il va surcharger les transfos et l'alim de SBG3 et il va cramer SBG3 ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: web7 le 20 mars 2021 à 18:54:10
Qui pour prévenir les pompiers par avance ? ....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 20 mars 2021 à 18:57:41
Si on raisonne en terme de salle, SBG1 étant composé de 11 salles :
- 27% de SBG1 a le statut "Recoverable" après l'incendie du 10 mars
- 18% de SBG1 a le statut "Under investigation". Il faut au minimum changer toutes les cartes mères des serveurs.
- 55% de SBG1 est détruit compétemment par l'incendie

Si on raisonne en terme de baies, SBG1 étant composé de 224 baies :
- 27% de SBG1 (60 baies) a le statut "Recoverable" après l'incendie du 10 mars
- 22% de SBG1 (50 baies) a le statut "Under investigation". Il faut au minimum changer toutes les cartes mères des serveurs.
- 51% de SBG1 (114 baies) est détruit compétemment par l'incendie.

En fait il y a seulement 1/4 de SBG1 qui est peu dégradé par l'incendie du 10mars.

On ne sais pas si le début d'incendie du 19 mars à dégradé la situation, vu que le plan après le 10 mars était de restaurer les salles et que depuis le 19 mars, SBG1 est abandonné.

C'est étonnant qu'un début d'incendie dans un container inutilisé change complètement les plan d'OVH. Je pense qu'il y a eu des dégâts supplémentaires sur d'autres containers.


OVH communiquant que toutes les baies des serveurs nettoyés sont opérationnelles. Je tente de faire un calcul.

Sur SBG1 on a donc :
- 60 baies (3 containers de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs. La restauration des données a le statut "Recoverable".

- 50 baies (2 containers de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs. La restauration des données est "Under investigation".

- 114 baies (4 containers de 20 baies, 1 container de 21 baies et 1 de 13 baies - 60C, 61B, 61C, 62B, 62C et 62D) détruites entièrement par l'incendie.statut "Non-recoverable".

C'est bien ça ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 20 mars 2021 à 19:10:11
Pourraient prévenir leurs clients quand ils font un barbuc géant 2x de suite, surtout que c'est bon les saucisses de Strasbourg.

[modération]
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 20 mars 2021 à 19:11:38
Si on raisonne en terme de salle, SBG1 étant composé de 11 salles :
- 27% de SBG1 a le statut "Recoverable" après l'incendie du 10 mars
- 18% de SBG1 a le statut "Under investigation". Il faut au minimum changer toutes les cartes mères des serveurs.
- 55% de SBG1 est détruit compétemment par l'incendie

Si on raisonne en terme de baies, SBG1 étant composé de 224 baies :
- 27% de SBG1 (60 baies) a le statut "Recoverable" après l'incendie du 10 mars
- 22% de SBG1 (50 baies) a le statut "Under investigation". Il faut au minimum changer toutes les cartes mères des serveurs.
- 51% de SBG1 (114 baies) est détruit compétemment par l'incendie.

En fait il y a seulement 1/4 de SBG1 qui est peu dégradé par l'incendie du 10mars.

On ne sais pas si le début d'incendie du 19 mars à dégradé la situation, vu que le plan après le 10 mars était de restaurer les salles et que depuis le 19 mars, SBG1 est abandonné.

C'est étonnant qu'un début d'incendie dans un container inutilisé change complètement les plan d'OVH. Je pense qu'il y a eu des dégâts supplémentaires sur d'autres containers.

ou alors, vu qu'ils ont dit, suite a l'incendie de batteries, ne pas vouloir redémarrer avant d'avoir retiré tout ce qui était inutile sur site, ils se sont peut etre rendu rendu compte que tout le bordel serait plus long a dégager que de déplacer les serveurs à roubaix... sachant qu'en plus, ils ont les lignes d'assemblages a roubaix, donc le matos et les équipes sur place pour swapper le matériel endommagé si besoin?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: vivien le 20 mars 2021 à 19:13:13
Je suis étonné dans la communication ci-dessous du fait que les serveur de la salle SBG1/62D seront déplacés vers SBG4 :
(https://lafibre.info/images/ovh/202103_ovh_strasbourg_sbg1_ne_sera_pas_redemarre.png)

La salle SBG1/62D est bien marqué "Non-recoverable" sur https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/

La communication d'hier à 15h indiquait :
- SBG1 : toutes les baies des serveurs nettoyés sont opérationnelles (60 baies).
- SBG3 : les premières baies sur SBG3 sont mises en service ce jour.
- SBG4 : le datacentre est totalement opérationnel.

60 baies, cela correspond uniquement aux baies de 3 containers de 20 baies : 61A, 61D et 62A.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: hwti le 20 mars 2021 à 19:25:40
La salle SBG1/62D est bien marqué "Non-recoverable" sur https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/
Il est indiqué "(no local data)", donc ce sont des serveurs qui ne travaillent qu'avec des données stockées ailleurs (via le réseau donc), par exemple en 62C dans la liste plus bas.
Donc ce sont juste des serveurs sans disque (ou juste un disque système).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 40%.
Posté par: py92 le 20 mars 2021 à 19:32:40
Il est indiqué "(no local data)", donc ce sont des serveurs qui ne travaillent qu'avec des données stockées ailleurs (via le réseau donc), par exemple en 62C dans la liste plus bas.
Donc ce sont juste des serveurs sans disque (ou juste un disque système).

Oui ce sont juste des ESXi avec le disque système mais toutes les VM sont sur le datastore (NAS) dans une baie en 62C qui elle est brulée ..... donc remettre up les baie en 62D ne représente pas bcp d'urgences
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mmickael le 20 mars 2021 à 19:33:52
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: hwti le 20 mars 2021 à 19:56:02
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂
maintenance des onduleurs lundi et mercredi (http://travaux.ovh.net/?do=details&id=49608&, http://travaux.ovh.net/?do=details&id=49607&).
J'espère pour eux que ce n'est pas le même type de maintenance que ce qu'ils ont fait à SBG2, si c'est un lot de pièces défectueuses par exemple...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 20 mars 2021 à 20:26:58
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂
:-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 20 mars 2021 à 20:29:26
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂

On sera là pour les consoler  :-[
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 20 mars 2021 à 20:43:24
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂

C'est le cas d'une grande chaîne de magasin qui est redondance Roubaix/Strasbourg.

Ils ont perdu Strabourg. L'impact en cas de Roubaix ? Des centaines de magasins qui ne peuvent pas ouvrir (on ne parle pas de petit magasins, une bonne partie sont des hypermarchés).

Le risque de perte de Roubaix en ce moment est bien plus important qu'en temps normal, vu qu'ils font énormément d'évolutions pour rajouter le plus rapidement possible de nouveaux serveurs (il y a toujours un risque minime quand on augmente la capacité, que ce soit électrique, de refroidissement, de réseau,...)

Je ne serais pas étonné qu'ils mettent en place 3 sites distincts.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 20 mars 2021 à 20:45:39
une grande chaine de magasin chez ovh ? LOL qui ? ;D ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 20 mars 2021 à 20:50:52
une grande chaine de magasin chez ovh ? LOL qui ? ;D ;D
bah ca reste un gros hébergeur, avec un bon pra ca passe, la preuve on n'a rien constaté...

bah du coté de roubaix ( villeneuve d'ascq) qui a un gros siege? ca commence par un A.. ca semble une bonne piste ^^
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 20 mars 2021 à 20:55:07
C'est :
(https://upload.wikimedia.org/wikipedia/fr/b/ba/Mammouth_logo_4.svg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 20 mars 2021 à 20:58:20
bah ca reste un gros hébergeur, avec un bon pra ca passe, la preuve on n'a rien constaté...

bah du coté de roubaix ( villeneuve d'ascq) qui a un gros siege? ca commence par un A.. ca semble une bonne piste ^^

Non l'oiseau n'est pas chez OVH :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 20 mars 2021 à 21:03:10
Oui ce sont juste des ESXi avec le disque système mais toutes les VM sont sur le datastore (NAS) dans une baie en 62C qui elle est brulée ..... donc remettre up les baie en 62D ne représente pas bcp d'urgences

Je met à jour ma répartition. Sur SBG1 on a donc :

- 27% - 60 baies (3 containers de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs. La restauration des données a le statut "Recoverable".

- 22% - 50 baies (2 containers de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs. La restauration des données est "Under investigation".

- 9% - 21 baies (1 container de 21 baies - 62D). ESXi avec le disque système mais toutes les VM sont sur le datastore (NAS) dans une baie en 62C qui elle est brûlée. Statut "Non-recoverable".

- 42% - 93 baies (4 containers de 20 baies et 1 container de 13 baies - 60C, 61B, 61C, 62B et 62C) détruites entièrement par l'incendie. Statut "Non-recoverable".
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 20 mars 2021 à 21:05:49
Non l'oiseau n'est pas chez OVH :)
hey bah j'aurais pensé a eux vu tout ce qu'ils consomment en ressource informatique local..

ca parle hyper, donc ca ne doit pas etre décathlon non plus :-X
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 20 mars 2021 à 21:11:54
Un moment que c'est en maintenance (enseigne qui n'est pas un rond-point) ???
(https://t.imgaa.com/2021/03/20/60565693f169b410481727_300x300.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 20 mars 2021 à 21:24:42
hey bah j'aurais pensé a eux vu tout ce qu'ils consomment en ressource informatique local..

ca parle hyper, donc ca ne doit pas etre décathlon non plus :-X

Decathlon a son propre datacenter principal à LOMPRET à coté de Lille, avec une réplication temps réel dans un autre DC.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 20 mars 2021 à 21:31:25
Je met à jour ma répartition. Sur SBG1 on a donc :

- 42% - 93 baies (4 containers de 20 baies et 1 container de 13 baies - 60C, 61B, 61C, 62B et 62C) détruites entièrement par l'incendie. Statut "Non-recoverable".

Concernant "60C",  aucune mention sur https://www.ovhcloud.com/fr/lp/status-services-backup-strasbourg/ de son usage.
Je dirais que le status est unkown sur ce containers à date et peut-être pas perdu.
C'est peut-être une travée pas prioritaire à restaurer électriquement
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 20 mars 2021 à 21:33:11
Tiens tiens  ::)

13 septembre 2017 :

https://www.journaldunet.com/solutions/cloud-computing/1197099-pour-gagner-en-agilite-auchan-retail-france-cree-son-broker-de-clouds/

Citer
A terme, celui-ci doit pouvoir provisionner et piloter l'ensemble des systèmes, qu'ils soient installés sur l'environnement interne vSphere ou chez le fournisseur de cloud sélectionné par Auchan Retail France, en l’occurrence OVH.

Citer
Au sein de l'offre OVH, Auchan Retail France s'est tourné vers Dedicated Cloud, le cloud dédié de l'hébergeur français.

Citer
Point important pour Auchan Retail France, l'offre de serveurs physiques d'OVH ouvre la possibilité de maîtriser le nombre de processeurs embarqués dans les machines.

Citer
Des projets visant à basculer certains systèmes chez OVH ont déjà été enclenchés. Une application de gestion des prix en magasins et un logiciel de gestion commerciale sont notamment concernés. "Nous commençons en parallèle à étudier de près la possibilité de recourir aux containers Docker dans vSphere comme alternatives, plus légères et plus agiles, aux machines virtuelles", confie pour finir Grégory Bodéle.

Si c'est pas lui c'est donc son frère  8)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: willemijns le 20 mars 2021 à 21:36:36
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂

quand Roubaix va cramer => si Roubaix crame.

Restons... logique ^^ a moins que t'es pyromane ?

C'est vrai qu'il aurait été plus logique de mettre de la repli sur un autre DC.

En échange on supposera que les effectifs pompiers sur RBX ont été augmentés pour au moins quelques mois... ou tout du moins espérons-le.




Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 20 mars 2021 à 21:44:14
La probabilité que Roubaix ait un incendie est faible (encore plus faible que l'incendie ait un impact aussi important que SBG1/2, c'est une première en France en terme de nombre de baies détruites), par contre il y a d'autres type d'incidents (notamment électrique ou réseau) qui sont plus fréquents que les incendie dans les datacenter et qui peuvent rendre les serveurs inaccessibles.

Les entreprises qui ont besoin vital de très haute disponibilité avec bascule entre deux sites dont Strasbourg peuvent donc être un peu inquiètes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: willemijns le 20 mars 2021 à 21:50:48
on dira qu'il continue à jouer avec le feu ! sic !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 20 mars 2021 à 22:00:38
Ils vont être content les clients qui ont choisi une redondance Roubaix/Strasbourg et qui vont du coup avoir du Roubaix/Roubaix. Ça promet de belles discussions quand Roubaix va cramer 😂

concernant les baie 61E et 62E Octave disait hier vouloir mettre une carte mère d'ATOM pour brancher les disque dur et pour permettre aux clients de récupérer les données ....
la migration de 61E/62E vers croix puis roubaix est peut être dans cette logique très temporaire de permettre aux clients de récupérer leur données pour re-installer leur Baremetal ailleurs (chez OVH).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 20 mars 2021 à 23:58:53
Jeudi 18, un jet à fait SXB - LIL
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 21 mars 2021 à 00:04:05
Entre le 15 et le 19 Mars, il n'arrête pas de faire la navette entre Lille et Strasbourg
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Hugues le 21 mars 2021 à 00:11:48
- ah, le milky way est de retour 😂
On a eu un loop sur ce routeur lo0.ccr2004.edge.th2.bb.ip4.milkywan.net pendant 10 minutes.
Maintenance, j'avais prévenu sur le sujet qui va bien dans la section qui va bien ;)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Cryptage le 21 mars 2021 à 00:11:56
Vu la taille de l'engin ce ne serait pas plutôt simplement pour transporter les équipes qui sont venues en renfort ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Hugues le 21 mars 2021 à 00:12:59
Vu la taille de l'engin ce ne serait pas plutôt simplement pour transporter les équipes qui sont venues en renfort ?
Je pense, comme en 2017 d'ailleurs
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 21 mars 2021 à 00:20:01
Effectivement, ce n'est pas une grosse machine
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 21 mars 2021 à 00:21:11
il y a eu 700 serveurs de transférés par les airs je vous dis :) peut être par un plus gros modèle d'avion..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 21 mars 2021 à 00:22:55
C'était le seul qu'il faisait la navette entre Strasbourg et Lille. Il ne devait contenir que des serveurs plus les deux pilotes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 21 mars 2021 à 00:35:35
Était-ce un onduleur VERTIV impliqué dans l'incendie ? Le technicien est bien identifiable avec une casquette du constructeur sur la tête. (Video d'Octave)

(https://lafibre.info/images/logo/logo_vertiv.webp)

(https://lafibre.info/images/ovh/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg_2.webp)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 21 mars 2021 à 04:09:38
Ceux qui cherchent une nouvelle vidéo, c'est dans la vidéo du 16 mars, à la 28ème seconde.

On devant en avoir une le 19 mars, qui donne des détails sur le départ du feu à SBG2 et qui annonce plein de choses positives à annoncer, comme le redémarrage de SGB1 avec tous les serveurs nettoyés, 100% des baies de SBG4 en ligne et la première baie sur SBG3 up avec le travail en cours pour mettre en lignes d'autres baies du bas de SBG3 (ce dernier point s'est bien réalisé).

Cette vidéo du 19 mars était d'ailleurs mentionnée dans le point hebdomadaire, j'imagine qu'elle était tournée et en cours de validation par les équipes juridiques quand il y a eu le dégagement de fumée dans un container de batteries de SBG1 avec la coupure de SBG1, SBG4 et des deux salles réseau, coupant SBG3 de tout accès Internet (si la/les premières baies remise en service était sous tension).

La vidéo du 16 mars :

Nouvelle vidéo d'Octave Klaba incluant quelques photos des travaux :

L'origine du sinistre se concentre sur l'onduleur et les batteries, une nouvelle vidéo avec plus de détails sur l'origine sera tournée vendredi prochain.


https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg_2.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mmickael le 21 mars 2021 à 08:43:05
C'était le seul qu'il faisait la navette entre Strasbourg et Lille. Il ne devait contenir que des serveurs plus les deux pilotes.

Je n’y crois pas trop.
Un avion de ce type n’est pas équipé pour cela.

Comment tu attache tes serveurs dans un avion non cargo ? Sur les sièges, oui ça se fait pour des cartons et avec un filet.
Jamais un pilote n’acceptera de faire voler un avion avec une cargaison non fixée, ce serait de la folie, déséquilibrage et perte de contrôle garantis.

Je crois que c’est surtout pour les équipes, ils l’ont déjà fait par le passé, ils sont coutumiers des grosses pannes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 21 mars 2021 à 08:49:18
Point journalier, publié hier soir, plus tard que d'habitude.

Je ne comprends pas que suite à un dégagement de fumé dans un container inutilisé de SBG1, ils ne soient pas en mesure d'électrifier SBG4.
SBG4 est indiqué "arrêté par précaution" (!)
Ok pour ne pas remettre en service SBG1, qui est détruit à moitié par l'incendie du 10 mars, mais pourquoi ne pas alimenter SBG4, même si le transformateur est le même que pour SBG1 ?
Il y a une donnée qu'il manque pour comprendre l’arrêt total de SBG4 en attendant sa nouvelle électrification.

Note: SBG2 a vu sa communication évoluer : c'était "Bâtiment hors d'usage" (du 13 au 17 mars) puis "Bâtiment non opérationnel" (18 et 19 mars) et maintenant c'est "Datacentre arrêté" (20 mars).


(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)

Les bulletins précédents :
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 21 mars 2021 à 09:39:34
Il y a une donnée qu'il manque pour comprendre l’arrêt total de SBG4 en attendant sa nouvelle électrification.

Pour une fois ils font les choses dans l'ordre et déconstruise SBG1 complètement et ne veulent pas "recouper" SBG4 dans 1 semaine.
Ou alors ce n'est pas leur décision mais celle des experts/assurances ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 21 mars 2021 à 09:42:19
Point journalier, publié hier soir, plus tard que d'habitude.

Je ne comprends pas que suite à un dégagement de fumé dans un container inutilisé de SBG1, ils ne soient pas en mesure d'électrifier SBG4.
SBG4 est indiqué "arrêté par précaution" (!)
Ok pour ne pas remettre en service SBG1, qui est détruit à moitié par l'incendie du 10 mars, mais pourquoi ne pas alimenter SBG4, même si le transformateur est le même que pour SBG1 ?
Il y a une donnée qu'il manque pour comprendre l’arrêt total de SBG4 en attendant sa nouvelle électrification.

car SBG4 était une extension (verrue?) de SBG1 .... Le réseau sur SBG4 venait directement de SBG1 et probablement idem pour l'énergie.

d'où le besoin maintenant de connecter SBG4 sur SBG3 et ça va prendre qq jours supplémentaires...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 21 mars 2021 à 09:42:49
Ah Octave vient de comprendre qu'il ne suffit pas d'une rallonge électrique Leroy Merlin pour brancher SGB4 sur la prise électrique de ménage de SBG3. Il annonce maintenant qu'il faut 3 jours pour creuser et raccorder... Et pendant ce temps il ne peux pas alimenter SBG4 sur groupe elec comme soit disant chaque DC est autonome ? .....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Hugues le 21 mars 2021 à 09:49:11
Ah Octave vient de comprendre qu'il ne suffit pas d'une rallonge électrique Leroy Merlin pour brancher SGB4 sur la prise électrique de ménage de SBG3.

Tes interventions ici deviennent pénibles.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 21 mars 2021 à 09:51:49
Et pendant ce temps il ne peux pas alimenter SBG4 sur groupe elec comme soit disant chaque DC est autonome ? .....
Parce que tu connais le câblage électrique entre les groupes et les DCs ? Tu es bien sur certain que ça ne passe pas par SBG1 ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: thedark le 21 mars 2021 à 10:02:37
(https://pix.milkywan.fr/t4hsLsSj.png)

Source: https://twitter.com/olesovhcom/status/1373548122996146176
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 21 mars 2021 à 10:18:14
Néanmoins il faut reconnaitre la haute expertise d'OVH dans la gestion de crises des coupures de courant.  :-\

http://travaux.ovh.com/?do=details&id=205  (note : il n'y a pas de groupes électrogènes à P19)

Mais j'ai une grosse pensée pour le personnel OVH en train de trimer comme des fous pour essayer de sauver le business des clients. Courage à eux !

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: eahlys le 21 mars 2021 à 10:26:19
Vraie question : pourquoi il y a jamais d’emmerdes du genre chez Online?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Snickerss le 21 mars 2021 à 10:29:20
Il n’y a jamais d’emmerdes jusqu’au jour où il y a des emmerdes.


Ceci étant dit, ce n’est pas une excuse. Et ici, OVH semble bien 100% responsable du malheur qui lui arrive.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: thibault64 le 21 mars 2021 à 10:30:11
Vraie question : pourquoi il y a jamais d’emmerdes du genre chez Online?
Parce que les datacentres d’Online/Scalway sont mieux conçus et dans des zones avec de moindre risques dans l’environnement immédiat.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Cryptage le 21 mars 2021 à 10:37:43
Le risque existe partout et je pense que cet incendie l'a bien rappelé aux autres acteurs.

Le problème d'OVH c'est qu'ils rognent sur pas mal de petites choses qui mises bout à bout finissent par devenir problématiques et leur second problème c'est qu'ils n'apprennent pas vraiment de leur erreur.
SBG1 et SBG4 devaient être démantelés en 2017 et si ça avait été le cas comme ça a été affiché ça n'aurait certes pas empêché l'incendie de SBG2 mais ça aurait au moins réduit l'impact pour les clients de ces 2 DC.

Là ils vont faire quoi ? Bah remettre SBG4 en route dans quelques jours (après l'avoir rallumé intégralement, les clients ont du être ravis de cette nouvelle coupure qui va durer 1 semaine) en le repiquant depuis SBG3.... logique. :-X
Pour ceux de SBG1 il va falloir attendre que les serveurs soient déménagés / nettoyés et réinstallés sur les autres sites (et certains risquent de perdre le multi-DC comme évoqué précédemment).

On ne connait pas l'envers du décor mais on a l'impression que Octave Klaba a un pouvoir de décision "technique" encore beaucoup trop fort et qu'il faudrait des vrais spécialistes de tout ce qui est incident / reprise - continuité d'activité pour éviter des erreurs aussi grossières qu'éteindre définitivement un DC après l'avoir rallumé et faire des travaux sur le second alors qu'on vient de payer (en temps et en argent) pour sa remise en route...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Steph le 21 mars 2021 à 10:41:05
quand Roubaix va cramer => si Roubaix crame.

Restons... logique ^^ a moins que t'es pyromane ?
Quite à pousser la logique, autant aller jusqu'au subjonctif présent.  ;)

"à moins que tu ne sois pyromane"

http://bdl.oqlf.gouv.qc.ca/bdl/gabarit_bdl.asp?id=4238

https://fr.wikipedia.org/wiki/Subjonctif

Mode de conjugaison très utile pour ce fil, ainsi que le mode conditionnel.
Un peu d'imparfait du subjonctif :
"Encore eût-il fallu que nous observassions des manquements à la sécurité pour que nous pussions tirer ainsi à vue sur l'ambulance."

 :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Symbol le 21 mars 2021 à 17:00:10
Vraie question : pourquoi il y a jamais d’emmerdes du genre chez Online?
On rappelle la coupure de jus totale à DC2 parce qu'un ou deux groupes n'ont pas démarré et que ça en a pété un troisième pour cause de surcharge. Des emmerdes il y en a partout.

Parce que les datacentres d’Online/Scalway sont mieux conçus et dans des zones avec de moindre risques dans l’environnement immédiat.
Deux voisins immédiats de DC2 et DC5 ont brûlé (des entrepôts de merdes diverses), et l'inquiétude était grande pour le DC à chaque fois.

Alors en effet c'est mieux conçu, mais des emmerdes tout le monde peut en avoir.

Tiens, en matière d'environnement immédiat tu prends Interxion PAR2, qui partage leur bâtiment avec des grossistes asiatiques de fringues. Ça brûle bien, ça.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Symbol le 21 mars 2021 à 17:02:36
Tes interventions ici deviennent pénibles.
Ou distrayantes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: artiflo le 21 mars 2021 à 18:42:54
Parce que les datacentres d’Online/Scalway sont mieux conçus et dans des zones avec de moindre risques dans l’environnement immédiat.

Euuuuhhhh DC5 a eu très chaud aux fesses en 2019 et l'issue aurait pu être très différente.

Rappel : https://blog.scaleway.com/fr/incendie-dc5/

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 21 mars 2021 à 18:55:08
Il y a un sujet sur le forum si vous êtes intéressé par cet incendie :
11h57 : Alerte. DC5 traverse une situation extrêmement critique, un voisins est en train de brûler, l'incendie est non maîtrisé et les pompiers craignent une explosion à tout moment. Je me rends sur place avec du renfort.
Source : Twitter d'Arnaud de Bermingham (https://twitter.com/a_bermingham)

Vidéo tournée par le Sdis 95 (Service départemental d'incendie et de secours du Val-d'Oise) :
On reconnais parfaitement les groupes de DC5 qui sont à 3 mètres de l'incendie.

https://lafibre.info/videos/datacenter/201906_incendie_entreprises_voisines_datacenter_scaleway_dc5_1.mp4

https://lafibre.info/videos/datacenter/201906_incendie_entreprises_voisines_datacenter_scaleway_dc5_2.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: FloBaoti le 21 mars 2021 à 20:03:53
Dans cette même situation strictement identique, OVH aurait-il choisi de construire un mur anti-feu ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: willemijns le 21 mars 2021 à 21:23:39
on a l'impression que Octave Klaba a un pouvoir de décision "technique" encore beaucoup trop fort et qu'il faudrait des vrais spécialistes de tout ce qui est incident / reprise.

Si c'est pour payer X personnes qui n'auront de choix que de suivre au final Octave quel intérêt ? En technique la #team Klaba lacheront rien des amarres...

la famille... la famille... la famille...

avantages et inconvénients.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 21 mars 2021 à 21:30:43
Dans cette même situation strictement identique, OVH aurait-il choisi de construire un mur anti-feu ?

Pour se protéger des voisins ? ou protéger les voisins ?  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mattmatt73 le 22 mars 2021 à 02:14:35
Pour se protéger des voisins ? ou protéger les voisins ?  ;D

Ce qui est positif, c'est qu'à côté de toi, nombre d'entre nous, sommes au paroxysme de la subtilité.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 07:17:30
Point journalier, publié hier soir.

On pourrait penser que des serveurs ont été redémarrés à chaque étage de SBG3, or le dernier étage, celui qui a le plus souffert de l'incendie, a été supprimer de la capture d'écran !

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)

Les bulletins précédents :
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 07:19:52
Voici la situation de SBG3 complète ce matin.

On voit qu'ils ont continuer à allumer des baies cette nuit.

Aucune baie n'est par contre allumée au dernier étage de SBG3.


(https://lafibre.info/images/ovh/202103_ovh_strasbourg_redemarrage_sbg3_22mars2021.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mmickael le 22 mars 2021 à 12:46:33
Il y a des raisons pour que l'allumage de SBG3 soit si long ?
Ok pour allumer rack par rack toutes les 10-15 minutes, pic de consommation à l'allumage on le sait tous, mais là, j'ai la nette impression qu'ils vont beaucoup plus lentement.
Et pourquoi des allumages si irréguliers ? un rack par ci, un rack par là... ça fait désordre...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 12:53:41
Il faut nettoyer un par un les serveurs pour les 4 premiers étages de SBG3.
60 personnes font ce nettoyage 24h/24.

Pour les 5ème étage de SBG3, il est possible qu'il soit nécessaire de changer les serveurs, comme pour deux salles de SBG1.
Le disque doit subir un nettoyage particulier.

J'avais loupé la nécessité de remplacement des cartes mères sur deux salles de SBG1 :

(https://lafibre.info/images/ovh/202103_ovh_strabourg_changement_carte_mere.png)

J’espère qu'on aura la vidéo d'Octave ce soir. Elle était prévue et probablement déjà tournée vendredi quand il y a eu le début d'un nouvel incendie sur SBG1.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 22 mars 2021 à 13:13:58
Il y a des raisons pour que l'allumage de SBG3 soit si long ?
Ok pour allumer rack par rack toutes les 10-15 minutes, pic de consommation à l'allumage on le sait tous, mais là, j'ai la nette impression qu'ils vont beaucoup plus lentement.
Et pourquoi des allumages si irréguliers ? un rack par ci, un rack par là... ça fait désordre...
Pour compléter la réponse de vivien, il faut aussi voir le nombre de personne sur site.
J’ai un peu la flemme de remonter le fil sur twitter, mais il me semble me souvenir que Octave avait dit qu’il y avait 60 techniciens en 24/24. On peu parfaitement supposer que ce chiffre correspondent à 3 shift de 20 personnes, en 3x8 pour faire les 60 techniciens en 24/24.
Et dans ce cas 20 techniciens dans 4 étages ça ne fait plus que 5 tech par étages.. donc par exemple 2 par baie pour nettoyer/tester/changer + 1 qui fait le suivi avec le stock.

Et il y'en a peut être moins parce que d’autres sont dans SBG4 à faire des trancher ;-)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Douks le 22 mars 2021 à 13:47:23
SBG1 et SBG4 devaient être démantelés en 2017

Ah ? Tu aurais quelques sources à ce sujet ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Hugues le 22 mars 2021 à 13:53:10
OVH, com de l'incident de 2017, on l'a déjà mentionnée plusieurs fois ici et sur le sujet dédié
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 22 mars 2021 à 13:56:33
Ah ? Tu aurais quelques sources à ce sujet ?
c'est dans la réponse d'Octave suite à la panne de 2017

Citer
À long terme
------------
La technologie basée sur les containers maritimes ne sera plus utilisée par OVH. En effet, elle n’a été utilisée que pour construire SBG1 et SBG4, et hérite des imperfections de design liées à la faible ambition initialement prévue pour le site. Aujourd’hui, nous réalisons qu’elle n’est plus adaptée aux exigences de notre métier et aux normes OVH. Nous allons donc démanteler SBG1 et SBG4.

Pour cela, une migration de l’ensemble des services de nos clients hébergés sur SBG1 et SBG4 sera opérée vers SBG2 et SBG3 ou sur d’autres datacentres OVH.


Nous sommes sincèrement désolés pour cette panne et nous faisons le nécessaire afin que ce type d'incident ne se reproduise plus.

Amicalement
Octave
http://travaux.ovh.net/?do=details&id=28247


donc c'était pas un démantèlement pour 2017, mais en 2017 ils ont annoncés que ca serait démantelés, sans donner de date précise.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 13:57:01
Le message en question : SBG3 n'était pas encore en service, c'est pour cela qu'il n'est pas impacté (il était vide).
Saluons le message d'Octave, qui donne une partie des piéces du puzzle pour comprendre comment l'impossible est arrivé.

Je le reprend ici pour mémoire :

Bonjour,
Ce matin à 7h23, nous avons eu une panne majeure sur notre site de Strasbourg (SBG) : une coupure électrique qui a mis dans le noir nos 3 datacentres SBG1, SBG2 et SBG4 durant 3h30. Le pire scénario qui puisse nous arriver.

Le site de SBG est alimenté par une ligne électrique de 20KVA composée de 2 câbles qui délivrent chacun 10MVA. Les 2 câbles fonctionnent ensemble, et sont connectés à la même source et sur le même disjoncteur chez ELD (Strasbourg Électricité Réseaux). Ce matin, l’un des 2 câbles a été endommagé et le disjoncteur a coupé l’alimentation des datacentres.

Le site SBG est prévu pour fonctionner, sans limite de temps, sur les groupes électrogènes. Pour SBG1 et SBG4, nous avons mis en place, un premier système de 2 groupes électrogènes de 2MVA chacun, configurés en N+1 et en 20KV. Pour SBG2, nous avons mis en place 3 groupes en N+1 de 1.4MVA chacun. En cas de coupure de la source externe, les cellules haute tension sont reconfigurées automatiquement par un système de bascule motorisé. En moins de 30 secondes, les datacentres SBG1, SBG2 et SBG4 sont ré-alimentés en 20KV. Pour permettre toutes ces bascules sans couper l’alimentation électrique des serveurs, nous disposons d’onduleurs (UPS) sachant fonctionner sans aucune alimentation durant 8 minutes.

Ce matin, le système de basculement motorisé n’a pas fonctionné. L’ordre de démarrage des groupes n’a pas été donné par l’automate. Il s’agit d’un automate NSM (Normal Secours Motorisé), fournit par l’équipementier des cellules haute-tension 20KV. Nous sommes en contact avec lui, afin de comprendre l’origine de ce dysfonctionnement. C’est toutefois un défaut qui aurait dû être détecté lors des tests périodiques de simulation de défaut sur la source externe. Le dernier test de reprise de SBG sur les groupes date de la fin du mois mai 2017. Durant ce dernier test, nous avons alimenté SBG uniquement à partir des groupes électrogènes durant 8H sans aucun souci et chaque mois nous testons les groupes à vide. Et malgré tout, l’ensemble de ce dispositif n’a pas suffi aujourd’hui pour éviter cette panne.

Vers 10h, nous avons réussi à basculer les cellules manuellement et nous avons recommencé à alimenter le datacentre à partir des groupes électrogènes. Nous avons demandé à ELD de bien vouloir déconnecter le câble défectueux des cellules haute tension et remettre le disjoncteur en marche avec 1 seul des 2 câbles, et donc limité à 10MVA. La manipulation a été effectuée par ELD et le site a été ré-alimenté vers 10h30. Les routeurs de SBG ont été joignables à partir de 10h58.

Depuis, nous travaillons, sur la remise en route des services. Alimenter le site en énergie permet de faire redémarrer les serveurs, mais il reste à remettre en marche les services qui tournent sur les serveurs. C’est pourquoi chaque service revient progressivement depuis 10h58. Notre système de monitoring nous permet de connaitre la liste de serveurs qui ont démarré avec succès et ceux qui ont encore un problème. Nous intervenons sur chacun de ces serveurs pour identifier et résoudre le problème qui l’empêche de redémarrer.

A 7h50, nous avons mis en place une cellule de crise à RBX, où nous avons centralisé les informations et les actions de l’ensemble des équipes. Un camion en partance de RBX a été chargé de pièces de rechange pour SBG. Il est arrivé à destination vers 17h30. Nos équipes locales ont été renforcées par des équipes du datacentre de LIM en Allemagne et de RBX, ils sont tous mobilisés sur place depuis 16H00. Actuellement, plus de 50 techniciens travaillent à SBG pour remettre tous les services en route. Nous préparons les travaux de cette nuit et, si cela était nécessaire, de demain matin.

Prenons du recul. Pour éviter un scénario catastrophe de ce type, durant ces 18 dernières années, OVH a développé des architectures électriques capables de résister à toutes sortes d’incidents électriques. Chaque test, chaque petit défaut, chaque nouvelle idée a enrichi notre expérience, ce qui nous permet de bâtir aujourd’hui des datacentres fiables.

Alors pourquoi cette panne ? Pourquoi SBG n’a pas résisté à une simple coupure électrique d’ELD ? Pourquoi toute l’intelligence que nous avons développée chez OVH, n’a pas permis d’éviter cette panne ?

La réponse rapide : le réseau électrique de SBG a hérité des imperfections de design liées à la faible ambition initialement prévue pour le site.

La réponse longue :
En 2011, nous avons planifié le déploiement de nouveaux datacentres en Europe. Pour tester l’appétence de chaque marché, avec de nouvelles villes et de nouveaux pays, nous avons imaginé une nouvelle technologie de déploiement de datacentres, basée sur les containers maritimes. Grâce à cette technologie, développée en interne, nous avons voulu avoir la souplesse de déployer un datacentre sans les contraintes de temps liées aux permis de construire. A l’origine, nous voulions avoir la possibilité de valider nos hypothèses avant d’investir durablement dans un site.

C’est comme ça que début 2012, nous avons lancé SBG avec un datacentre en containers maritimes : SBG1. Nous avons déployé 8 containers maritimes et SBG1 a été opérationnel en seulement 2 mois. Grâce à ce déploiement ultra rapide, en moins de 6 mois nous avons pu valider que SBG est effectivement un site stratégique pour OVH. Fin 2012, nous avons décidé de construire SBG2 et en 2016, nous avons lancé la construction de SBG3. Ces 2 constructions n’ont pas été faites en containers, mais ont été basées sur notre technologie de « Tour » : la construction de SBG2 a pris 9 mois et SBG3 sera mis en production dans 1 mois. Pour pallier aux problèmes de place début 2013, nous avons construit très rapidement SBG4, l’extension basée encore sur les fameux containers maritimes.

Le problème est qu’en déployant SBG1 avec la technologie basée sur les containers maritimes, nous n’avons pas préparé le site au large scale. Nous avons fait 2 erreurs :
1) nous n’avons pas remis le site SBG aux normes internes qui prévoient 2 arrivées électriques indépendantes de 20KV, comme tous nos sites de DCs qui possèdent plusieurs doubles arrivées électriques. Il s’agit d’un investissement important d’environ 2 à 3 millions d’euros par arrivée électrique, mais nous estimons que cela fait partie de notre norme interne.
2) nous avons construit le réseau électrique de SBG2 en le posant sur le réseau électrique de SBG1, au lieu de les rendre indépendant l’un de l’autre, comme dans tous nos datacentres. Chez OVH, chaque numéro de datacentre veut dire que le réseau électrique est indépendant d’un autre datacentre. Partout sauf sur le site de SBG.

La technologie basée sur les containers maritimes n’a été utilisée que pour construire SBG1 et SBG4. En effet, nous avons réalisé que le datacentre en containers n’est pas adapté aux exigences de notre métier. Avec la vitesse de croissance de SBG, la taille minimale d’un site est forcèment de plusieurs datacentres, et donc d’une capacité totale de 200.000 serveurs. C’est pourquoi, aujourd’hui, pour déployer un nouveau datacenter, nous n’utilisons plus que 2 types de conceptions largement éprouvées et prévues pour le large scale avec de la fiabilité :
1) la construction de tours de 5 à 6 étages (RBX4, SBG2-3, BHS1-2), pour 40.000 serveurs.
2) l’achat des bâtiments (RBX1-3,5-7, P19, GRA1-2, LIM1, ERI1, WAW1, BHS3-7, VIH1, HIL1) pour 40.000 ou 80.000 serveurs.

Même si l’incident de ce matin a été causé par un automate tiers, nous ne pouvons nous dédouaner de la responsabilité de la panne. A cause du déploiement initial basé sur les containers maritimes, nous avons un historique à rattraper sur SBG pour atteindre le même niveau de normes que sur les autres sites d’OVH.

Cet après-midi, nous avons décidé du plan d’actions suivant :
1) la mise en place de la 2ème arrivée électrique, totalement séparée, de 20MVA ;
2) la séparation du réseau électrique de SBG2 vis-à-vis de SBG1/SBG4, ainsi que la séparation du futur SBG3 vis-à-vis de SBG2 et SBG1/SBG4;
3) la migration des clients de SBG1/SBG4 vers SBG3 ;
4) la fermeture de SBG1/SBG4 et la désinstallation des containers maritimes.


Il s’agit d’un plan d’investissement de 4-5 millions d’euros, que nous mettons en route dès demain, et qui, nous l’espérons, nous permettra de restaurer la confiance de nos clients envers SBG et plus largement OVH.

Les équipes sont toujours en train de travailler sur la remise en route des derniers clients impactés. Une fois l’incident clos, nous appliquerons les SLA prévus dans nos contrats.

Nous sommes profondèment désolés pour la panne générée et nous vous remercions des encouragements que vous nous témoignez durant cet incident.

Amicalement
Octave

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: fmermoz le 22 mars 2021 à 16:06:39
Avec la coupure éclectique brutale, la chaleur, la fumé et peut être un peu d'eau, je peux comprendre que le redémarrage soit laborieux et prenne du temps.

Je vois du monde sur les réseaux qui se félicitent de voir leur site revenir. Si j'avais un serveur sur SBG3 qui redevient accessible (et pas backup...), je commencerais mes sauvegardes sans délai et préparerais un serveur sur un autre datacenter. Je pense qu'Il y a également un risque que le taux de pannes s'envole dans les jours / semaines avenir.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 22 mars 2021 à 18:47:13
La 3e vidéo d’Octave est là : https://twitter.com/olesovhcom/status/1374038409707188231

https://lafibre.info/videos/datacenter/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg_3.mp4
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 19:33:44
Point journalier.

A noter que peu de photos ont été diffusée dans la 3ème vidéo, c'est une déception de même que les causes possible de l'origine de l'incendie de SBG2 (selon la 2ème vidéo, cela pourrait venir de l'onduleur ou des batteries)

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)

Les bulletins précédents :
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: underground78 le 22 mars 2021 à 19:38:19
A noter que peu de photos ont été diffusée dans la 3ème vidéo, c'est une déception de même que les causes possible de l'origine de l'incendie de SBG2 (selon la 2ème vidéo, cela pourrait venir de l'onduleur ou des batteries)
Il faut dire qu'Octave s'était un peu emballé en voulant parler des causes avant la fin de l'enquête officielle. J'imagine qu'il a été rappelé à l'ordre par son service juridique ou une des parties prenantes.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 22 mars 2021 à 19:40:16
Extrait du journal d’événement d'un serveur Windows à SBG3:
(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_log_windows.png)

D'après la timeline d'OVH, ce serveur est resté allumé 9H après le début de l'incendie ...
Je ne comprends pas, tu pourrais expliquer ?
Le feu c'est déclaré à 00h47 le 10 Mars et l'électricité aurait été coupé sur le site entre 2h30 et 3h00 (estimation au pif disant que les pompiers ont du attendre 1h15 ou 30 de mémoire + le temps qu'ils arrivent).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 19:53:34
Il ne faut pas oublier que les onduleurs n'ont pas été coupés.

Si SBG2 et la moité de SBG1 ont brûlés, certaines salles ont continuées de fonctionner sur onduleurs, les batteries étant à plat et OVH ayant loué un groupe spécifiquement pour charger les batteries des onduleurs.

Par contre le réseau à du tomber avant la fin des batteries.

Il serait intéressant de savoir où était ce serveur et si l'augmentation de température ne serait pas lié à une fuite d'eau dans le watercooling :
(https://lafibre.info/images/ovh/202103_incendie_ovh_strasbourg_temperature.png)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 22 mars 2021 à 20:24:18
Moi je trouve que ça manque de photos de l'intérieurs de SBG3 et SBG4, s'il voulait être complètement transparent il montrerai l'état des baies, des serveurs et du travail à accomplir.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 20:33:29
Moi, c'est surtout des photos de SBG1 que je voudrais.

La communication OVH :
(https://lafibre.info/images/ovh/202103_ovh_srasbourg_monitoring_sbg4_2.png)

La communication des pompiers :
"Nouvel incendie chez OVH de gros moyens sont envoyés sur places avec la présence de deux blessés légers à cause des fumées."

Suite à la propagation de la version des pompiers, OVH enfin parlé d'un dégagement de fumée sans gravité, mais c'était absent dans les premiers tweets...

Qu'en est-il réellement ?
Des photos seraient intéressantes, car l'abandon de SG1 suite à de la fumée dans un local inutilisé de SBG1 est quand même un peu compliqué à comprendre, surtout que cela entraîne 5 jours de coupure totale pour SBG4, qui n'a plus d'énergie alors que tout était reparti.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 22 mars 2021 à 20:36:35
Je suis parfaitement de ton avis.

Mais Octave est un excellent communiquant depuis toujours, il faut lui reconnaitre cette qualité.

Il est excellent pour détourner l'attention , faire genre "je communique je suis honnête" et dans la réalité des choses c'est l'inverse.. :-X ... Un jour il pourra faire de la politique !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: underground78 le 22 mars 2021 à 20:41:39
A mon avis ça a été le problème de trop. Le départ de feu après avoir perdu plusieurs salles sur un DC qu'ils avaient annoncé vouloir arrêter il y a presque 4 ans, ils ont dû se dire que ce n'était pas rentable de remettre en route et qu'il fallait mieux déménager ce qui était encore fonctionnel.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 20:49:19
Ok, mais ils pouvaient couper le baies de SBG1 et alimenter SBG4, non ?

Il s'est passé autre chose ou il y avait autre choses que des batteries dans le local.

Je ne sais pas si un jour on aura la vérité.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 22 mars 2021 à 20:49:39
Il ne faut pas oublier que les onduleurs n'ont pas été coupés.

Si SBG2 et la moité de SBG1 ont brûlés, certaines salles ont continuées de fonctionner sur onduleurs, les batteries étant à plat et OVH ayant loué un groupe spécifiquement pour charger les batteries des onduleurs.

Par contre le réseau à du tomber avant la fin des batteries.

Je tente une explication en mode fiction. l'avenir nous le dira.

on sait maintenant que les 2 salles réseaux de SBG étaient dans SBG1 et SBG2 (detruit).
On devine que l'ensemble des fibres alimentant SBG3 depuis les salles réseaux dont celle de SBG1 passaient par SBG2 et donc fondu/detruite

A partir de 2H/2H30 SBG3 se retrouve totalement isolé au niveau réseau IP car toutes les fibres sont mortes.
Au niveau énergie lors de la coupure du site par Electricité de Strasbourg (je suppose) vers 2h30, SBG3 a basculé sur Diesel pendant plusieurs heures.
- hypothèse1: Voyant l’étendue des dégâts sur le site de SBG en général, OVH (ou les pompiers?) décide de couper les Diesels et donc de couper SBG3.
- hypothèse2: les diesels sont venu à cours de fioul au bout de 7h et ravitailler un diesel juste après un incendie c'était pas possible.

OVH sachant aussi pertinemment qu'il ne lui sera pas possible de redémarrer SBG3 avant plusieurs jours du fait de l'absence de réseau/fibre depuis SBG3 vers le reste du monde
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 22 mars 2021 à 20:54:41
Je ne sais pas ce qu'on fait les deux salariés d'OVH présent sur site cette nuit, à partir de 1h du matin, mais je pense que couper intégralement l'électricité, les onduleurs et les groupes de DC1 et DC3 aurait été une bonne idée pour limiter l'ingestion de fumée.

Maintenant peut-être que à ce moment ils pensait que cela serait rapidement éteint.

DC4, je comprends qu'il n'ai pas été éteint, il est plus éloigné.

(https://lafibre.info/images/ovh/202103_ovh_strasbourg_plan.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 22 mars 2021 à 21:18:10
Des photos seraient intéressantes, car l'abandon de SG1 suite à de la fumée dans un local inutilisé de SBG1 est quand même un peu compliqué à comprendre, surtout que cela entraîne 5 jours de coupure totale pour SBG4, qui n'a plus d'énergie alors que tout était reparti.

Mais si facile à comprendre, il y'avait un SPOF pour l’alimentation de SBG4 parce que les câbles venait de SBG1 (ils ne font peut être que traverser les containers), du coup ils déplacent le SPOF sur SBG3.
D’ailleurs il me semble que la communication, c’est des batteries qui ne sont pas connecté et pas utilisé qui ont pris feu mais pas le containers dans lequel elles étaient.
Après c’est qui est surprenant c’est l’emplacement des groupes et le branchement électrique… pourquoi quand tu as des groupes à côté de SBG4 tu vas chercher sur les groupes qui sont à l’opposé ?… Et dans ce cas c’est pas plus simple de déplacer les groupes que de refaire une tranché pour alimenter via SBG3 ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: thenico le 22 mars 2021 à 21:19:14
Sur mon dédié à SGB3, la perte du réseau date du 10/03/2021 01:47:57.
Le dernier log que j'ai pu trouver du 10/03/2021 02:27:48.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 22 mars 2021 à 21:24:04
Je ne sais pas ce qu'on fait les deux salariés d'OVH présent sur site cette nuit, à partir de 1h du matin, mais je pense que couper intégralement l'électricité, les onduleurs et les groupes de DC1 et DC3 aurait été une bonne idée pour limiter l'ingestion de fumée.
Je pense que quand tu es devant un bâtiment complètement en feu tu n’as pas vraiment les idées très claire. Surtout que la nuit c’est probablement des tech moins qualifié qui ont pour mission de surtout surveiller les nagios, graphana et consort, en cas de pépin t’appelle l’astreinte ;)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 22 mars 2021 à 21:33:06
Je ne sais pas ce qu'on fait les deux salariés d'OVH présent sur site cette nuit, à partir de 1h du matin, mais je pense que couper intégralement l'électricité, les onduleurs et les groupes de DC1 et DC3 aurait été une bonne idée pour limiter l'ingestion de fumée.

Maintenant peut-être que à ce moment ils pensait que cela serait rapidement éteint.

Avec le recul c'est facile à dire......
Sur le moment, tu te vois prendre la responsabilité couper le jus (et le pouvait t-il?) à 30 000 ou 40 000 serveurs ???

si au final l'incident était maitrisé 10minutes ou 15minutes plus tard avec juste 2 onduleurs et qq batteries HS ??

et puis je suppose que quand la situation est devenue hors de contrôle c''était trop tard.

J'aimerai quand même mieux  comprendre ce qu'il se passe entre 0h47. Les camera thermique des pompiers ?  L'embrassement complet ? et la coupure globale du secteur d'ES vers 2h30
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 22 mars 2021 à 22:17:52
Les pompiers n'ont rien arrosés avant qu'ES ne coupe le courant sur la zone. Donc pendant ce temps... ça a cramé.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: cali le 23 mars 2021 à 00:44:41
Des photos seraient intéressantes, car l'abandon de SG1 suite à de la fumée dans un local inutilisé de SBG1 est quand même un peu compliqué à comprendre, surtout que cela entraîne 5 jours de coupure totale pour SBG4, qui n'a plus d'énergie alors que tout était reparti.

Ouais, c'est bizarre de remplir un conteneur de batteries inutilisées à l'intérieur du DC...

Dans sa vidéo il parle d'un « petit incident », je crois qu'il ne prend pas en compte la répercussion...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 23 mars 2021 à 03:03:30
Si j'ai bien compris, ce sont des batteries usagées de SBG2, qui étaient en attente pour partir au recyclage.

OVH a pas mal de container sur ses différents sites.

Octave Klaba a même mis un container dans son jardin pour faire de la musique :

Si à 46 ans, tu n’as pas un conteneur dans ton jardin (pour faire un PoC), tu as raté ta vie.

Mon père:
- tu veux quoi pour ton anniv ?
Moi:
- un conteneur. j’ai eu une idée d’un projet et j’ai besoin ..

Nom de code : di2amp

(https://lafibre.info/images/ovh/202101_conainter_octave.jpg)

Source : Twitter Octave Klaba (https://twitter.com/olesovhcom/status/1355121758765002753), le 29 janvier 2021.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 23 mars 2021 à 06:53:09
La 3e vidéo d’Octave est là : https://twitter.com/olesovhcom/status/1374038409707188231
Par rapport aux vidéos d'Octave Klaba, je suis toujours aussi étonné que le discours ne soit pas préparé/filtré/corrigé par le service de communication.
Je sais que c'est la marque de fabrique d'OVH, ce genre de com sans filtre, mais quand même...

Et clairement, il s'exprime mal.
Ici, il dit qu'OVH va faire évoluer les standards du marché. Il le répète 5 fois, donc ça n'est pas une erreur ponctuelle.
Ce qu'il veut dire, j'espère en tout cas, c'est qu'OVH va faire évoluer les standards d'OVH, pas les standards du marché... Les standards du marché ne sont pas en cause à priori, vu qu'OVH ne les a jamais appliqués.
Je suis désolé, mais ce discours me choque.

Il semble dire que le "freecooling, c'est mal, c'est du passé". Et là non plus, je ne suis pas d'accord.
Le freecooling à la OVH, avec des salles largement ouvertes aux 4 vents, pas étanches, avec de l'air quasiment pas filtré, et des serveurs à seulement 1-2m de l'entrée d'air extérieure, oui, ça pose beaucoup de question, et depuis le tout début.
Les Freecooling à la Facebook et Scaleway, c'est forcément très très différent.

J'espère que les conclusions parleront également des procédures d'arrêt et de consignation électrique du site en cas d'incident grave : coupure totale (HT et BT), et coupure des onduleurs. Si ça a retardé de plus de 30 min l'intervention réelle des pompiers, comme on peut le lire ici, ça peut avoir du sens. Je ne dis pas qu'il y a eu un problème, c'est juste une hypothèse.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 23 mars 2021 à 08:23:13
Ouais, c'est bizarre de remplir un conteneur de batteries inutilisées à l'intérieur du DC...

Dans sa vidéo il parle d'un « petit incident », je crois qu'il ne prend pas en compte la répercussion...

Surtout que vu le poids et la manutention batterie par batterie tu ne t'amuses pas à les déplacer 36 fois avant de les mettre chez le ferrailleur...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 23 mars 2021 à 08:34:52
Je pense que la communication d'Octave est au contraire bien filtré et à été relus par de nombreux juristes.

Quand il dit qu'il "va faire évoluer les standards du marché", cela n'apporte pas de risque juridique à OVH.

On note par contre le peu de photos.

Les photos de la secondes vidéos étaient déjà minutieusement choisies, mais visiblement certains détails ont été oubliés.

Et certains sont forts pour exploiter les détails des photos :
Était-ce un onduleur VERTIV impliqué dans l'incendie ? Le technicien est bien identifiable avec une casquette du constructeur sur la tête. (Video d'Octave)

(https://lafibre.info/images/logo/logo_vertiv.webp)

(https://lafibre.info/images/ovh/202103_ovhcloud_octave_klaba_situation_suite_incendie_strasbourg_2.webp)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 23 mars 2021 à 08:50:39
Je pense que la communication d'Octave est au contraire bien filtré et à été relus par de nombreux juristes.

Quand il dit qu'il "va faire évoluer les standards du marché", cela n'apporte pas de risque juridique à OVH.

Totalement et il sait également qu'aucun acteur du marché du datacenter n'ira ouvertement et directement clamer que ce type d"accident industriel n'est pas possible chez eux.
L'objectif de la com de crise est de rassurer, de garder la main et de détourner l'attention sur des détails inutiles.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 23 mars 2021 à 08:54:22

J'espère que les conclusions parleront également des procédures d'arrêt et de consignation électrique du site en cas d'incident grave : coupure totale (HT et BT), et coupure des onduleurs. Si ça a retardé de plus de 30 min l'intervention réelle des pompiers, comme on peut le lire ici, ça peut avoir du sens. Je ne dis pas qu'il y a eu un problème, c'est juste une hypothèse.

Leon.

Selon connaissance chez OVH ça a retardé d'1H30 l'intervention des pompiers le temps que le distributeur local coupe les arrivées HTA.

Concernant un arrêt d'urgence électrique qui coupe la sortie des onduleurs il est obligatoire à l'extérieur de chaque salle.
Apres au vu des constructions j'ai un gros doute qu'un bureau de contrôle assiste OVH pour rendre conforme les installations à la législation (bon en même temps je connais bon nombre de BC pas trop compétent qui ont trop de dossiers la factures est là tu payes et c'est bon...)

On notes dans une vidéo une image de synthèse montrant l'effet cheminée du DC. Pourquoi ne fait-il pas la même chose avec le synoptique de l'installation électrique ? :)



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 23 mars 2021 à 09:07:12
Je pense que la communication d'Octave est au contraire bien filtré et à été relus par de nombreux juristes.

Quand il dit qu'il "va faire évoluer les standards du marché", cela n'apporte pas de risque juridique à OVH.

On note par contre le peu de photos.

Les photos de la secondes vidéos étaient déjà minutieusement choisies, mais visiblement certains détails ont été oubliés.

Et certains sont forts pour exploiter les détails des photos :

Je suis d'accord avec toi, surtout sur la dernière vidéo.

le "Nous allons faire évoluer les standards du marché" C'est une stratégie pour faire croire que l'ensemble du secteur est au même niveau, et que ce n'était pas plus safe chez les autres. (Contenir la fuite des clients)

idem pour " nous partagerons les résultats de nos études pour que l'incident ne se reproduise pas chez nous ainsi que dans les autres data center"
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Ienien77 le 23 mars 2021 à 09:34:25
Je suis d'accord avec toi, surtout sur la dernière vidéo.

le "Nous allons faire évoluer les standards du marché" C'est une stratégie pour faire croire que l'ensemble du secteur est au même niveau, et que ce n'était pas plus safe chez les autres. (Contenir la fuite des clients)

idem pour " nous partagerons les résultats de nos études pour que l'incident ne se reproduise pas chez nous ainsi que dans les autres data center"

Quand on compare la description faite de leurs installations par rapport à d'autres on se demande quand même d’où ils les sorte leurs "standards du marché".
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 23 mars 2021 à 09:43:04
Quand on compare la description faite de leurs installations par rapport à d'autres on se demande quand même d’où ils les sorte leurs "standards du marché".

L'important dans la communication de crise n'est pas ce que tu crois (comme expert technique du domaine datacenter) mais ce que le public général/RSSI/décideurs comprend et croit :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 23 mars 2021 à 09:49:10
Enfin là clairement ça va faire réfléchir des décideurs en entendant le mot OVH..  :-X


Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: michelgre le 23 mars 2021 à 09:49:25
Je suis d'accord avec toi, surtout sur la dernière vidéo.

le "Nous allons faire évoluer les standards du marché" C'est une stratégie pour faire croire que l'ensemble du secteur est au même niveau, et que ce n'était pas plus safe chez les autres. (Contenir la fuite des clients)

idem pour " nous partagerons les résultats de nos études pour que l'incident ne se reproduise pas chez nous ainsi que dans les autres data center"
L'important dans la communication de crise n'est pas ce que tu crois (comme expert technique du domaine datacenter) mais ce que le public général/RSSI/décideurs comprend et croit :)
Manque de bol pour lui ce type d'incident est déjà arrivé ailleurs (gros incendie chez les voisins de DC5 Scaleway) et ça n'a pas brûlé. Parce qu'il y avait un mur anti-feu. Et un accès prévu pour les pompiers. Et des bornes d'incendie. Et un plan anti-incendie mis en œuvre immédiatement (arrêt de certaines ventilations, mise en sécurité des groupes et des citernes, etc.). Et tout ça entre autres parce qu'ils avaient un REX suite à un problème à DC2. Les "autres" data center sérieux n'ont probablement pas attendu les études d'Octave pour prendre des mesures. Mais lui, il n'avait pas lu le blog de Scaleway ? Et puis, à part lister tout ce qu'il a fait à Strasbourg comme exemple évident de ce qu'il ne faut pas faire (au hasard selon ce qu'on lit ici: mettre 1h30 à couper la ligne HT, faire des planchers en bois, ...), je me demande à quoi son étude va servir.

Moi je suis juste un tout petit client pro (pas d'OVH) mais sa com ne marche pas pour moi... Est-ce que ça va marcher avec les DSI de ses gros clients ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: patrick_01 le 23 mars 2021 à 11:16:57
La contrainte principale de toute communication de crise est d'éviter que quelque chose puisse être "retenu contre vous", c'est à dire qu'un détail (technique, organisationnel, ...) puisse être utilisé dans une action en justice.

Ici, on est sur un forum de techs, d'ingés réseau, ou tout au moins de geeks qui s'intéressent aux détails. Ne vous attendez pas à en recevoir beaucoup dans la communication d'OVH, comme écrit plus haut tout ce qui sort est lu et relu par un service juridique. Le style "information non censurée" des posts twitter ou des vidéos n'est qu'une mise en forme.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: butler_fr le 23 mars 2021 à 11:41:11
Manque de bol pour lui ce type d'incident est déjà arrivé ailleurs (gros incendie chez les voisins de DC5 Scaleway) et ça n'a pas brûlé. Parce qu'il y avait un mur anti-feu. Et un accès prévu pour les pompiers. Et des bornes d'incendie.

le rapprochement me semble vraiment hasardeux.
entre un incendie dans un bâtiment a proximité et un incendie dans ton bâtiment ce n'est franchement pas la même chose.

-borne à incendie : je ne sais pas si il y en a chez ovh mais il y a le rhin directement.
-accès pompier : a priori pas de soucis de ce coté à strasbourg

je rappel qu'à l'époque DC5 n'était pas non plus équipé d'un système anti incendie (en cours d'installation)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 23 mars 2021 à 12:13:50
+1 avec Butler
Manque de bol pour lui ce type d'incident est déjà arrivé ailleurs (gros incendie chez les voisins de DC5 Scaleway) et ça n'a pas brûlé. Parce qu'il y avait un mur anti-feu. Et un accès prévu pour les pompiers.
Et j'ajouterai même que Scaleway a sans doute eu beaucoup de chances pour l'incendie au voisinage de DC5 : le vent était favorable et éloignait les fumées/suies loin du datacenter. Si le vent avait été contraire, le déroulement des événements aurait pu être très différent. Surtout avec le système de freecooling à DC5 qui est sans doute assez sensible à ce genre de fumée grasse.

Je pense que la communication d'Octave est au contraire bien filtré et à été relus par de nombreux juristes.

Quand il dit qu'il "va faire évoluer les standards du marché", cela n'apporte pas de risque juridique à OVH.
Oui, d'un point de vue juridique, c'est sur que le discours passe.
Mais "on va faire évoluer les standards du marché", du point de vue des clients qui connaissent un peu OVH, d'un point de vue marketing, ça ne peut pas passer, c'est trop gros. Beaucoup de clients savent qu'OVH n'est pas du genre à respecter "les standards du marché".

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mmickael le 23 mars 2021 à 12:58:37
+1 avec ButlerEt j'ajouterai même que Scaleway a sans doute eu beaucoup de chances pour l'incendie au voisinage de DC5 : le vent était favorable et éloignait les fumées/suies loin du datacenter. Si le vent avait été contraire, le déroulement des événements aurait pu être très différent. Surtout avec le système de freecooling à DC5 qui est sans doute assez sensible à ce genre de fumée grasse.
Oui, d'un point de vue juridique, c'est sur que le discours passe.
Mais "on va faire évoluer les standards du marché", du point de vue des clients qui connaissent un peu OVH, d'un point de vue marketing, ça ne peut pas passer, c'est trop gros. Beaucoup de clients savent qu'OVH n'est pas du genre à respecter "les standards du marché".

Leon.

Je suis rassuré de t'entendre dire ça Léon.
J'ai également visionné la vidéo d'Octave hier soir, j'ai été scandalisé par le passage "on va faire évoluer les standards du marché". Comment il ose !  >:(

Si il respectait déjà les standards existants, ça se saurait....

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 23 mars 2021 à 13:27:18
+1 avec ButlerEt j'ajouterai même que Scaleway a sans doute eu beaucoup de chances pour l'incendie au voisinage de DC5 : le vent était favorable et éloignait les fumées/suies loin du datacenter. Si le vent avait été contraire, le déroulement des événements aurait pu être très différent. Surtout avec le système de freecooling à DC5 qui est sans doute assez sensible à ce genre de fumée grasse.
Leon.
sur dc5 ils avaient fermé une partie de la ventilation pour éviter d'ingérer trop de fumée il me semble? et pour le reste, a condition que les fumées aient le temps de refroidir, pas trop de risque pour les serveurs vu que c'est les filtres qui auraient fait tampon? donc un changement de tous les filtres et c'est repartie?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Gilum le 23 mars 2021 à 14:11:55
Je suis rassuré de t'entendre dire ça Léon.
J'ai également visionné la vidéo d'Octave hier soir, j'ai été scandalisé par le passage "on va faire évoluer les standards du marché". Comment il ose !  >:(

Si il respectait déjà les standards existants, ça se saurait....

C’était peut-être être en réponse à cette article : https://blog.scaleway.com/fr/comment-protegeons-nous-vos-donnees/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 23 mars 2021 à 14:28:46
Dans sa vidéo d'hier soir, vers la 5eme minute, il dit que depuis 2016 il a watercoolé ses salles (il a réinventé la clim ??) et qu'elles sont étanches à l'air.
SBG3 a été construit en 2017 et pourtant manifestent le 4eme et le 5eme étage ont reçu des fumées ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: renaud07 le 23 mars 2021 à 16:04:37
Dans sa vidéo d'hier soir, vers la 5eme minute, il dit que depuis 2016 il a watercoolé ses salles (il a réinventé la clim ??) et qu'elles sont étanches à l'air.
SBG3 a été construit en 2017 et pourtant manifestent le 4eme et le 5eme étage ont reçu des fumées ...

Idem j'ai pas tout compris...  ???
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 23 mars 2021 à 17:20:47
Idem j'ai pas tout compris...  ???

"All easy racks are UP. The remains racks are in the process to be cleaned up. 80 people work just on clean up !!"

et quand tu fais le compte des baies, il en est à peine à 50% de rack allumé sur SBG3 à ce jour.

5ème 100% OFF
4ème et 3ème  50%OFF
et un peu de 2ème et 1er....

tout le reste nécessite donc un nettoyage important à cause des fumées ? ou autre chose qui bloque ?

ca n'a pas l'air aussi rose que prévu sur SBG3
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 23 mars 2021 à 17:39:48
Point journalier.

La communication fait l'impasse que le 5ème étage de SBG3 : Tous les serveurs sont down à cet étage qui a été plus que les autres impactés par l'incendie de SBG2.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)

Les bulletins précédents :
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: corpo le 23 mars 2021 à 18:11:26
J'en peux plus de ce mauvais anglais dans les tweets d'oles ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 23 mars 2021 à 18:23:23
C’était peut-être être en réponse à cette article : https://blog.scaleway.com/fr/comment-protegeons-nous-vos-donnees/
En tout cas, même si c'est un peu provoc de la part de Scaleway comme article, je le trouve bien fait.
C'est une incitation pour OVH et les concurrents à dévoiler quel niveau de sécurité incendie ils ont vraiment.
Mais je suis quasi certain que OVH ne les suivra pas.

Dans sa vidéo d'hier soir, vers la 5eme minute, il dit que depuis 2016 il a watercoolé ses salles (il a réinventé la clim ??) et qu'elles sont étanches à l'air.
SBG3 a été construit en 2017 et pourtant manifestent le 4eme et le 5eme étage ont reçu des fumées ...
+1, il faudra qu'OVH explique à quoi correspond ces "salles watercoolées". Si c'est des clim individuelles directement dans les baies, alors c'est totalement idiot d'appeler ça des "salles watercoolées".

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: willemijns le 23 mars 2021 à 18:37:38
Notons que SBG2 est "novlangueusement" arreté et mis en sécurité...

Comme c'est mimi....

Certain(e)s ont dû plus que fumer que SBG2 pour nous pondre ces phrases....
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 23 mars 2021 à 19:19:40
En tout cas, même si c'est un peu provoc de la part de Scaleway comme article, je le trouve bien fait.
Non, ce n'est pas une provocation, c'est une réponse aux inquiétudes des clients.

Je prépare les contributions de plusieurs datacenters dans le rapport sur l'état de l'internet 2021 et les acteurs, même un qui est certifié Tier4 par l'Uptime Institute m'a expliqué avoir un nombre important de client qui demande plus d'informations pour les protections contre l'incendie.

Il y a de nombreuses sociétés qui ne font pas (ou peu) de sauvegarde et qui se mettent à avoir peur.

Il y a une vrai prise de conscience. Les explications d'OVH martelant vouloir faire évoluer les standards du marché, sous entendent que le standard du marché c'est SBG2 entretiennent le doute.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Invarion le 23 mars 2021 à 19:29:18
même un qui est certifié Tier4 par l'Uptime Institute m'a expliqué avoir un nombre important de client qui demande plus d'informations pour les protections contre l'incendie.
ça commence par Aqua et ça finit par Ray ?  :P
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xillibit le 23 mars 2021 à 19:38:41
Non, ce n'est pas une provocation, c'est une réponse aux inquiétudes des clients.

Je prépare les contributions de plusieurs datacenters dans le rapport sur l'état de l'internet 2021 et les acteurs, même un qui est certifié Tier4 par l'Uptime Institute m'a expliqué avoir un nombre important de client qui demande plus d'informations pour les protections contre l'incendie.

Il y a de nombreuses sociétés qui ne font pas (ou peu) de sauvegarde et qui se mettent à avoir peur.

Il y a une vrai prise de conscience. Les explications d'OVH martelant vouloir faire évoluer les standards du marché, sous entendent que le standard du marché c'est SBG2 entretiennent le doute.
Il faut peut-être rappeler ce que c'est que Tiers III ou Tiers IV, pour SBG2 on est dans le tiers-monde
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: willemijns le 23 mars 2021 à 20:48:16
En tout cas, même si c'est un peu provoc de la part de Scaleway comme article, je le trouve bien fait.

Infomaniak a fait pareil de mémoire. c'est de bonne guerre.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 23 mars 2021 à 22:21:50
Avez-vous des retours client qui souhaitent partir chez un autre hébergeur ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: cali le 23 mars 2021 à 23:26:00
Mais "on va faire évoluer les standards du marché", du point de vue des clients qui connaissent un peu OVH, d'un point de vue marketing, ça ne peut pas passer, c'est trop gros. Beaucoup de clients savent qu'OVH n'est pas du genre à respecter "les standards du marché".

D'une certaine façon il va faire évoluer les standards du marché puisque ceux qui pouvaient avoir l'idée de faire comme lui vont peut-être y réfléchir à deux fois. :-)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Elssar le 24 mars 2021 à 00:23:38
En tout cas, même si c'est un peu provoc de la part de Scaleway comme article, je le trouve bien fait.
C'est une incitation pour OVH et les concurrents à dévoiler quel niveau de sécurité incendie ils ont vraiment.
Mais je suis quasi certain que OVH ne les suivra pas.
+1, il faudra qu'OVH explique à quoi correspond ces "salles watercoolées". Si c'est des clim individuelles directement dans les baies, alors c'est totalement idiot d'appeler ça des "salles watercoolées".

Leon.

C'est simple, ça veut dire exactement ce que ça veut dire.. Il n'y a pas de clim dans leurs salles. Chaque serveur est sous watercooling(refroidissement à l'eau en circuit fermé), c'est ce qui le refroidis. Donc pas de clim au sens soufflerie.

Pour ce qui est des protections incendie. Ici ça n'aurait rien changé, il s'agit d'un feu de type métallique(classe d) qui génère de l'hydrogène. C'est très difficile à atteindre, et du fm200 n'aurait pas changé grand chose. Donc scaleway, ovh, orange, aws qu'importe le dc ça aurait été très compliqué à atteindre même avec des systèmes très performants. D'ailleurs c'est pour ça que les consignes en interne chez plusieurs autres hébergeurs c'est "taisez vous, ça pourrait nous arriver". (confirmer par plusieurs connaissances)
ça n'excuse pas le fait que tout autre type de feu aurait probablement causé les mêmes dommages. Et ça c'est bien sûr pas normal.

Pour ce qui est du reste les backup sur le même dc etc, pour info, quand vous faites des backup s3, par défaut c'est dans la même AZ que le serveur source.
C'est quoi une AZ chez aws ? Un groupement de DC dans une même zone géographique. Je connais pas trop comment c'est géré de leur côté, mais je mettrais pas ma main à couper que ça soit différent chez eux. Probable que ça soit des backups éclatés un peu partout et qui peuvent se retrouver sur le même dc que le serveur. Et je vois très mal aws faire des backup croisés de s3 entre des AZ sous le manteau pour être sur de rien perdre.

C'est tout le côté problématique de ces hébergeurs. Faut lire les petites lignes pour comprendre de quoi on parle, et c'est souvent flou. On promet le mot magique du "backup" mais bon en creusant on se rend compte que c'est pas si magique.

D'ailleurs pour rappel ces hébergeurs n'ont pas de clauses sur la perte de données, uniquement sur l'accessibilité des données. Et ça c'est une subtilité qui veut tout dire juridiquement parlant :))
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: chtitux le 24 mars 2021 à 04:39:54
Pour ce qui est du reste les backup sur le même dc etc, pour info, quand vous faites des backup s3, par défaut c'est dans la même AZ que le serveur source.

https://aws.amazon.com/s3/storage-classes/

AWS indique que sur du S3 standard, c'est répliqué sur au moins 3 AZ:
Citer
S3 Standard: Resilient against events that impact an entire Availability Zone. […]  Unlike other S3 Storage Classes which store data in a minimum of three Availability Zones (AZs), S3 One Zone-IA stores data in a single AZ and costs 20% less than S3 Standard-IA.

Et la distance entre plusieurs AZ chez AWS, c'est « plusieurs kilomètres » : https://wikileaks.org/amazon-atlas/map/

OVH a pêché par orgueil : quand on a plusieurs bâtiments accolés, le « standard du marché », c'est de parler de un datacentre et de plusieurs salles.

J'espère qu'ils feront évoluer leur vocabulaire, parce que sur leur carte, il y a encore Gravelines, Beauharnois et Roubaix qui sont considérés comme « plusieurs datacentres », alors qu'en pratique, ce sont parfois des bâtiments avec des murs communs.



Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 24 mars 2021 à 07:39:54
C'est simple, ça veut dire exactement ce que ça veut dire.. Il n'y a pas de clim dans leurs salles. Chaque serveur est sous watercooling(refroidissement à l'eau en circuit fermé), c'est ce qui le refroidis. Donc pas de clim au sens soufflerie.
OK, OVH refroidit CPU et GPU sous Watercooling. Depuis très longtemps.
Mais ça ne refroidira jamais 100% de la dissipation thermique d'un serveurs. D'autres éléments chauffent : alimentation, RAM, disque dur, etc... Tout ça n'est pas refroidi par WaterCooling. Et quand tu parles de plusieurs dizaines de serveurs par baie, cette puissance résiduelle devient importante. Toutes ces calories, il faut les évacuer aussi. Avec une salle 100% étanche à l'air, sans circulation d'air, ni autre dispositif de refroidissement, ça ne peut pas fonctionner, c'est évident.

De plus, ces dernières années, on a vu apparaitre chez OVH des sorte de radiateur ou évaporateurs à l'arrière des serveurs. Ca ressemble beaucoup à des clim intégrées aux baies.

Donc le "watercooling de salles", dont parle Octave Klaba dans sa dernière vidéo, et qui serait applique depuis 2016, on ne sait toujours pas exactement ce que c'est.
https://twitter.com/olesovhcom/status/1374038409707188231

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 24 mars 2021 à 07:58:03
C'est simple, ça veut dire exactement ce que ça veut dire.. Il n'y a pas de clim dans leurs salles. Chaque serveur est sous watercooling(refroidissement à l'eau en circuit fermé), c'est ce qui le refroidis. Donc pas de clim au sens soufflerie.

SBG2 : CPU en watercooling, les autres composant d'un serveur sont refroidit en freecooling direct. Si il fait froid dehors le serveur sera au frais, si il fait chaud, il aura très chaud.
Je pense que c'est pas limité à Gravelines, car j'ai un serveur à Roubaix où la température monte bien aussi.
Graphique de la sonde du disque dur également, entre le 26 juin et aujourd'hui.

(https://lafibre.info/images/ovh/201607_temperature_dd_ovh_3.png)
La problématique, c'est qu'en cas de canicule, de nombreux serveurs tombent en panne.

SBG3 : CPU en watercooling, les autres composant je n'ai pas compris ce que c'est que des "salles watercoolées".

Je pense que le but est d'éviter les problèmes en cas de fortes pluies quand il fait chaud ou la canicule...
(https://lafibre.info/images/ovh/201706_ovh_p19_monitoring.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 24 mars 2021 à 12:26:48
Pour ce qui est des protections incendie. Ici ça n'aurait rien changé, il s'agit d'un feu de type métallique(classe d) qui génère de l'hydrogène. C'est très difficile à atteindre, et du fm200 n'aurait pas changé grand chose.
Qu'est-ce qui te fait dire que c'est un feu métallique de classe D?

Des batteries au plomb peuvent générer des feu de classe D?
Je sais que c'est le cas pour les batterie Li-Ion. Mais pour les batteries au plomb, je ne sais pas.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 24 mars 2021 à 16:24:58
Modération : J'ai déplacé le hors sujet (intéressant) sur le housing OVH : https://lafibre.info/ovh-datacenter/incendie-ovh-a-strasbourg-sbg2-completement-detruit-sbg1-detruit-a-50/

Sur ce fil de discussion (déjà très long), on essaye de se concentrer sur le sujet de l'incendie OVH, svp.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 24 mars 2021 à 21:03:42
Point journalier.

SBG4 est relancé une seconde fois. Toutes les baies ne sont pas allumées, mais cela sera fait demain.

La communication fait l'impasse que le 5ème étage de SBG3 : Tous les serveurs sont down à cet étage qui a été plus que les autres impactés par l'incendie de SBG2.

Depuis plusieurs jours, le "Public Cloud Instance" est redémarré (86% aujourd'hui) mais est-il utilisable sans le "Public Cloud Storage" qui lui ne redémarre que samedi ?

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)

Les bulletins précédents :
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 24 mars 2021 à 21:31:44
La remise en route (d'après le suivi VMS d'OVH) est tout de même très très poussif sur SBG3 et bcp plus long qu'anticipé par OVH....
Sans parler du 5ème étage il reste une quantité phénoménale de baie pas encore up.

Ils doivent avoir de sacrés mauvaises surprises sur l'état des baies.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 24 mars 2021 à 21:45:24
Octave répond à ta question :

Le nettoyage prend du temps. Nous avons 80 personnes (SBG3) + 20 personnes (Croix).

Ci-dessous une carte mère avec la pollution par la fumée sur le socket du CPU.
C'est très corrosif! Si on se met sous tension, c'est mort.
Identique au disque.

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_avant.jpg)

Ci-dessous, le même appareil 24h après le nettoyage
(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_apres.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 24 mars 2021 à 21:50:31
A ceux qui disent que cela ne va pas assez vite, Octave répond :

Il n’y a pas moyen de mettre + de gens par étage, sans parler de risque de COVID. On est en vitesse maximale.

Personne n'ose soulever le 5ème étage de SBG3.

J'ai l'impression qu'il n'y a personne pour nettoyer les serveurs au 5ème étage ou alors il ne peuvent pas les remettre sous tension...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 24 mars 2021 à 21:55:20
Je ne pensais pas que la fumée attaquait autant..
Par contre, comment çà se fait qu'elle ait réussi à s'infiltrer entre le waterblock et le CPU dans une salle qu'Octave a décrit comme "watercoolé" et donc "étanche".
Je veux bien qu'elle ne soit pas 100 % étanche, mais de là à passer entre le CPU et le waterblock alors que ce n'est pas ventillé ... ça me parait fort.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 24 mars 2021 à 22:05:33
Ce qui me perturbe le plus dans les photos d’Octave c’est qu’il n’y a que le socket cpu qui est « sale », le reste de la cm à l’air propre….
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: artiflo le 24 mars 2021 à 22:06:32
Je ne pensais pas que la fumée attaquait autant..
Par contre, comment çà se fait qu'elle ait réussi à s'infiltrer entre le waterblock et le CPU dans une salle qu'Octave a décrit comme "watercoolé" et donc "étanche".
Je veux bien qu'elle ne soit pas 100 % étanche, mais de là à passer entre le CPU et le waterblock alors que ce n'est pas ventillé ... ça me parait fort.

Un waterblock est fait pour être en contact avec le CPU et surtout pas le socket donc au contraire c'est normal.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: artiflo le 24 mars 2021 à 22:10:04
Ce qui me perturbe le plus dans les photos d’Octave c’est qu’il n’y a que le socket cpu qui est « sale », le reste de la cm à l’air propre….

Une CM est enduite d'une couche de résine/vernis donc ce n'est pas completement étonnant.

Pour ce qui est des composants qui sont sur la carte tout dépend de la compostions chimique de chaque composant.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 24 mars 2021 à 22:11:32
ce que je voulais dire c'est que comme il n'y a pas de ventilateur mais simplement un waterblock, j'ai du mal à comprendre comment la fumée a pu entrer à cet endroit là.

ou alors la salle n'était pas du tout étanche contrairement à ce qu'a dit Octave et il y avait tellement de fumée que l'on ne voyait pas à 5 cm ..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 24 mars 2021 à 22:17:33
une question en de plus pour le REX à documenter par Octave.

L'état du socket me parait quand même très sale vs les condensateurs.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 24 mars 2021 à 22:29:04
une question en de plus pour le REX à documenter par Octave.

L'état du socket me parait quand même très sale vs les condensateurs.
il y a surement eu un premier nettoyage "global" puis un 2eme nettoyage pour récupérer le socket.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aurel32 le 24 mars 2021 à 22:30:01
Ce qui me perturbe le plus dans les photos d’Octave c’est qu’il n’y a que le socket cpu qui est « sale », le reste de la cm à l’air propre….

Tout a fait d'accord, les condensateurs électrolytiques notamment me paraissent bien propres. Et en plus, même si c'est joli sur les photos, je doute que le nettoyage de cette partie du socket apporte quelque chose, elle n'a qu'une fonction mécanique qui est de maintenir le CPU.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 24 mars 2021 à 22:39:32
il y a surement eu un premier nettoyage "global" puis un 2eme nettoyage pour récupérer le socket.

peut-être ... mais récupérer ce bout de métal n'a que peux d’intérêt c'est juste une pièce mécanique pour bloquer le CPU ... même si il est crado, il n'y a aucun risque de cour-circuit.

J'aurai bien voulu voir la CM "avant tout nettoyage" dans ce cas :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: web7 le 24 mars 2021 à 23:00:24
Il ne faut pas oublier que le serveur passe sa vie "dehors"... elle bouffe l'humidité extérieure, le brouillard, la poussière, les particules, peut être même parfois de la neige qui se fait aspirer dans le bâtiment.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: netswitch le 24 mars 2021 à 23:13:22
Citer
Ci-dessous une carte mère avec la pollution par la fumée sur le socket du CPU.
C'est très corrosif! Si on se met sous tension, c'est mort.

ça c'est clairement du bullshit ou alors une mauvaise explication avec l'image en exemple.
C'est le socket CPU1, donc il y a normalement un CPU dans le socket (si c'était le socket CPU2 on pourrait admettre qu'il ait été vide et exposé.)
Je vois mal la fumée venir se mettre entre le cpu et les pins du socket.

Si c'est corrosif = ça ronge quelque chose, le nettoyage ne peut pas réparer ce qui a été corrodé.

Une photo de carte mère non nettoyée serait en effet plus parlante.

Après vu le stress et la fatigue, je comprends qu'il ne soit pas 100% au détail près tonton Octave.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: hwti le 24 mars 2021 à 23:59:37
C'est vrai que sur cette photo seule la partie mécanique du socket est sale, et je ne vois pas quel problème ça pourrait causer immédiatement comme il le suggère (si effectivement c'est corrosif, alors ça peut produire des oxydes qui pourraient se détacher et aller à des endroits gênants, mais pas dès l'allumage).

En revanche, soit il y a des reflets bizarres, soit certaines broches sont légèrement tordues.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 25 mars 2021 à 00:15:44
Quelle fumée ?  ::)

Encore quelques photos inédites des serveurs d'OVH, avec du watercooling, par zdnet.co.uk (lien HS)

(https://lafibre.info/images/ovh/201203_ovh_watercooling_6.jpg)

(https://lafibre.info/images/ovh/201203_ovh_watercooling_7.jpg)

Leon.

C'est juste une vieille fuite qui a laissé des résidus de fluide ouais  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aplufr le 25 mars 2021 à 10:45:39
Octave a posté d'autre photos là : https://twitter.com/olesovhcom/status/1375010953927012356
La première photo est un peu flou, mais ça ressemble plus à de la suie que les photos de la carte mère avec juste le socket de sale.

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_ssd_avant.jpg)

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_ssd_apres.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: ezivoco_163 le 25 mars 2021 à 10:58:50
pourquoi ils ne mettent pas tout à la déchèterie et mettent du neuf à la place ?

il n'y a pas de gros risques de pannes dans les semaines / mois à venir à utiliser du matériel qui a potentiellement souffert ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: artiflo le 25 mars 2021 à 11:13:19
Je pense que c'est afin de permette aux clients d'accéder de nouveaux à leurs données le plus rapidement possible afin qu'il les récupères pour ceux qui n'ont pas de backup/PRA.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Douks le 25 mars 2021 à 11:16:08
Quelle fumée ?  ::)

C'est juste une vieille fuite qui a laissé des résidus de fluide ouais  ;D
De mémoire, ces photos montrent juste des tests qu'ils ont fait, le bloc définitif est différent. Ils en avaient également montré dans le premier (et dernier) magazine papier qu'ils avaient fait.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 25 mars 2021 à 11:37:47
si le status du VMS est conforme à la réalité terrain(http://status.ovh.com/vms/index_sbg3.html) il lui reste plus de 200 racks à allumer sur SBG3 ce jour.
200 racks à nettoyer fortement d'après les tweets ...

Octave a indiqué que pour nettoyer les 50 rack (61E et 62E de SBG1) il lui faut 10 jours avec 20 personnes dessus.
Il indique aussi que sur SBG3 il y a 80 personnes pour le nettoyage, ce qui signifie si l'on applique la même formule qu'il lui faudra encore 10 jours avant d'allumer tous les racks de SBG3.......


bon courage aux clients encore impacté sur SBG3, encore un peu de patience.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: ezivoco_163 le 25 mars 2021 à 11:41:59
Je pense que c'est afin de permette aux clients d'accéder de nouveaux à leurs données le plus rapidement possible afin qu'il les récupères pour ceux qui n'ont pas de backup/PRA.

oui mais les données sont sur les DD non ?

Autant garder les DD je comprends, autant le reste cartes mères, processeurs, ram, alim etc, il faut tout jeter et fiabiliser avec du neuf.

Une fois les données relancées, ils pourront changer les dd par des neufs et ainsi repartir avec un truc pérenne qui ne risque pas de planter tous les 4 matins...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: e-TE le 25 mars 2021 à 11:54:56
oui mais les données sont sur les DD non ?

Autant garder les DD je comprends, autant le reste cartes mères, processeurs, ram, alim etc, il faut tout jeter et fiabiliser avec du neuf.

Une fois les données relancées, ils pourront changer les dd par des neufs et ainsi repartir avec un truc pérenne qui ne risque pas de planter tous les 4 matins...
il faut déjà produire les machines pour remplacer ce qui est partie en fumée, pour compenser l'afflux de ceux repartir sur d'autres datacenters ovh et qui veulent remonter les backups, et on est dans une situation ou l'approvisionnement est un peu tendu... et une main d'oeuvre ovh qui doit déjà tourner à fond...

donc nettoyer pour faire repartir au plus vite ce qui peut repartir, ca reste une solution viable, même si ca devient de la machine jetable dans 2-3mois, ca permet d'étaler les redémarrages, backup, bascule sur des nouveaux serveurs quand ils seront dispo ;)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: ezivoco_163 le 25 mars 2021 à 12:04:38
ah ok, je ne pensais pas que c'était si long pour une si grosse boite d'avoir de nouveaux serveurs, pour repartir "à neuf".
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: artiflo le 25 mars 2021 à 12:10:06
On parle de milliers de serveurs là ça se trouve pas comme ça sous le sabot d'un cheval surtout avec les pénuries actuel de composant électronique.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: ezivoco_163 le 25 mars 2021 à 12:12:43
Cdiscount ne livre pas ?  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 25 mars 2021 à 12:13:39
ah ok, je ne pensais pas que c'était si long pour une si grosse boite d'avoir de nouveaux serveurs, pour repartir "à neuf".
C'est juste le volume qui est ingérable. On parle ici certainement de plus de 10 000 serveurs à réparer/nettoyer. C'est gigantesque!
Si ça avait été seulement quelques centaines de serveurs, OVH les aurait remplacés rapidement, je pense.

Je rappelle aussi qu'on est dans une crise mondiale d'approvisionnement de composants pour PC et serveurs... Il y a des ruptures de stock partout.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Benoit31 le 25 mars 2021 à 12:43:29
Juste se donner un ordre de grandeur, le nombre de baies indisponibles n'a pas bougé à SBG-3 selon la page de Visual Monitoring System depuis hier 14h55 (313 baies marquées comme complètement indisponibles). Ce chiffre n'a pas du tout bougé sur la période, mais par contre le nombre de baies totalement up est passé de 286 à 295.

Peut-être que la page ne traduit pas se qui passe en réalité et l'outil n'est pas synchronisé en temps-réel, mais à ce rythme là il y en a au moins pour de bons mois si ce n'est des années !
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: q05 le 25 mars 2021 à 12:50:58
Si la cm a morflé je ne vois pas comment par quel miracle le dd aurait été lui épargné.
Une idée: mettre à disposition des clients les images de leur dd.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: kazyor le 25 mars 2021 à 14:37:01
En tout cas, depuis 24h, j'ai reçu qqs mails dans mes différentes BAL "poubelles" de commerçants indiquant que leurs sites étaient à nouveaux UP.
Ça sent le SBG3. On va voir si ils organisent des maintenances pour les backups maintenant :)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Phach le 25 mars 2021 à 15:57:36
Salut,
je me permets de copier/coller un bout de FAQ car la communication à ce sujet n'est pas très clair et j'ai mis un moment avant de trouver l'info (ou avant qu'elle soit publiée peut être), mais concernant l'object storage, ils rallument à partir d'aujourd'hui en lecture seule et le service sera rétabli en écriture à partir du 5 avril.


Citer
Les services Object Storage localisés à Strasbourg seront progressivement disponibles à partir du jeudi 25 mars en lecture seule.
Vous pourrez ainsi accéder à vos Instance Snapshot, Volume Backup, ou Automated Backup réalisés avant l’évènement survenu à Strasbourg à partir de cette date.

.....

Nous prévoyons que les services Object Storage localisés à Strasbourg seront disponibles en écriture à partir du lundi 5 avril 2021.

Enfin, Le service Cloud Archive PCA ne sera pas fonctionnel sur la localisation du datacentre de Strasbourg. Nous vous recommandons d’utiliser le service Public Cloud Archive d’un de nos autres datacentres.
source : https://help.ovhcloud.com/fr/faq/strasbourg-incident/how-will-restart-public-cloud/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mirtouf le 25 mars 2021 à 22:18:35
A priori c'est plutôt le 27 mars:
https://twitter.com/OVHcloud_FR/status/1375136973594181634
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 25 mars 2021 à 22:23:34
Point journalier.

La remisse en route des serveurs de SBG1 glisse du 24 mars au 29 mars (+5 jours par rapport à la prévision donnée il y a 3 jours)
- Communication du 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png) : ETA 24 mars
- Communication du 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png) et 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png): ETA à partir du 24 mars
- Communication du 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png) : ETA 29 mars

Je rappelle que les serveurs de SBG1 étaient up le 19 mars (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png) avant un arrêt par précaution à cause de la fumée dans un local inutilisé. Précaution qui entraîne un arrêt de 10 jours supplémentaire des serveurs.

Sinon 95% des serveurs de SBG4 sont enfin accessibles.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)

Les bulletins précédents :
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 26 mars 2021 à 09:45:47
Octave a publié le nettoyage des serveurs de SBG1.

Les serveurs SBG1 61E / 62E sont en cours de nettoyage. La vitesse est de 3 racks par jour. Nous avons 32 racks. Nous cherchons comment l'accélérer. Certains racks ont déjà été renvoyés à DC.

La dernière étape du processus est la détection des restes de «chlorure».


(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_sbg1_1.jpg)

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_sbg1_2.jpg)

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_sbg1_3.jpg)

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_sbg1_4.jpg)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: chtitux le 26 mars 2021 à 10:03:54
Je suis curieux de connaître la fiabilité des serveurs après un tel nettoyage. Que ce soit pour les composants actifs ou passifs.

Les serveurs vont redémarrer, mais doit-on s'attendre à une avalanche de pannes dans 1 semaine, 1 mois, 1 an ? Je pense que si j'avais un serveur dans ce cas, je me dépêcherai de migrer toutes les données vers un "neuf".

Ça me fait penser à Scaleway qui avait testé grandeur nature le brouillard d'eau. Aucun serveur n'est tombé en panne pendant le test, mais est-ce que leur durée de vie a été réduite ? Et est-ce que ça n'est pas cette peur qui fait que Scaleway n'a jamais réussi à convaincre ses clients de l'utiliser ? En ayant en tête que des gouttelettes d'eau, ça reste très différent de la suie et d'un nettoyage au pinceau.

Question bonus : comment OVH va gérer le retrofit de ces serveurs ? Est-ce qu'on doit s'attendre, si on loue un serveur chez OVH dans les prochains 6 mois, à avoir une pièce (RAM, CPU, disque, etc.) qui était présente lors de l'incendie ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: netswitch le 26 mars 2021 à 11:33:55
Je suppose que si l'assurance couvre le sinistre, ils vont tout mettre au container et que là ils se font chier à nettoyer pour pouvoir remettre en service le plus vite possible sans attendre la cie d'assurance ni être contraint par l'approvisionnement qui est difficile pour le moment.

Par contre le nettoyage est bien efficace, ça ressort nickel :D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Douks le 26 mars 2021 à 14:42:24
Je suis curieux de connaître la fiabilité des serveurs après un tel nettoyage. Que ce soit pour les composants actifs ou passifs.

Les serveurs vont redémarrer, mais doit-on s'attendre à une avalanche de pannes dans 1 semaine, 1 mois, 1 an ? Je pense que si j'avais un serveur dans ce cas, je me dépêcherai de migrer toutes les données vers un "neuf".

Ça me fait penser à Scaleway qui avait testé grandeur nature le brouillard d'eau. Aucun serveur n'est tombé en panne pendant le test, mais est-ce que leur durée de vie a été réduite ? Et est-ce que ça n'est pas cette peur qui fait que Scaleway n'a jamais réussi à convaincre ses clients de l'utiliser ? En ayant en tête que des gouttelettes d'eau, ça reste très différent de la suie et d'un nettoyage au pinceau.

Question bonus : comment OVH va gérer le retrofit de ces serveurs ? Est-ce qu'on doit s'attendre, si on loue un serveur chez OVH dans les prochains 6 mois, à avoir une pièce (RAM, CPU, disque, etc.) qui était présente lors de l'incendie ?
Pas de problèmes, ils vont mettre ces serveurs quelques jours dans un container avec du riz  ;D

C'est parfait, ça fera du stock de Kimsufi dans les semaines à venir 👍🏻👍🏻

La technique de nettoyage ne m'étonne pas, mais le fait que ça soit un séchage à la soufflette, c'est étrange ...D'autant plus si la RAM et tout le reste resté dans leur emplacement
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Leon le 26 mars 2021 à 15:15:20
Je suppose que si l'assurance couvre le sinistre, ils vont tout mettre au container et que là ils se font chier à nettoyer pour pouvoir remettre en service le plus vite possible sans attendre la cie d'assurance ni être contraint par l'approvisionnement qui est difficile pour le moment.
Ils remettent en route l'existant "le plus vite possible" surtout pour que les clients puissent accéder de nouveau à leurs données. C'est clairement la raison principale.
Même si évidemment ça évite de devoir réapprovisionner des dizaines de milliers de serveurs.
Donc ça n'est pas qu'une histoire d'assurance qui prend en charge des frais ou non.

La technique de nettoyage ne m'étonne pas, mais le fait que ça soit un séchage à la soufflette, c'est étrange ...D'autant plus si la RAM et tout le reste resté dans leur emplacement
Le séchage approximatif à la soufflette, ça ne me choque pas du tout.
Pour avoir vécu un après-incendie dans un laboratoire d'électronique, les cartes électroniques des racks étaient nettoyées, séchées rapidement à la soufflette, puis passée dans une étuve à 50 ou 60°C (je sais plus) pour séchage complet.

Par contre, ils déconnectaient évidemment tous les connecteurs. Là, comme toi, ça me surprend.

Leon.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 26 mars 2021 à 17:09:33
Attend attend, ils nettoient ça à l'eau savonneuse ?

On fait pas ça à l'alcool isopropylique normalement pour les circuits électronique ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: PeGGaaSuSS le 26 mars 2021 à 18:14:11

J'ai de gros doutes sur le fait qu'il s'agit d'eau (H2O) de type eau de distribution. Il y a quelques années, le SAV d'un fabricant de carte mère testait systématiquement et refusait le passage sous garantie s'il y avait trace d'eau. J'imagine que suivant la composition il reste toujours un risque de contact électrique avec les résidus.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Cryptage le 26 mars 2021 à 18:55:40
C'est quasi certain que ce n'est pas de l'eau savonneuse mais aucune idée de ce que c'est ?

Je partage les avis précédents... Je serai curieux de voir ce qu'il reste d'opérationnel dans quelques mois.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 26 mars 2021 à 19:16:23
Point journalier.

La remisse en route des serveurs de SBG1 décale encore...
- Communication du 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png) : ETA 24 mars
- Communication du 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png) et 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png): ETA à partir du 24 mars
- Communication du 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png) : ETA 29 mars
- Communication du 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png) : ETA début de la semaine du 29 Mars.

Sinon 100% des serveurs de SBG4 sont enfin accessibles.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)

Les bulletins précédents :
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: hwti le 26 mars 2021 à 19:39:51
Attend attend, ils nettoient ça à l'eau savonneuse ?

On fait pas ça à l'alcool isopropylique normalement pour les circuits électronique ?
Ca peut très bien être du savon, en rinçant bien (alcool isopropylique ou similaire, éventuellement eau distillée).
L'essentiel est de très bien sécher ensuite (avec les produit volatils c'est plus simple, mais pour l'eau certaines personnes conseillent de laisser au four à 70-80°).

Mais c'est étrange de le faire avec tout qui est encore monté.
Et je vois la pile CMOS sur la dernière photo, elle semble être là aussi sur celle avec la soufflette.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: hwti le 26 mars 2021 à 19:44:38
La remisse en route des serveurs de SBG1 décale encore...
La communication dit au contraire que la cadence de nettoyage s'améliore.
Peut-être qu'ils ont sous-estimé le nombre de serveurs à nettoyer, et qu'ils en découvrent au fur et à mesure des tentatives de rallumage.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 26 mars 2021 à 20:03:21
Sur SBG1, on classe les serveurs dans 4 catégories :

Je met à jour ma répartition. Sur SBG1 on a donc :

- 27% - 60 baies (3 containers de 20 baies - 61A, 61D et 62A) où il était nécessaire de nettoyer les serveurs. La restauration des données a le statut "Recoverable".

- 22% - 50 baies (2 containers de 25 baies - 61E et 62E) où il était nécessaire de changer les cartes mères de tous les serveurs. La restauration des données est "Under investigation".

- 9% - 21 baies (1 container de 21 baies - 62D). ESXi avec le disque système mais toutes les VM sont sur le datastore (NAS) dans une baie en 62C qui elle est brûlée. Statut "Non-recoverable".

- 42% - 93 baies (4 containers de 20 baies et 1 container de 13 baies - 60C, 61B, 61C, 62B et 62C) détruites entièrement par l'incendie. Statut "Non-recoverable".


Ceux qui sont peu endommagés, ce sont les salles 61A, 61D et 62A. Ces serveurs étaient remis en service avant que survienne le second incendie. Ils sont de nouevau up ? Je n'ai pas l'impression d'avoir lu qu'ils sont up sur SBG4 (leur destination après l'abandon de SBG1).

Je pense que le nettoyage minutieux pris en photo concerne les serveurs où il avait été dit qu'il fallait changer la carte mère, soit les salles 61E et 62E. Visiblement ils ont décidés de tenter de sauver les cartes mères.
(https://lafibre.info/images/ovh/202103_ovh_strabourg_changement_carte_mere.png)

(https://lafibre.info/images/ovh/202103_ovh_incendie_strasbourg_nettoyage_ssd_avant.jpg)

Pour la salle 62D, pas d'urgence, il n'y a pas de données et pour 60C, 61B, 61C, 62B et 62C les serveurs ont compétemment brûlés, rien n'est récupérable.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 27 mars 2021 à 08:10:24
Ca peut très bien être du savon, en rinçant bien (alcool isopropylique ou similaire, éventuellement eau distillée).
L'essentiel est de très bien sécher ensuite (avec les produit volatils c'est plus simple, mais pour l'eau certaines personnes conseillent de laisser au four à 70-80°)

Mais c'est étrange de le faire avec tout qui est encore monté.
En passant dans une étuve qui mets en dépression on peut sécher très vite même quand il y a de l'eau et à 40/50 °C.
Après ça n'enlève pas les minéraux de l'eau.. Donc je doute que ce soit réellement à l'eau.

Ça reste effectivement étrange de tout faire avec les composants.. Mais en faisant le quasi vide ça sèche quand même..
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Phach le 27 mars 2021 à 10:14:07
J'avoue que je comprend pas pourquoi ils relancent pas plus rapidement et en priorité le public cloud storage.
Ils disent eux même que ca permettra d'accéder à plein de backup. Ca aurait du être le truc à remettre en service en priorité.
Bizarre.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 27 mars 2021 à 13:48:24
J'avoue que je comprend pas pourquoi ils relancent pas plus rapidement et en priorité le public cloud storage.
Ils disent eux même que ca permettra d'accéder à plein de backup. Ca aurait du être le truc à remettre en service en priorité.
Bizarre.

a mon avis, ils ont tellement de choses prioritaire à faire que prioriser entre des choses déjà très prioritaire c'est compliqué et  ils doivent avoir des mauvaises surprises aussi donc le planning glisse.

Leur priorité est aussi de pas perdre de données sur le PCS donc d'être prudent, c'est leur seul espoir de pouvoir récupérer 25% des VPS de SBG2
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: netswitch le 27 mars 2021 à 15:56:13
En tous cas le département marketing a bien priorisé les publi-reportages :D
https://www.clubic.com/ovh/avis-351922-ovh.html

Et alors je ne sais pas comment mais ils ont réussi à faire suspendre les avis trustpilot pendant les 15 jours suivants le sinistre, on peut seulement en remettre depuis quelques jours :
https://fr-be.trustpilot.com/review/www.ovh.com

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: buddy le 27 mars 2021 à 16:10:00
Il y a des avis du 16 et 19 mars...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: xp25 le 27 mars 2021 à 17:01:38
Et qu'est ce qu'on lit tout en bas des avis dans
"A propos" :

Citer
Catégorie
OVHcloud se classe n° 25 sur 25 dans la catégorie Service d'hébergement de sites web sur Trustpilot

C'est magnifique  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Steph le 27 mars 2021 à 17:29:44
Je ne suis pas sur que TP soit un bon baromètre :
https://www.stephanealligne.com/2018/12/fake-reviews-trustpilot-la-plateforme-de-collecte-d-avis-clients-bientot-dans-le-collimateur-de-la-justice.html

Mise à jour le 29 Janvier 2021 à 18h33

La société TRUSTPILOT vient d’être condamnée à retirer IMMÉDIATEMENT et SOUS ASTREINTE de 500€ par jour, la page d’avis clients jugée illégale par le Tribunal de Commerce de Paris.

En sus, Trustpilot vient d’être condamnée à verser 5000€ de dommages à la société DOTNET.

Extrait de l’ordonnance de référé prononcée le 29 Janvier 2021 par le Tribunal de Commerce de Paris.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 27 mars 2021 à 19:51:41
Point journalier.

La remisse en route des serveurs de SBG1 décale encore...
- Communication du 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png) : ETA 24 mars
- Communication du 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png) et 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png): ETA à partir du 24 mars
- Communication du 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png) : ETA 29 mars
- Communication du 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png) : ETA début de la semaine du 29 Mars.
- Communication du 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png) : "SBG1 : salles A à D : Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03." Problématique: le mercredi 30/03 n'existe pas. C'est soit mardi 30/03, soit mercredi 31/03 !

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)

Les bulletins précédents :
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: renaud07 le 28 mars 2021 à 01:49:03
En passant dans une étuve qui mets en dépression on peut sécher très vite même quand il y a de l'eau et à 40/50 °C.
Après ça n'enlève pas les minéraux de l'eau.. Donc je doute que ce soit réellement à l'eau.

Ça reste effectivement étrange de tout faire avec les composants.. Mais en faisant le quasi vide ça sèche quand même..

Nettoyer des CM à l'eau/savon c'est hyper courant. Je l'ai déjà fait plusieurs fois sans le moindre soucis.

Que les composants restent dessus par contre ça me parait bizarre aussi, ne serait-ce que pour tout bien nettoyer. De même pour la pile c'est bon pour faire un court-jus et griller un truc pour de bon...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: thenico le 28 mars 2021 à 04:45:40
Une trouvaille concernant le VMS d'OVH: il existe encore une page pour P19 (http://travaux.ovh.net/vms/index_p19.html)
Il manque le nom du DC, la date de dernière actualisation et SBG3.
Au bout d'un moment, cette page redirige vers http://travaux.ovh.net/vms/index.cgi?datacenter=p19, un CGI qui n'existe plus depuis longtemps (c'etait une redirection en 2009 (https://web.archive.org/web/20090923232316/http://travaux.ovh.net:80/vms/index.cgi) et un 403 en 2005 (https://web.archive.org/web/20051130035732/http://travaux.ovh.net:80/vms/index.cgi)).

Mais si on regarde cette même page en 2017 (https://web.archive.org/web/20170607193711/http://travaux.ovh.net/vms/index_p19.html), le refresh est correct, le nom du DC et la date du dernier refresh est present.

En explorant archive.org, on voit qu'elle disparait fin 2017 (https://web.archive.org/web/20170920100054/http://travaux.ovh.net/vms/index_p19.html).

Donc d'où sort cette page ?

Une hypothèse: ils ont bidouillé le VMS après l'incident SBG2 pour passer SBG*  de 100% UP à 100% down.
Par accident, ils ont réimporté un (très) vieux template pour P19 et leur script d'update nous offre cette page mystérieuse.

EDIT:
Last-Modified: Sun, 12 May 2019 17:32:22 GMT
Encore plus étrange ...
Mais cela exclue la génération de la page d'un vieux template (à moins que le script change le mtime?)

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 28 mars 2021 à 08:50:26
P19 est fermé ?

Il était encore up en 2019 il me semble.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: thenico le 28 mars 2021 à 10:10:06
Il y a encore des taches travaux de maintenance d'UPS (http://travaux.ovh.net/?do=details&id=49118&) dessus donc il est encore en service.
Mais le mutualisé a été migré sur Gravelines (https://www.ovh.com/fr/webhosting-migration/) et le weathermap est bien vide (http://weathermap.ovh.net/#p19_core) (les flux semblent venir de DC1).

Je ne sais pas ce qui reste sur ce DC.
EDIT: Il y aurait du PCC ?!? (http://travaux.ovh.net/?do=details&id=48671&)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 29 mars 2021 à 05:19:08
Point journalier.

La remisse en route des serveurs de SBG1 décale encore...
- Communication du 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png) : ETA 24 mars
- Communication du 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png) et 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png): ETA à partir du 24 mars
- Communication du 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png) : ETA 29 mars
- Communication du 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png) : ETA début de la semaine du 29 Mars.
- Communication du 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png) et 28 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png) : "SBG1 : salles A à D : Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03." Problématique: le mercredi 30/03 n'existe pas. C'est soit mardi 30/03, soit mercredi 31/03 !

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png)

Les bulletins précédents :
- 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 29 mars 2021 à 12:01:04
la remise en route de l'ensemble des serveurs non encore en route que ce soit SBG3 et SBG1 décale et n'avance que très doucement.

toute ces opérations de derackage, nettoyage, rerackage sont complexe à gerer ...... le REX sera intéressant aussi :)


Je comprends entre les lignes des tweet d'Octave que pour les serveurs de SBG1 61A et D, il ne rajoute pas de racks sur SBG4 mais il insèrerai les serveurs dans des racks de SBG4 avec de la place.
au début je pensais qu'il voulait "simplement" déplacer les 4 containers de SBG1 au niveau de SBG4 ... mais ce n'est pas l'option choisi.

C'est intéressant cela tend à indiquer que sur les 4 containers de 20 baies de SBG4, il y a bcp de place pour y mettre les serveurs de SBG1 provenant aussi de 4x20 baies.... il n'avait que des baie à moitié rempli sur SBG1 et SBG4 pour faire ce swap ?

ou alors, il retire tous les serveurs en "stand-by/non loué" et y laisse uniquement les serveurs actuellement sous contrat de location ?  dans l'optique de phase-out réellement SBG4 dans qq mois/trimestres au four est à mesure que les clients libèrent des serveurs.

Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 29 mars 2021 à 21:20:06
Point journalier.

SBG3 on a des nouvelles du 5ème étage, l'étage le plus affecté de SBG3 par l'incendie :  Ce sont de nouveaux serveurs pour un lancement de nouveau produit qu'OVH avait prévu dans .. 10 jours. Il n'y a donc aucun client sur ces serveurs. OVH dit travailler sur ce nouveau produit "depuis 18 mois et maintenant tout doit être nettoyé".

Pour la remise en services des baies de SBG1 arrêtées après le second incendie, on ne sais toujours pas si c'est planifié mardi ou mercredi.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_29mars2021.png)

Les bulletins précédents :
- 28 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png)
- 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 29 mars 2021 à 22:11:21
Point journalier.

SBG3 on a des nouvelles du 3ème étage, l'étage le plus affecté de SBG3 par l'incendie :  Ce sont de nouveaux serveurs pour un lancement de nouveau produit qu'OVH avait pévu dans .. 10 jours. Il n'y a donc aucun client sur ces serveurs. OVH dit travailler sur ce nouveau produit "depuis 18 mois et maintenant tout doit être nettoyé".

L'étage 5  pas le 3.

On notera aussi ce soir que le VMS (http://status.ovh.com/vms/index_sbg3.html) a fait disparaitre bcp de baie au 5ème mais aussi au 3ème étage.
plus conforme avec la réalité ? ou pour afficher uniquement les baies clients "prod" ???

on notera une petite évolution de la stratégie pour les serveurs de SBG1 ne vont plus à SBG4 + GRA+ RBX  mais à SBG3 et SBG4

et enfin que les 90% de VPS et 85% de BM était annoncé Samedi pour Dimanche soir selon Octave hors c'est le chiffre atteint uniquement le Lundi soir.
La fin du nettoyage annoncé Mardi sera probablement repoussée encore ....

c'est dur dur dur de nettoyer/remettre en service un DC pourtant épargné par le feu mais finalement quand même bien bien impacté par les fumées/particules ......
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 29 mars 2021 à 22:32:44
et un complément

Informations complémentaires sur le déroulement des opérations (1) et (2) :

• SBG1 : salles A à D :
o Transfert des serveurs dans des baies à SBG4 et remise en service planifiée partir de mercredi 30/03.

• SBG1 : salle 61E et 62E :
o Le nettoyage de tous les serveurs localisés dans ces salles continue en 2x8 avec des équipes en rotation et sera terminé pour le mardi 30/03 sur notre site de production à Croix.
o 1212 serveurs ont été réceptionnés au total à Croix :
 805 ont été nettoyés lundi 29/03 à 15H.
 216 ont été retouchés (changement d’alimentation et de boîtier) : 87 sont testés et opérationnels, 107 sont en cours de test (le reste est hors d'usage ou à réparer).
 Les serveurs nettoyés et testés seront ensuite progressivement renvoyés déjà remis en baie.
 Transfert des serveurs sur notre site de Strasbourg (SBG3) : 48h entre le transfert et redémarrage sur site.
Le redémarrage progressif des services est planifié entre le jeudi 01/04 et les derniers serveurs entre le 07/04 et le 08/04.

• SBG3 :
• Le nettoyage de tous les serveurs Bare Metal sera finalisé probablement pour mercredi 31/03 au soir.
• Les serveurs nettoyés et testés sont ensuite renvoyés remis en baie et connectés.
• 347 serveurs et 59 switches de l'étage 5 de SBG3 reviennent sur notre site de Croix (CRX) mercredi afin d'être nettoyés.
• Le transfert des baies s’effectue ensuite vers notre site de Strasbourg (SBG).
• Le redémarrage progressif des services est planifié entre le jeudi 01/04 et vendredi 02/04.


et  "We are facing lot of blockers and the unpredictable issues that should have been fixed but are not yet. Exemple: the elevator in SBG3 is not fixed yet. Consequence: we have to use the stairway for all servers coming from Croix 1by1."


J'espère que personne ne va se vautrer dans l'escalier avec un serveur sous le bras .......
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: hwti le 29 mars 2021 à 22:47:47
SBG3 on a des nouvelles du 3ème étage, l'étage le plus affecté de SBG3 par l'incendie :  Ce sont de nouveaux serveurs pour un lancement de nouveau produit qu'OVH avait pévu dans .. 10 jours. Il n'y a donc aucun client sur ces serveurs. OVH dit travailler sur ce nouveau produit "depuis 18 mois et maintenant tout doit être nettoyé".
Ça confirme indirectement qu'ils veulent conserver les serveurs nettoyés en prod, et pas uniquement pour que les clients récupèrent leurs données ou un service au plus vite.
Je suppose que l'assurance préfère payer le nettoyage que le remplacement (enfin, si OVH est bien couvert), mais en cas de problème de fiabilité par la suite ce sera délicat...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: mmickael le 29 mars 2021 à 22:50:10
Problématique: le mercredi 30/03 n'existe pas. C'est soit mardi 30/03, soit mercredi 31/03 !

C'est par-ce qu'il y a un Mercredi 30/03 en 2022.  ;D
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: alf084 le 30 mars 2021 à 00:00:06
Ça pique ....

Six choses qu'OVH ne dit pas sur l'incendie de Strasbourg

https://www.journaldunet.com/web-tech/cloud/1499203-six-choses-qu-ovh-ne-dit-pas-sur-l-incendie-de-ses-datacenters-a-strasbourg/
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 30 mars 2021 à 03:31:24
L'étage 5  pas le 3.
J'ai corrigé mon message. C'est bien sur l'étage le plus haut de SBG3 qui est le plus touché par l'incendie.

Pour résumer l'article de Journal du net https://www.journaldunet.com/web-tech/cloud/1499203-six-choses-qu-ovh-ne-dit-pas-sur-l-incendie-de-ses-datacenters-a-strasbourg/, voici le "Six choses qu'OVH ne dit pas sur l'incendie de Strasbourg" avec les citations en liens avec sur ce forum, les informations ayant déjà été discutées ici :

1/ SBG1 et SBG4 devaient être fermés (annonce de novembre 2017 qui n'a pas été réalisée)

2/ SBG4 n'était pas indépendant énergétiquement (annonce en novembre 2017 du fait que cela serait corrigé, ce qui n'a pas été fait)

Saluons le message d'Octave, qui donne une partie des piéces du puzzle pour comprendre comment l'impossible est arrivé.

Je le reprend ici pour mémoire :
[...] Même si l’incident de ce matin a été causé par un automate tiers, nous ne pouvons nous dédouaner de la responsabilité de la panne. A cause du déploiement initial basé sur les containers maritimes, nous avons un historique à rattraper sur SBG pour atteindre le même niveau de normes que sur les autres sites d’OVH.

Cet après-midi, nous avons décidé du plan d’actions suivant :
1) la mise en place de la 2ème arrivée électrique, totalement séparée, de 20MVA ;
2) la séparation du réseau électrique de SBG2 vis-à-vis de SBG1/SBG4, ainsi que la séparation du futur SBG3 vis-à-vis de SBG2 et SBG1/SBG4;
3) la migration des clients de SBG1/SBG4 vers SBG3 ;
4) la fermeture de SBG1/SBG4 et la désinstallation des containers maritimes.

Il s’agit d’un plan d’investissement de 4-5 millions d’euros, que nous mettons en route dès demain, et qui, nous l’espérons, nous permettra de restaurer la confiance de nos clients envers SBG et plus largement OVH.

3/ SBG3 n'avait pas sa propre salle réseau (Je suis étonné que JDN ne parle pas de SBG4, qui n'a pas non plus de salle réseau: il y avait deux salles réseaux avant l'incendie : SBG1 et SBG2. Aujourd'hui une nouvelle salle réseau a été construite dans le futur SBG5 pour SBG3 et SBG4)

4/ Des backups étaient réalisés sur le même datacenter (Il faut partir de la base que si un hébergeur ne précise pas que c'est sur un second site, c'est que c'est sur le même site. OVH n'est pas le seul pour le coup à faire ça)

5/ Les planchers du datacenter SBG2 étaient en bois. "Les planchers (du datacenter SBG2, ndlr) sont en bois", a indiqué à l'AFP dans la nuit du sinistre Damien Harroué, commandant des opérations de secours et adjoint au chef de la sous-direction opérations-prévention au Service Départemental d'Incendie et de Secours 67.

Le sol est bien en bois :

#Ovh #SBG les échangeurs du watercooling de serveurs sont installés sur chaque étage.

(https://lafibre.info/images/ovh/201305_ovh_strasbourg_sgb2_construction.jpg)
Source : twitter OLES OVH (https://twitter.com/olesovhcom/status/335448359525552128)

6/ absence de système d'extinction automatisé sur SBG2
Voici la façon dont OVH protège les serveurs contre des incendies au Canada. C'est la première fois que l'on voit OVH parler de protection incendie, donc il est probable que les autres datacenters ne soient pas encore équipés.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 30 mars 2021 à 04:04:53
Rappelons que SBG2 est la tour jumelle de Roubaix 4 :

Annonce d'Octave sur twitter (https://twitter.com/olesovhcom/status/317311014511194112) le 28 mars 2013 :
#Ovh #SBG #SBG2 will look like #RBX4
(https://lafibre.info/images/ovh/201303_ovh_construction_strsbourg_sbg2.jpg)

Construction de Roubaix 4 :

Dans le cas de Roubaix 4, le Datacenter est fait avec beaucoup de bois :
(https://lafibre.info/images/ovh/201009_rbx4_construction_1.jpg)

Il serait intéressant de savoir les évolutions qui seront apportées à Roubaix 4 et d'autres data center OVH sur :
- La possibilité de couper le 20 000 volts sans entrer dans le bâtiment (pour rappel, c'est ce qui a fortement retardé les pompiers, car il ne peuvent éteindre un incendie avec des équipements encore alimentés en 20 000 volts)
- Un système de détection incendie précoce pour pouvoir intervenir avant que la situation soit dégradée
- Un système d’extinction automatique d'incendie, si possible qui ne détruise pas les serveurs
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 30 mars 2021 à 20:58:19
Point journalier.

Pour la remise en services des baies de SBG1 arrêtées après le second incendie, c'est finalement planifié mercredi 31.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_30mars2021.png)

Les bulletins précédents :
- 29 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_29mars2021.png)
- 28 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png)
- 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: dj54 le 30 mars 2021 à 23:01:15
Du neuf sur la gratuité de 3 ou 6mois
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: aurel32 le 30 mars 2021 à 23:52:22
Du neuf sur la gratuité de 3 ou 6mois
     

Perso j'ai même reçu l'avoir correspondant au mois de mars. En fait c'est une facture d'un montant négatif, et le mail n'est pas super clair, il présente ça comme un avoir également d'un montant négatif.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 31 mars 2021 à 20:51:05
Point journalier.

Le gros du travail a été fait. Les services restaurable qui n'ont pas été restaurées seront up dans les prochains jour. Il ne restera que quelques cas complexes.

Je parie sur une vidéo d'Octave vendredi pour expliquer les différents progrès.

(https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_31mars2021.png)

Les bulletins précédents :
- 30 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_30mars2021.png)
- 29 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_29mars2021.png)
- 28 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png)
- 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 31 mars 2021 à 21:55:12
"
pCS
0.5% of the servers were destroyed. we checked and rebuilt data, but we can’t recover all data. There is small part, we don’t have 3 copies since the 3 copies were on 0.5% servers

It means, for the paid backup, we have 18251 backups on 19486.

On 1235 backups on 19486 backups, 6%, a small part of the file isn’t there. Since all files are encrypted, we can’t partially rebuild 1235 backup with the data we have. We continue to check, but .. :/

All 18251 backups (VPS / PCI) are in progress."


La loose ...... 3 copie qui se trouvent malheuresement chacune dans les 0,5% detruite ...
comment 0,5% represente au final 6% des cas......

Vive le mode block ...........

tu as un fichier de 3GO ....... reparti en N block de 50MB...... il te manque un block de 50MB et c'est fini ton fichier de 3GB poubelle ...
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: fmermoz le 01 avril 2021 à 09:41:10
Encore un UPS:

Update April,1 7:15am
In the SBG3 we have the security guard walking and checking if everything is okey. This morning at 6am, they felt something strange in the air and found out it’s coming from UPS11T3. We immediately bypass/shutdown the UPS and we called the firefighter
The firefighters came and checked the temp everywhere: no smoke, no fire. They left the site.
On the front of this UPS, we see that the small filter is burnt. I won’t give any fast conclusion.

No impact on the services.

The incident is over. We called the supplier to check this UPS.

The teams are back in SBG3. We continue the operations.

Source: Twitter Octave Klaba (https://twitter.com/olesovhcom/status/1377490327972544513)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Cryptage le 01 avril 2021 à 09:49:35
Encore un UPS:

Et ce n'est sûrement pas fini... C'était obligé que ça fasse ça (ça avait déjà commencé à SBG1).
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: vivien le 01 avril 2021 à 21:44:21
Point journalier de plus en plus réduit. Plus de capture d'écran des baies UP sur SBG3 et SBG4.

L'UPS grillé ce matin sur SBG3 est pas évoqué de manière pudique.

(https://lafibre.info/images/ovh/202104_ovh_communication_suite_incendie_strasbourg_1avril2021.png)

Les bulletins précédents :
- 31 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_31mars2021.png)
- 30 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_30mars2021.png)
- 29 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_29mars2021.png)
- 28 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_28mars2021.png)
- 27 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_27mars2021.png)
- 26 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_26mars2021.png)
- 25 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_25mars2021.png)
- 24 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_24mars2021.png)
- 23 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_23mars2021.png)
- 22 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_22mars2021.png)
- 21 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_21mars2021.png)
- 20 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_20mars2021.png)
- 19 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_19mars2021.png)
- 18 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_18mars2021.png)
- 17 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_17mars2021.png)
- 16 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_16mars2021.png)
- 15 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_15mars2021.png)
- 14 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_14mars2021.png)
- 13 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_13mars2021.png)
- 12 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_12mars2021.png)
- 11 mars 2021 (https://lafibre.info/images/ovh/202103_ovh_communication_suite_incendie_strasbourg_11mars2021.png)
- 10 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg847672/#msg847672)

Vidéos :
- Vidéo du 11 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg848194/#msg848194)
- Vidéo du 16 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg849878/#msg849878)
- Vidéo du 22 mars 2021 (https://lafibre.info/datacenter/incendie-sur-un-site-ovh-a-strasbourg/msg851756/#msg851756)
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Phach le 02 avril 2021 à 09:54:51
Salut,
Bon voila en ce qui me concerne, j'ai récupéré l'accès au PCS et tout est intact.
Désormais, reste à dupliquer les données de moindre importance qui par définition n'étaient pas backupé ailleurs.

Je veux pas faire dévier le sujet, mais j'avoue que personnellement, ca m'a quand même fait prendre conscience qu'on avait un tas de données de plus ou moins grandes importances, mais surtout dans des quantités astronomiques qui ne font qu'augmenter. Ca en devient même inhumain à imaginer.
Je suis dans l'IT depuis plus de 20 ans, donc je sais qu'on produit une masse énorme de données chaque seconde mais cet évènement en fait vraiment prendre conscience de manière plus terre à terre.
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: py92 le 02 avril 2021 à 14:48:15
OVH vient de communiquer sur le nombre de serveurs dans SBG1 (61A/D et 62A) qui vont migrer vers SBG4

Source: http://travaux.ovh.net/?do=details&id=49812

Ces 758 serveurs qui étaient dans 60 baies (3x20Baies) soit à l'origine en moyenne 13 serveurs/baie ==> les baies de SBG1 n'étaient donc clairement pas remplie.....

ils prévoient d’insérer ces serveurs dans 37 baie existante de SBG4  ==>SBG4 n'était donc clairement pas rempli non plus vu qu'il peut y mettre 758 serveurs en + sans ajouter de baies.

SBG1 et SBG4 n'était donc pas vide/phase out comme prévu dans l'action plan de Novembre 2017 mais ils n'étaient pas non plus remplie non plus...
==>ils étaient peut-être en décroissance naturelle ?
Titre: Incendie OVH à Strasbourg: SBG2 complétement détruit. SBG1 détruit à 50%.
Posté par: Hugues le 02 avril 2021 à 16:31:06