Auteur Sujet: Incendie Global Switch Clichy du 26 avril 2023 et ses impacts sur Google Cloud  (Lu 38822 fois)

0 Membres et 1 Invité sur ce sujet

Nico

  • Modérateur
  • *
  • Messages: 44 486
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #12 le: 26 avril 2023 à 14:53:41 »
On rigole bien avec les VE...

Impact majeur de l'incident Google/Global Switch sur le réseau de recharge @Izivia ⬇️ du groupe @EDFofficiel : Impact sur les paiements et les cartes tierces ! (Cc @Chargemap @Auto_Propre )
https://twitter.com/MCCob/status/1651184183912325126


Nico

  • Modérateur
  • *
  • Messages: 44 486
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #13 le: 26 avril 2023 à 15:45:01 »
Dites @payplug et @GroupeBPCE Nous approchons 7h de panne totale des acquisitions de paiement CB en raison de votre choix de travailler avec GCP, sans redondance. Vous n’avez aucun PCA ? C’est des stagiaires à la gouvernance IT et conformité chez vous ? Vous plaisantez j’espère.

https://twitter.com/a_bermingham/status/1651220617469870081

pju91

  • Abonné Free fibre
  • *
  • Messages: 846
  • 91
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #14 le: 26 avril 2023 à 16:20:23 »
RTFM: https://cloud.google.com/compute/docs/regions-zones?hl=fr
Ca me paraît inimaginable une telle erreur de "design", pour un service de paiement supposé disponible 24x7.

xp25

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 5 951
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #15 le: 26 avril 2023 à 17:29:29 »
Dites @payplug et @GroupeBPCE Nous approchons 7h de panne totale des acquisitions de paiement CB en raison de votre choix de travailler avec GCP, sans redondance. Vous n’avez aucun PCA ? C’est des stagiaires à la gouvernance IT et conformité chez vous ? Vous plaisantez j’espère.

https://twitter.com/a_bermingham/status/1651220617469870081

Il lui est proposé de passer chez Stancer (Iliad Bank) !  ;D



https://twitter.com/pfhugues/status/1651221221889941507

https://twitter.com/vincib/status/1651235237031026693

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 458
  • Lyon (69) / St-Bernard (01)
    • Twitter
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #16 le: 26 avril 2023 à 17:31:38 »
Pouahahahaha, excellent !

Denis M

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 1 025
  • Sermaise 91530
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #17 le: 26 avril 2023 à 19:27:49 »
N'empêche que ce genre d'incident impacte la vie de tous les jours.
Tout à l'heure je n'arrivais pas à payer quelque chose, c'était ma première commande sur ce site et en bon parano je suis parti en vrille.

Je me suis excusé depuis.

Nico

  • Modérateur
  • *
  • Messages: 44 486
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #18 le: 26 avril 2023 à 19:44:33 »
Je ... non rien.

Nous avions bien de la redondance entre plusieurs datacenters. Nous faisons face à une défaillance physique d’un datacenter qui a déclenché une défaillance logique de toute la région. C’est un scénario hautement improbable et inexpliqué à ce stade par notre prestataire.
https://twitter.com/payplug/status/1651243791066562563

thenico

  • Expert.
  • Abonné OVH
  • *
  • Messages: 1 009
  • FTTH >500 Mb/s (13)
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #19 le: 26 avril 2023 à 20:53:25 »
Chez un client, j'ai fait reboot les switchs du site secondaire.
Cela a fait tomber la baie SAN du site primaire donc la prod est tombé.

En théorie, ce n'était pas possible.
En pratique, on a des surprises.

vivien

  • Administrateur
  • *
  • Messages: 47 217
    • Twitter LaFibre.info
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #20 le: 26 avril 2023 à 21:01:32 »
Mais là, on est sur un acteur probablement opérateur d'importance vitale, qui doit avoir un très haut niveau de disponibilité et de résilience.

Aujourd'hui c'est une journée particulière, on peut penser que des clients Google Cloud cherchent à migrer chez Scaleway qui propose des services conçurent.

Que Scaleway ne soit pas en mesure de vendre est critique pour tous les clients Google qui cherchent une solution alternative. Amazon a dû faire une bonne journée.

vivien

  • Administrateur
  • *
  • Messages: 47 217
    • Twitter LaFibre.info
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #21 le: 26 avril 2023 à 21:10:21 »
Statu à 21h00 : A l’heure qu’il est, des serveurs de bases de données ont été créés sur la région Belgique et la migration des données de production essentielles au processing est terminée. La réactivation des services devrait avoir lieu de manière progressive au plus vite.
Toutes les équipes sont pleinement mobilisées, l'urgence étant la stabilisation de l’ensemble de notre service.


Ils rejettent la faute sur Google qui aurait perdu toute la région (3 datacenter).

Sinon, top leur système de monitoring qui indique qu'il n'y a eu aucune coupure - disponibilité aujourd'hui de 99,8% (les graphiques en bas de ma copie d'écran)



vivien

  • Administrateur
  • *
  • Messages: 47 217
    • Twitter LaFibre.info
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #22 le: 26 avril 2023 à 21:26:00 »
Pour revenir à Global Switch, on ne sait toujours pas la cause de l'incendie.
On sait juste que c'est au sous-sol et l'eau a entraîné l'arrêt d'urgence de certains équipements dans cette zone.

Le porte-parole de Global Switch a déclaré ceci : « Un départ d’incendie s'est déclaré ce matin dans une salle de l’un des deux centres de données de notre site parisien. Les pompiers sont intervenus rapidement et l'incendie est désormais maitrisé. Les dispositifs anti-incendie du bâtiment ont parfaitement fonctionné, personne n'a été blessé. Le service de certains de nos clients a été temporairement affecté et notre équipe sur site travaille à le rétablir le plus rapidement possible ».

Antoinel

  • Abonné Bbox fibre
  • *
  • Messages: 363
  • Bbox Fit FTTH
Incendie Globalswitch Clichy le 26 avril 2023
« Réponse #23 le: 26 avril 2023 à 21:31:51 »
Hmm si ? Y a eu des retours détaillés sur frnog.

Citer
Problème de pompe d'eau du circuit de refroidissement, ce qui a généré une
accumulation de d'eau et qui a déclenché la fuite.
L'eau de la fuite est descendue sur le local batterie et a provoqué un
incendie.
Le directeur du site de GS est toujours en discussion avec les pompiers
pour savoir si ils coupent completement le courant du batiment concerné
pour l'intervention des pompiers.
Pas de fummée dans les autres salles, c'est confiné à la salle technique où
se trouvent les batterie.
Les pompiers sont obligés de laisser bruler les batteries avant
d'intervenir.

https://www.mail-archive.com/frnog@frnog.org/msg72320.html
https://www.mail-archive.com/frnog@frnog.org/msg72330.html
https://www.mail-archive.com/frnog@frnog.org/msg72334.html