La Fibre
Datacenter et équipements réseaux => Datacenter => 
Telehouse => Discussion démarrée par: benoit75015 le 12 avril 2012 à 11:14:20
-
Une partie du 1er étage de Telehouse 2 à été coupé hier matin, occasionnant des dégradation sur Internet (coupure de certains clients Free et perte de certaines destinations).
Voici explication de Telehouse :
-------- Message original --------
Sujet: Incident électrique du 11 avril 2012
Date : Wed, 11 Apr 2012 17:39:35 +0000 (GMT)
Cher Client,
La zone Ouest du premier étage du site de Telehouse Voltaire a subi un incident électrique à 10h17 ayant pu occasionner un défaut d'alimentation de vos équipements.
Après investigations pour rechercher l'origine de la disjonction du Masterpact en sortie des onduleurs Ouest, nous avons pu isoler un départ en défaut et donc réarmer les disjoncteurs des tableaux divisionnaires de la zone concernée entre 10h49 et 10h53, fin de l'incident.
Par souci de sécurité, nous avons remplacé le disjoncteur du tableau divisionnaire impacté et le disjoncteur Masterpact, ces 2 éléments ayant étant envoyés en usine pour des tests complèmentaires.
L'incident a été solutionné après avoir identifié un défaut sur l'une des armoires divisionnaires mais des analyses restent toujours en cours pour connaître l'origine précise de ce défaut. Après résultats des analyses et test en usine, nous ne manquerons pas de revenir vers vous avec un rapport plus détaillé.
Si vous êtes en dual feed ou en 48V, vous ne devriez pas avoir été impactés par cet incident. Dans le cas contraire, merci de bien vouloir prendre contact avec nous pour vérifier vos installations.
Cordialement,
L'équipe Telehouse
Photo d'un Masterpack chez OVH :
(https://lafibre.info/images/ovh/201105_rbx3_TGBT_%20avec_1082A_qui_passent_a_travers_ce_dijoncteur.jpg)
(https://lafibre.info/images/ovh/201105_rbx2_dijoncteur_2000A.jpg)
(https://lafibre.info/images/ovh/201106_rbx2_TGBT_1.jpg)
-
Voici l'explication d'un client sur la mailing liste FRnOG :
Bonsoir
Comment bien se moquer du client encore... pour ne pas simplement avouer qu'ils n'ont plus assez de puissance électrique sur l'onduleur et qu'ils ont mal gérés le temps qui passe.
L'explication est bancale!
Comment voulez-vous savoir qu'il y a un disjoncteur défectueux dans un TD en aval du masterpact et l'identifier sans avoir réarmé aucune fois le disjoncteur de tête Masterpact ? Et la sélectivité ? ..
On peux s'étonner aussi que le Masterpact ne soit pas motorisé pour permettre un réarmement automatique...
Pour résumer , transformateur 20kv -> 400kv -> disjoncteur Masterpact -> Onduleur zone ouest -> disjoncteur Masterpact -> disjoncteurs de départ vers les TD (tableaux de distributions) -> Un disjoncteur général sur chaque TD -> Un disjoncteur vers chaque depart de baie -> un disjoncteur dans chaque baie -> machine du client.
Ils sont ou les STS pour faire du N+1 ? ..... C'est le masterpact en amont de l'onduleur qui a déclenché?.. dans ce cas on va se poser des questions sur l'onduleur..
Que va-t-il se produire le jour ou ce sera le bobinage d'un transfo HT alimentant un onduleur qui se mettra en court-circuit ? ...
Connaissant le responsable qualité chez Schneider, ni Telehouse ni Spie n'ont effectués ce jour une demande d'analyse. (PIPO comme d'hab !)
Quand au dual feed ils sont connectés sur les même TD aux fesses du même onduleur... donc ne sert à rien... et telehouse ne vends pas de 48V !
Pour résumer le changement de 2 disjoncteurs je ne peux pas y croire une moindre seconde ! surtout qu'un masterpact une fois changé il faut pouvoir l'étalonner..
Bref, sauvez-vous
-
Ce qui est étonnant, c'est qu'hier matin il y a eu une panne électrique à Toulouse, 92.000 foyers touchés :
http://www.20minutes.fr/societe/914743-coupure-electricite-toulouse-92000-foyers-prives-courant-transports-perturbes (http://www.20minutes.fr/societe/914743-coupure-electricite-toulouse-92000-foyers-prives-courant-transports-perturbes)
Hier après-midi, c'est en Dordogne où 120.000 foyers ont été touchés :
http://dlendirect.blogs.dordognelibre.fr/archive/2012/04/11/100-000-foyers-prives-d-electricite-en-dordogne.html (http://dlendirect.blogs.dordognelibre.fr/archive/2012/04/11/100-000-foyers-prives-d-electricite-en-dordogne.html)
Y'aurait pas un souci en amont qui ait provoqué tout ceci ?
-
Pour TH2 c'est un soucis d'alimentation interne, donc pas de corrélation à priori.
Après ce genre d'incident sur TH2, on peut pas dire que ce soit trèèèèèès étonnant non plus.
-
Pourquoi ?
TH2 ne vend pas plus de capacité électrique qu'ils n'en ont. De nombreuses baies sont vides dans certaines salles, car TH2 est incapable de fournir une alimentation électrique.
Les clients qui ont une baie unique bourré de 40 serveurs ne peuvent pas louer de seconde baie.
Le prix est assez élevé, c'est le data-center N°1 de France pour l'interconnexion de réseaux, cela doit aider pour faire monter les prix.
-
On voit encore une fois la fiabilité remarquable des datacenters...
-
Pourquoi ?
Globalement, TH2 fait vraiment moins nickel que d'autres DC. Je m'attends plus à avoir un soucis dessus.
C'est super dense dedans, t'as des baies partout, des chemins de câbles saturés (certains câbles sont passés à l'arrache, faudra pas s'étonner si ils sont coupés un jour)...
Les clients qui ont une baie unique bourré de 40 serveurs ne peuvent pas louer de seconde baie.
Exact. J'ai cru comprendre que tu as le droit à tant de puissance électrique par dalle, donc si t'es en mode dense dans tes baies, tu es obligé de louer plein de dalles pour pouvoir leur fournir l'électricité nécessaire (cf. une salle OVH, bien grande mais avec 5 pauvres baies).
@ corrector : J'ai lu un article où une personne s'exprimant anonymement expliquait que cette panne était une preuve de la fiabilité de TH2...
-
C'est comme le théorème du gruyère : plus y a de trous, plus y a de gruyère (démonstration en annexe)
Plus y a de pannes, plus y a de temps entre les pannes.
Corollaire : Plus y a de pannes, plus c'est fiable.
Annexe
Démonstration du théorème du gruyère :
plus y a de trous, moins y a de gruyère;
moins y a de gruyère, moins y a de trous;
moins y a de trous, plus y a de gruyère;
donc plus y a de trous, plus y a de gruyère.
-
Sympa :)
Dans le genre j'aime bien ça :
The more I study, the more I know.
The more I know, the more I forget.
The more I forget, the less I know.
So, why study?
-
Le prix est assez élevé, c'est le data-center N°1 de France pour l'interconnexion de réseaux, cela doit aider pour faire monter les prix.
Globalement, TH2 fait vraiment moins nickel que d'autres DC. Je m'attends plus à avoir un soucis dessus.
C'est super dense dedans, t'as des baies partout, des chemins de câbles saturés (certains câbles sont passés à l'arrache, faudra pas s'étonner si ils sont coupés un jour)...
Exact. J'ai cru comprendre que tu as le droit à tant de puissance électrique par dalle, donc si t'es en mode dense dans tes baies, tu es obligé de louer plein de dalles pour pouvoir leur fournir l'électricité nécessaire (cf. une salle OVH, bien grande mais avec 5 pauvres baies).
En gros tout le monde s'entasse dans un datacenter surchargé, un peu bordélique, avec une distribution électrique mal conçue (bref, ça ressemble à un truc low cost) et des tarifs pas du tout low cost?
Est-ce que les gens sont collectivement cons?
-
Non, TH2 s'est imposé comme lieu d'interco entre les différents opérateurs et en est devenu incontournable.
Et ça semble difficile de se défaire de cette situation.
-
C'est difficile de s'interconnecter ailleurs?
(Pas qu'à Paris d'ailleurs.)
-
Pas forcement, mais à TH2 tu peux facilement toucher beaucoup de monde (exemple avec OVH (http://weathermap.ovh.net/paris) en bas à droite de la weathermap).
Maintenant avec des IX du genre FranceIX tu peux t'interco avec tous leurs membres depuis plusieurs DC (à Paris et maintenant au NetCenter de Marseille par exemple).
-
Pour faire simple, les FAI que ne sont que sur un POP sont sur TH2, ceux qui sont sur deux POP sont sur TH2 et un autre dans Paris.
Le problème c'est que de nombreux opérateurs ne peuvent trouver que TH2 pour peerer entre eux.
OVH par exemple n'est présent que sur TH2 et TH1. Pour peerer de nombreux opérateurs sont obligés de peerer sur TH2 (TH1 est un petit data-center complètement rempli et il me semble plus problématique au niveau du câblage que TH2 - il est d'ailleurs interdit de poser du câble soit même à TH1 alors que à TH2 c'est autorisé)
TH2 à de beaux jours devant lui...
-
A priori la weathermap "telehouse" d'OVH est fausse, et en fait les deux routeurs sont à TH2 (cf. la weathermap "paris").
Et ils sont aussi présents sur GlobalSwitch (avec une salle plutôt grande d'ailleurs).
C'est interdit de tirer ses rocades à TH1 ? A TH3 je suis sur, à TH2 on a le droit, mais TH1 je ne suis pas sur. Enfin bon de toute façon TH1 ça doit plus vraiment bougé, c'est pas grand et bien plein.
Ceci dit on peut pas vraiment tirer de conclusion par rapport au fait d'avoir le droit de tirer ses rocades ou pas, TH2 est maintenant l'exception à ce niveau.
-
Effectivement le trafic semble nul sur l'unique routeur de TH1 : http://weathermap.ovh.net/routers-p19 (http://weathermap.ovh.net/routers-p19)
Je ne serais pas étonné qu'OVH quitte TH1.
Ils avaient un 10 Gb/s avec Bouygues Telecom sur TH1, il y a encore quelques mois, mais c'est passé sur TH2.
Et l'upgrade à 20 Gb/s à été faite cet après-midi :
(https://lafibre.info/images/ovh/201204_peering_ovh_bouygues_telecom.png)
-
Je ne serais pas étonné qu'OVH quitte TH1.
C'est fait depuis début octobre. (http://travaux.ovh.net/?do=details&id=5860)
EDIT : Le début de la migration ici (http://travaux.ovh.net/?do=details&id=5807).