La Fibre

Fournisseurs d'accès à Internet fixe en France métropolitaine => K-Net K-Net => Opérateurs grand public alternatifs => K-Net Espace technique internet K-Net => Discussion démarrée par: Thibault le 23 octobre 2012 à 18:50:35

Titre: 23 octobre : Plus d'internet
Posté par: Thibault le 23 octobre 2012 à 18:50:35
Bonjour,

Depuis 18h40 -45 plus d'internet à Cormoranche, et le site de K-net est inaccessible.

Cordialement Titi.
Titre: Plus d'internet
Posté par: Bikeurs le 23 octobre 2012 à 18:52:11
Exactement pareil pour moi.
Titre: Plus d'internet
Posté par: Damien le 23 octobre 2012 à 19:06:21
Effectivement nous avons été informé du problème. Nous travaillons actuellement à l'identifier
Titre: Plus d'internet
Posté par: macarthur01 le 23 octobre 2012 à 19:20:17
A Chanay plus d'internet et plus de téléphone ... et le site K-Net inaccessible .

Que ce passe t'il ?

merci

Christophe
Titre: Plus d'internet
Posté par: jfrag le 23 octobre 2012 à 19:39:09
Pareil pour moi...
a viriat

Mais je suis sur que ca va vite revenir :)
Titre: Plus d'internet
Posté par: butler_fr le 23 octobre 2012 à 19:39:20
apparemment tout knet est dans le soir ce soir....
par contre je ne suis pas sur que ce soit les seuls:
https://lafibre.info/dns/smokeping.cgi?target=Kiwi.KIWIbox.jerome (https://lafibre.info/dns/smokeping.cgi?target=Kiwi.KIWIbox.jerome)

ça box est tombé au mème moment que les box knet hasard?
Titre: Plus d'internet
Posté par: macarthur01 le 23 octobre 2012 à 19:40:29
Des informations sur ce black-out , seraient les bien venues !
Titre: Plus d'internet
Posté par: sbi le 23 octobre 2012 à 19:53:33
Damien, tu n'es pas coupé ?  Quel est ton FAI ??? 

 ::)
Titre: Plus d'internet
Posté par: Kirea le 23 octobre 2012 à 19:58:01
Plus rien sur Echenevex, je vais finir par taper dans une ligne de secours je crois lol
Titre: Plus d'internet
Posté par: Bikeurs le 23 octobre 2012 à 20:06:44
Pas super pour bosser les cours le 1méga en 3g ... Des nouvelles pour un retour à la normal ?
Titre: Plus d'internet
Posté par: Damien le 23 octobre 2012 à 20:11:42
On est en train d'intervenir sur le POP suite à une panne matérielle. Par contre, oui, Kiwi semble avoir la même panne.
On espère un rapide retour à la normale.
Titre: Plus d'internet
Posté par: Kirea le 23 octobre 2012 à 20:12:16
J'ai du aller sur Meyrin pour avoir de la 3g pour envoyer un compte rendu lool qu est ce qu il ne faut pas faire dans ces cas là... mdr
Titre: Plus d'internet
Posté par: jfrag le 23 octobre 2012 à 20:19:35
revenu a viriat !
Titre: Plus d'internet
Posté par: Damien le 23 octobre 2012 à 20:23:08
Nous avons une défaillance complète de nos onduleurs. Nos équipes vont devoir remonter les services un par un pendant une bonne partie de la nuit.
Encore toutes nos excuses pour la gène occasionnée.
Titre: Plus d'internet
Posté par: arnaud le 23 octobre 2012 à 20:29:21
Ok voici un update rapide (pas le temps de faire mieux).

- coeur de réseau remonté
- cluster de service IP unicast en cours de redémarrage
- TV HS pour le moment
- Téléphonie en cours de redémarrage
- Serveurs de stockage 1 / 2 OK, failover en cours de redémarrage.

Les onduleurs ne démarrent pas. On les considère comme définitivement mort.
Titre: Plus d'internet
Posté par: miky01 le 23 octobre 2012 à 20:35:44
Nous avons une défaillance complète de nos onduleurs.

Tu plaisante  ? a chaque pbs EDF tout tombe sur le réseau du SIEA...

Je suis obligé d'utiliser ma connection de secoure chez Free, si le vous avez besoin d'un spécialiste en haute disponibilité, je suis dispo pour ca... 10 ans d'expérence dans ce domaine.  :)
Titre: Plus d'internet
Posté par: sbi le 23 octobre 2012 à 20:43:01
Ce ne doit pas être un pb EDF mais plutôt une défaillance de leurs onduleurs ou des batteries qui les alimentent.
Titre: Plus d'internet
Posté par: macarthur01 le 23 octobre 2012 à 20:50:18
Ça refonctionne à Chanay !
Titre: Plus d'internet
Posté par: Nico_S le 23 octobre 2012 à 20:56:25
Si besoin j'ai un onduleur 500VA que je peux prêter pour dépanner  ::) Et c'est avec plaisir que je le fais, c'est pas du bonheur ?
Titre: Plus d'internet
Posté par: Kirea le 23 octobre 2012 à 21:03:15
Re UP sur Echenevex :)
Titre: Plus d'internet
Posté par: guizmos123 le 23 octobre 2012 à 21:06:08
C'est chaud là ! D'autres FAI touchés ?
Titre: Plus d'internet
Posté par: Nico_S le 23 octobre 2012 à 21:11:26
Je viens de regarder les graphes et apparemment K-Net et Kiwi sont les seuls (enfin de ceux qui ont des graphes smokeping !)
Moi aussi j'ai été coupé ! Bon j'étais pas là ça ne me dérange donc pas.
Titre: Plus d'internet
Posté par: Maillard Informatique le 23 octobre 2012 à 21:13:26
UP pour mes clients de Chazey, Priay, Ambronay, chateau Gaillard et Leyment

Cédric
Titre: Plus d'internet
Posté par: sbi le 23 octobre 2012 à 21:31:43
Je viens de regarder les graphes et apparemment K-Net et Kiwi sont les seuls

Si kiwi et k-net ont été touchés, les pb onduleurs de l'un ne doivent pas affecter l'autre.  Reste 2 modes communs : SEIA et EDF
Titre: Plus d'internet
Posté par: arnaud le 23 octobre 2012 à 22:06:45
Tous les services sont opérationnels depuis environ 20h30.
Titre: Plus d'internet
Posté par: jerome le 23 octobre 2012 à 22:44:41
Mon graphe smokeping chez kiwi est faux, il ne faut pas s'y fier.
Je suis passé chez Knet il y a quelques jours, j'ai envoyé un MP à Vivien mais il n'a pas encore eu le temps de déplacer mon graphe dans la partie Knet.
Et je confirme que c'est remonté vers 20h30.

A+
Titre: Plus d'internet
Posté par: vivien le 23 octobre 2012 à 22:52:16
C'est déplacé dans la section K-Net ! (avec ton DynDNS le graphe a suivit ton changement de FAI)

Il est difficile de nous cacher la date de ta migration, c'est visible sur le graphe SmokePing :
(https://lafibre.info/images/k-net/201210_smokeping_jerome.png)
Titre: Plus d'internet
Posté par: jerome le 23 octobre 2012 à 22:54:49
En effet  ;)
Titre: Plus d'internet
Posté par: butler_fr le 23 octobre 2012 à 22:57:17
ah effectivement je m'étais pausé la question aussi quand j'avais été regarder^^
belle amélioration au niveau régionale en tout cas!
Titre: Plus d'internet
Posté par: Damien le 23 octobre 2012 à 23:54:17
Damien, tu n'es pas coupé ?  Quel est ton FAI ??? 

 ::)

Je n'habite pas dans l'Ain, donc pas chez K-NET. Mais surtout, ce soir, je suis à Paris chez un certain Vivien, bien connu sur ce forum...
Titre: Plus d'internet
Posté par: Kirea le 24 octobre 2012 à 00:50:15
 8)
Titre: Plus d'internet
Posté par: Nico_S le 24 octobre 2012 à 06:17:38
Je n'habite pas dans l'Ain, donc pas chez K-NET. Mais surtout, ce soir, je suis à Paris chez un certain Vivien, bien connu sur ce forum...

Tu fais du favoritisme! Je note ça dans un coin.
Profites en au passage pour lui vendre un abonnement K-Net (même s'il n'a pas la FO).
Titre: Plus d'internet
Posté par: sbi le 25 octobre 2012 à 19:25:56
Les onduleurs ne démarrent pas. On les considère comme définitivement mort.

Comment avez-vous fait pour redémarrer ?  Vous disposez d'un onduleur de secours ou vous avez basculé sur le réseau jusqu'au lendemain ?
Autre question : c'est un prestataire qui fait la maintenance de vos onduleurs  ?
Titre: 23 octobre : Plus d'internet
Posté par: vivien le 25 octobre 2012 à 19:41:57
Ce n'est pas critique de brancher les routeurs directement sur le 220v (sans onduleur).

Il faut juste éviter que cela reste des mois entiers sans onduleur.

Moi ce qui me choque, c'est qu'une installation avec double alimentation et donc un onduleur différent sur chaque alimentation ou une alimentation avec onduleur et l'autre sans, il puisse y avoir une coupure en cas de panne d'un onduleur.

Le message d'Arnaud de juin dernier qui explique la sécurisation électrique :
Nos équipes techniques sur site on découvert les onduleurs DOWN. Pas de bypass sur la génératrice ou sur EDF. Le circuit ondulé était donc éteint.

Malheureusement pour K-Net, certains équipements de cœur étaient alimentés sur le courant ondulé fournit par le SIEA, d'autres en double attachement
sur nos propres onduleurs et sur le circuit du SIEA.

Nous avons passé ces équipements sur notre infra électrique en attendant la réception dans les prochaines semaines des nouveaux CORE switchs
disposant d'une double alimentation.

Le temps de la stabilisation, j'ai temporairement éteint l'interconnexion avec Lyon et laissé le trafic naturellement s'orienter vers Suisse (CIXP et Level3).

Certains équipements serveurs par contre n'ont pas redémarré immédiatement. Par chance nous n'avons perdu qu'un seul disque dans la bataille.

Par malchance par contre, les équipements de collecte du SIEA étant positionné sur le circuit ondulé incriminé, nous avons de fait perdu les collectes jusqu'à ré-allumage du circuit électrique.

Que le SIEA est sous-estimé l'impacte de l'alimentation électrique sur ces installations ne fait plus de doute à mes yeux.
Depuis la panne de Janvier, un second réseau électrique a été déployé dans le POP de St-Genis.
Nous avons changé la majorité des serveurs pour avoir une double alimentation. Il nous reste à changer 3 switch, un serveur de log et un serveur de supervision pour avoir l'ensemble des installations en double alimentation.
Les switch ont été commandé fin mai et devrait arriver mi-juillet. Nous allons migrer les grands comptes sur des FON pour passer à travers du réseau sans passer par un équipement actif du SIEA et nous mettre à l'abris d'une défaillance électrique sur le réseau Ethernet actif.

Du coté du SIEA, les serveurs sont tous en alimentation simple. En cas de panne de courant, ils perdront la supervision, les serveur radius qui permettent l'accès aux équipements, les serveurs IPTV, les serveurs DHCP des CPE optiques.
Titre: 23 octobre : Plus d'internet
Posté par: sbi le 25 octobre 2012 à 20:04:39
La panne du 23 octobre s'explique mal si les équipements K-net ont une alimentation redondée raccordées à 2 sources distinctes.
Il est peut probable qu'il y ait eu 2 pannes simultanées (onduleur + réseau EDF ou 2 onduleurs).
Probable que les équipements possèdent 2 alimentations mais qu'elles soient raccordées toutes deux sur la même source (l'onduleur qui est tombé en panne)
Titre: 23 octobre : Plus d'internet
Posté par: arnaud le 25 octobre 2012 à 21:03:44
On pense a une fuite qq part. Les différentiels des 2 circuits ont disjonctés ensemble.
Titre: 23 octobre : Plus d'internet
Posté par: vivien le 25 octobre 2012 à 21:27:05
C'est pas facile les fuites, surtout quand chaque équipement èmet moins de 10ma en fuite mais qu'ils sont plusieurs à le faire.

L'idéal serait d'avoir un second site qui héberge un second routeur ou sont terminés les boucles. Il est impossible de tout doubler sur un même site.

C'est aussi moins de stress pour les équipes : pas d'urgence pour réparer, il est possible de laisser le SIEA intervenir en heure ouvrée.

Moins de stress de tout casser lors des interventions et possibilité de faire des interventions en journée sans impacter les clients.
Titre: 23 octobre : Plus d'internet
Posté par: guizmos123 le 25 octobre 2012 à 21:31:49
Le shelter à Bourg-En-Bresse ?
Titre: 23 octobre : Plus d'internet
Posté par: Nico_S le 25 octobre 2012 à 21:36:40
Comme tu dis ça reste un shelter ! Il est provisoire en attendant la construction d'un POP définitif. Quand on voit qu'il y fait plus frais à l'intérieur quand on ouvre la porte qu'avec la clim (dont une est resté en panne quelques temps) !
Titre: 23 octobre : Plus d'internet
Posté par: Damien le 25 octobre 2012 à 21:45:23
Non c'est à Saint Genis Pouilly. Vivien, tu as ressenti mon stress pendant la panne mardi soir ?
Titre: 23 octobre : Plus d'internet
Posté par: guizmos123 le 25 octobre 2012 à 21:48:58
Oui je sais ; je disais simplement la possibilité d'utiliser le shelter de Bourg pour avoir un pseudo POP secondaire.
Enfin comme le dit Nico_S ; ça reste un shelter...
Titre: 23 octobre : Plus d'internet
Posté par: miky01 le 25 octobre 2012 à 21:53:37
Moi ce qui me choque, c'est qu'une installation avec double alimentation et donc un onduleur différent sur chaque alimentation ou une alimentation avec onduleur et l'autre sans, il puisse y avoir une coupure en cas de panne d'un onduleur.

Je pourrais t'écrie un roman complet sur tout ce que j'ai vu chez des clients...

-Il y a celui qui branche les 3 alims de son Cisco sur la meme phase, car il y a que une réglette dans le rack...
-Le serveur qui reboot tous les soirs a 20hrs, c'était la femme de ménage qui tirait la prise pour brancher son aspirateur...
-La meuilleur c'était un client qui voulait ceinture et bretelles, donc 2 UPS qui prennent le relais poir 10 minutes en attendant que le diesel se mette en marche, seul soucis, le charlot qui avait fait l'installation avait branché la pompe a mazout sur le seul circuit pas secouru... a mourir de rire, malgré des tests mensuels, ils s'en sont appercu que apres plusieurs annés, le jour ou il y a eu une vraie panne de plusieurs heures.

J'ai aussi vu le circuit de securité d'acces au datacenter, avec carte, emprunte digitale, pas connecté sur les UPS, tout tombe et tu peux plus ouvrir la porte, car le concierge qui a la clé est en train de manger...

La haute disponibilité c'est un métier, ca s'improvise pas.
Titre: 23 octobre : Plus d'internet
Posté par: Nico_S le 25 octobre 2012 à 21:58:53
-Le serveur qui reboot tous les soirs a 20hrs, c'était la femme de ménage qui tirait la prise pour brancher son aspirateur...

Panne fréquente aussi dans la climatisation de bureau, ou tous les soirs bizarrement les clims s’arrêtent alors qu'elles ne doivent pas. Toujours la femme de ménage (la même peut-être, qui sait !) qui coupe les clim sans aucune raison. Et derrière tu cherches une panne qui n'existe pas !
Titre: 23 octobre : Plus d'internet
Posté par: vivien le 25 octobre 2012 à 22:21:04
En même temps un truc bien fait coupe le chauffage / clim la nuit.

En HQE (Haute qualité environnementale) c'est double alim sur les bureau avec une alim qui se coupe a 20h afin que les écran ne reste pas en veille la nuit, détection de présence dans tous les locaux, même les WC, pour la lumière,...

Vivien, tu as ressenti mon stress pendant la panne mardi soir ?
Oui, du stress quand tu découvres que plus rien ne répond... jusqu’à la remise en service.
Vous étiez 3 mobilisés pendant toute la durée de la panne (Arnaud, le tech sur site et toi) + suivit éloigné de Franck.

Quand j'étais à citéFibre, je n'ai eu qu'une seule fois ce stress qui arrive quand tout est tombé (en pleine nuit), avec déplacement sur TH2 en urgence.
Les seules redondances que l'on avait c'était des cartes prêt à mettre en place stockées a TH2. La supervision était faite par Axione depuis Pau (enfin, il arrivait qu'ils soient 3 jours dans le noir quand la fibre Paris-Pau coupait et qu'il fallait attendre marée basse pour intervenir). Je te rassure, le NOC Axione fini par prendre une ligne ADSL et il ont fini par prendre un second lien Paris Pau devant la fréquence des coupures.
Titre: 23 octobre : Plus d'internet
Posté par: Nico le 25 octobre 2012 à 22:55:27
Enfin comme le dit Nico_S ; ça reste un shelter...
C'est possible de faire des choses bien dans un shelter hein !
Titre: 23 octobre : Plus d'internet
Posté par: guizmos123 le 25 octobre 2012 à 23:17:03
Si ma mémoire est bonne, le shelter en question n'a pas assez d'espace pour les FAI. C'était le directeur de Adeli qui avait dis ça à l'époque (en même temps ils ont le Maxnod qui leurs suffit).
Titre: 23 octobre : Plus d'internet
Posté par: Nico_S le 26 octobre 2012 à 06:14:21
Le shelter de Bourg est moins grand que ma cabane de jardin (qui elle est grande il est vrai). En plus j'ai trouvé qu'il était quand même pas mal rempli. D'un autre coté c'est la première fois que je visitais ce genre d'installation.
Titre: 23 octobre : Plus d'internet
Posté par: vivien le 26 octobre 2012 à 08:52:15
Si vous avez des photos (même que de l'extérieur), je suis preneur !
Titre: 23 octobre : Plus d'internet
Posté par: arnaud le 26 octobre 2012 à 09:38:45
Si vous avez des photos (même que de l'extérieur), je suis preneur !

J'vais déployer des équipements dans 4 NRO SIEA dans les mois qui viennent. Je te passerais les photos Vivien.

Dans la todolist de l'équipe d'ingénierie on à, juste après le déploiement de Deauville, pas mal de boulot de déplacement d'infra.
Nous sommes notamment en train de dissocier l'infra telco opérateur de l'infra de téléphonie d'entreprise, le déplacement de ces systèmes
sur 2 datacenters différents proche de l'Ain.

Nous allons également alléger du POP de SGP l'ensemble des systèmes annexes (web, Mx etc ...) et le cluster du SI dans une autre salle.

Sur le POP de SGP, on ne va conserver que ce qui est strictement et directement lié a l'activité d'ISP local. Donc principalement
les infrastructures systèmes liées a la télé. Le routage local va être au passage probablement déplacé dans une autre baie au POP. 

Le core network est remanié depuis quelques temps pour acentrer le réseau de SGP qui va ne devenir a terme qu'une entité de routage
local triplement rattachée au backbone. Nos 3 points actuels de coeur de réseau sont devenus Lyon Paris et Genèves qui sont tous
interconnectés. Chaque point du Backbone reçoit au minimum 1 transit et les attachements vers les principaux IX actifs de l'écosystème local.
Ils ont tous une capacité de switching x 10G.

Enfin dans les gros chantiers du SIEA nous avons proposé de travailler ensemble sur une redondance de livraison des collectes. Par ailleurs
ils nous ont confirmé cette semaine avoir débloqué un budget a mes yeux conséquent pour remanier le réseau d'énergie du POP de SGP.

Bref, on bosse dur, mais tout cela ne peux pas se faire en claquant des doigts.
Titre: 23 octobre : Plus d'internet
Posté par: Leon le 26 octobre 2012 à 10:13:14
Merci, c'est intéressant.
Nos 3 points actuels de coeur de réseau sont devenus Lyon Paris et Genèves qui sont tous
interconnectés. Chaque point du Backbone reçoit au minimum 1 transit et les attachements vers les principaux IX actifs de l'écosystème local.
Ils ont tous une capacité de switching x 10G.
Est-ce que ça veut dire que vous avez 2 liaisons Paris-Geneves et Paris-Lyon à 10Gb/s chacune? Si c'est le cas, ça doit coûter bonbon!
Vous en êtes où niveau débit total écoulé?

Leon.
Titre: 23 octobre : Plus d'internet
Posté par: vivien le 26 octobre 2012 à 10:18:21
C'est une boucle Lyon <=> Paris <=> Amsterdam <=> Genève <=> Lyon.
Il y a donc bien deux moyens de joindre paris depuis Lyon ou Genève.

On parle de capacité de switching x 10G et non capacité de routage (il y a une différence, cela coûte moins cher de router 6x 1Gb/s que 1x 10Gb/s).