La Fibre

Fournisseurs d'accès à Internet fixe en France métropolitaine => K-Net K-Net => Opérateurs grand public alternatifs => K-Net Espace technique internet K-Net => Discussion démarrée par: butler_fr le 21 août 2013 à 22:42:24

Titre: Saturation chez Knet?
Posté par: butler_fr le 21 août 2013 à 22:42:24
Salut à tous

j'allais poster un post sur une saturation entre knet et orange mais enfaite la saturation est vers la plupart des destinations visiblement

cf:
Host                                  Loss%   Snt   Last   Avg  Best  Wrst StDev
 1. 192.168.23.1                      0.0%   100    0.8   0.8   0.5   1.1   0.1
 2. 80.10.127.97                      0.0%   100    1.6   1.7   1.2   2.7   0.3
 3. 10.123.200.202                    0.0%   100    1.6   2.5   1.3  27.9   3.6
 4. ae44-0.nimsr302.paris.francetele  0.0%   100    7.8   8.2   7.4  31.8   2.7
 5. 81.253.184.98                     0.0%   100    9.6  10.0   7.8  12.5   1.2
 6. tengige0-15-0-11.auvtr4.aubervil  0.0%   100    8.6  10.1   7.8  12.5   1.2
 7. te1-2.parse1.paris.opentransit.n  0.0%   100    8.6  12.5   7.9  54.2  10.8
 8. lostoasis.gw.opentransit.net      0.0%   100   16.9  10.7   7.8  19.0   3.4
 9. 2ge-e1-17-e1-18-cr5.le9-lyon.fr.  0.0%   100   15.0  17.9  15.0  26.6   3.6
10. kwaoo.ix-customers-le9lyon.ielo.  0.0%   100   15.4  15.6  15.1  17.4   0.4
11. border1-sgp.kwaoo.net             1.0%    99   19.7  19.7  18.3  22.1   0.9
12. 100-200-28-81.ftth.cust.kwaoo.ne  6.1%    99   38.8  30.2  22.2  46.7   5.6


on peu le voir via les graphs smokeping depuis lafibre.info
le calvados n'est pas touché

edit:
d'après les graphs de titidu01 border1-cixp.kwaoo.net ne répond plus depuis knet
(ping parfait de mon coté) peut ètre un début de piste?

cf mon smokeping (1h de décalage):
(https://lafibre.info/images/k-net/201308_smokeping_orange_vers_k-net.png)
Titre: Saturation chez Knet?
Posté par: Damien le 21 août 2013 à 22:55:33
Je crois que les smokeping de lafibre.info ont faussés depuis l'incident d'Adeli en fin de semaine dernière.
Titre: Saturation chez Knet?
Posté par: butler_fr le 21 août 2013 à 22:56:46
non mais la le smokeping il est en accord avec le mien:
https://smokeping.damien-briens.fr/cgi-bin/smokeping.cgi?target=WEB.Knet-titidu01 (https://smokeping.damien-briens.fr/cgi-bin/smokeping.cgi?target=WEB.Knet-titidu01)

celui de titidu01:
http://smokeping.thibault01.com/?target=Operateurs.Knet.Borders.border1cixpkwaoonet (http://smokeping.thibault01.com/?target=Operateurs.Knet.Borders.border1cixpkwaoonet)
http://smokeping.thibault01.com/?target=Sites (http://smokeping.thibault01.com/?target=Sites)
Titre: Saturation chez Knet?
Posté par: Damien le 21 août 2013 à 23:02:00
d'après les graphs de titidu01 border1-cixp.kwaoo.net ne répond plus depuis knet
(ping parfait de mon coté) peut ètre un début de piste?

Il répond très bien d'après mes tests. Vu les graphs de titidu01 vers border1-cixp.kwaoo.net depuis le début, j'ai un doute sur la qualité des graphs.

Les notre évoquent également une montée du ping entre 21h30 et 22h00, mais pas de coupures.
Titre: Saturation chez Knet?
Posté par: butler_fr le 21 août 2013 à 23:11:09
bon après il reste la saturation entre knet et orange^^
ou alors un problème chez titidu01?

mais si on regarde bien, ça fait 3 soirs que titidu01 à des montés de ping autour de 21/23h vers la plupart des sites (facebook/google/testdebit.info ....)
ce qui correspond à mon graph et à ceux de lafibre.info
Titre: Saturation chez Knet?
Posté par: Thibault le 22 août 2013 à 00:31:25
Ha ne pas compter mon smokeping de cette journée :D
Grosse journée téléchargement. (Ils sont tous finis en ce moment)

Par contre je peux t'assurer que mes graphes sont parfait au niveau de la config.
Tout est en câble et le rpi à suffisamment de ressource pour faire ses pings, aucune montée en charge. Bien sûr que le ping monte quand j'utilise de la bande passante car le CPE est limité à 100 mbs, faut bien que ça bloque quelque part.
De plus c'est mon routeur qui répond, donc pour les autres rien à voir avec mon rpi.
Par contre pour le border, je n'arrive pas à y expliquer.
Et Butler je trouve qu'il y a beaucoup de perte vers moi.

Edit : Je viens de voir que je suis pas le seul à avoir eu une montée, donc mon téléchargement n'est pas uniquement la cause et le débit est très bon :
+ de 10 mo/s sur Origin et Steam.

PS : Voilà un site ou j'achètes des jeux pas chères, d'ou mon téléchargement : https://www.humblebundle.com/ (https://www.humblebundle.com/)

Re-Edit : Ce que je trouve aussi bizarre c'est que Adeli <=> Wibox à toujours un problème alors que Adeli <=> K-net c'est bon. Donc en effet peut-être encore un problème chez Adeli.
Titre: Saturation chez Knet?
Posté par: Damien le 22 août 2013 à 08:05:14
mais si on regarde bien, ça fait 3 soirs que titidu01 à des montés de ping autour de 21/23h vers la plupart des sites (facebook/google/testdebit.info ....)
ce qui correspond à mon graph et à ceux de lafibre.info
Je pense que titi utilise + ça connexion le soir, et créé chez lui une saturation
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 08:28:46
Petite mise au point : Il y a une différence entre un graphe avec un ping élevé en permanence (ce qui signifie qu'il fait des détours en nombre de km de fibre), d'un ping qui s’élève le soir qui est synonyme de saturation : Le temps n'est plus perdu dans des fibres mais au niveau de buffers de routeurs. Ces buffers se remplissent car le lien est plein ou le routeur n'arrive pas a router le nombre de paquet par seconde qui arrive.

Une saturation est donc visible sur SmokePing par une élévation du ping et/ou des pertes de paquets. Bien sur quand un client utilise sa connexion au maximum (téléchargement d'un gros fichier), il y a saturation mais ce n'est pas de la faute de son FAI. Il est donc impossible de conclure avec un graphe d'un client, il en faut plusieurs.


Voici le graphe du site web de K-Net depuis Bouygues Telecom (Paris TH2) en IPv4 :
(https://lafibre.info/images/k-net/201308_web_k-net_adeli_ipv4.png)

Le traceroute : On passe par le peering privé Bytel de Neo Telecoms puis Ielo, un des transitaire de K-Net qui transporte le flux jusqu'à Lyon :
$ mtr -4rwc100 k-net.fr
HOST: testdebit.info                                     Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 89.84.127.61                                      0.0%   100    0.3   0.5   0.3   9.0   0.9
  2.|-- v113.tengec5-10g.core04-t2.club-internet.fr       9.0%   100    0.3   4.4   0.3 107.9  18.0
  3.|-- ae5.tcore01-m.net.bbox.fr                         0.0%   100   10.4  14.3   0.6 114.8  26.0
  4.|-- be35.cbr01-ntr.net.bbox.fr                        0.0%   100    4.9   5.2   1.3   9.1   2.4
  5.|-- lag13.rpt02-ix2.net.bbox.fr                      48.0%   100    3.4   3.0   1.8  17.1   2.7
  6.|-- 83.167.32.213.static.not.updated.neotelecoms.com  0.0%   100    1.8   2.4   1.7  39.0   4.0
  7.|-- 83.167.55.46                                      0.0%   100    1.9   1.9   1.7   4.4   0.3
  8.|-- xe2-1-0.ter1.eqx2.par.as8218.eu                   0.0%   100    2.2   8.5   2.1  64.5  16.6
  9.|-- ge1-5.br1.rdb.par.ielo.net                        0.0%   100    2.0   3.7   1.9  16.1   3.0
 10.|-- 10ge-5-2-cr2.th2.fr.rt.ielo.net                   0.0%   100    1.5   2.6   1.4  11.4   2.4
 11.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net       0.0%   100   12.5  11.3   8.4  19.2   3.6
 12.|-- kwaoo.ix-customers-le9lyon.ielo.net               0.0%   100    8.7   8.6   8.5   8.8   0.1
 13.|-- border1-sgp.kwaoo.net                             0.0%   100   11.5  11.5  11.4  12.0   0.1
 14.|-- pil.kwaoo.net                                     0.0%   100   12.2  12.2  12.0  12.6   0.1

Dans l'autre sens, K-Net envoie le trafic vers Bouygues Telecom en peering direct sur Equinix Paris en utilisant le lien Paris - Lyon de K-net

Le même graphe du site web de K-Net depuis Adeli / Maxnod en IPv4 :
(https://lafibre.info/images/k-net/201308_web_k-net_adeli_ipv4.png)

Le traceroute : (vu le ping de 2,8ms je sais que dans l'autre sens on passe aussi par le CIXP car LyonIX rajoute 1ms dans chaque sens)
$ mtr -4rwc100 k-net.fr
HOST: lafibre.info            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz    0.0%   100    0.3   1.9   0.2 147.5  14.7
  2.|-- cixp.kwaoo.com         0.0%   100    2.1   2.1   2.1   2.5   0.0
  3.|-- border1-sgp.kwaoo.net  0.0%   100    2.4   2.3   2.3   3.0   0.1
  4.|-- admin-knet.kwaoo.net   0.0%   100    3.0   3.1   2.8   3.5   0.1


Le site web de K-Net depuis Adeli / Maxnod en IPv6 :
(https://lafibre.info/images/k-net/201308_web_k-net_adeli_ipv6.png)

Le traceroute : On passe par Cogent, transitaire commun à K-Net et Adeli. Cette absence de peering est lié a des travaux d'Adeli - Les peering IPv6 seront remis en service la semaine prochaine.
$ mtr -6rwc100 k-net.fr
HOST: lafibre.info            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 2a01:6e00:10:410::1    0.0%   100    0.5   2.2   0.2 194.5  19.4
  2.|-- 2001:978:2:16::9       0.0%   100    1.7  13.6   1.6 155.1  33.7
  3.|-- 2001:978:2:16::1:2     0.0%   100    1.4   1.4   1.3   1.6   0.0
  4.|-- border1-sgp.kwaoo.net  0.0%   100    4.4   4.4   4.2   4.6   0.1
  5.|-- ipv6.kwaoo.net         0.0%   100    5.0   5.1   4.9   5.4   0.1

Le traceroute devrait être identique dans l'autre sens.

Le forum de K-Net (une autre machine virtuelle) depuis Bouygues Telecom :
(https://lafibre.info/images/k-net/201308_forum_k-net_bouygues.png)

Le traceroute :
$ mtr -4rwc100 forum.k-net.fr
HOST: testdebit.info                                     Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 89.84.127.61                                      0.0%   100    0.3   0.4   0.3   0.7   0.1
  2.|-- v113.tengec5-10g.core04-t2.club-internet.fr       6.0%   100    0.3   6.2   0.3 105.1  18.1
  3.|-- ae5.tcore01-m.net.bbox.fr                         0.0%   100    2.5  14.5   0.6 103.8  24.5
  4.|-- be35.cbr01-ntr.net.bbox.fr                        0.0%   100    8.2   5.1   1.1   9.0   2.3
  5.|-- lag13.rpt02-ix2.net.bbox.fr                      38.0%   100    5.5   3.9   1.8  28.3   4.2
  6.|-- 83.167.32.213.static.not.updated.neotelecoms.com  0.0%   100    1.8   1.9   1.7  11.3   1.1
  7.|-- 83.167.55.46                                      0.0%   100    1.8   1.8   1.7   2.1   0.1
  8.|-- xe2-1-0.ter1.eqx2.par.as8218.eu                   0.0%   100    2.2  14.1   2.1  79.6  18.5
  9.|-- ge1-5.br1.rdb.par.ielo.net                        0.0%   100    2.0   4.2   1.9  12.7   3.4
 10.|-- 10ge-5-2-cr2.th2.fr.rt.ielo.net                   0.0%   100   11.4   3.7   1.4  12.1   3.5
 11.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net       0.0%   100    8.4  10.4   8.3  19.1   3.2
 12.|-- kwaoo.ix-customers-le9lyon.ielo.net               0.0%   100    8.5   8.6   8.4   9.1   0.1
 13.|-- border1-sgp.kwaoo.net                             0.0%   100   11.4  11.5  11.3  12.1   0.1
 14.|-- ispc1.kwaoo.net                                   0.0%   100   12.2  12.2  12.0  12.6   0.1


Le forum de K-Net depuis Adeli :
(https://lafibre.info/images/k-net/201308_forum_k-net_bouygues.png)

Le traceroute :
mtr -4rwc100 forum.k-net.fr
HOST: lafibre.info            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz    0.0%   100    0.3   3.4   0.2 279.5  27.9
  2.|-- cixp.kwaoo.com         0.0%   100    2.2   2.1   2.1   2.6   0.1
  3.|-- border1-sgp.kwaoo.net  0.0%   100    2.4   2.3   2.3   2.5   0.0
  4.|-- ispc1.kwaoo.net        0.0%   100    3.2   3.1   2.9   3.7   0.1
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 08:42:08
Vers les clients K-Net du Calvados, pas de saturation mais le chemin est complétement différent : On ne passes jamais par Lyon que ce soit pour Bouygues Teleocm ou Adeli.

Bouygues Telecom Paris => Clients K-Net du Calvados :
Cliquez sur le lien : https://lafibre.info/images/k-net/201308_clients_k-net_calvados_bouygues.png

Le traceroute : Dans les deux sens on est en peering direct via Equinix Paris
$ mtr -rwc100 185.4.76.3
HOST: testdebit.info                                Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 89.84.127.61                                 0.0%   100    0.6   0.4   0.3   0.9   0.1
  2.|-- v113.tengec5-10g.core04-t2.club-internet.fr  9.0%   100    0.2   4.2   0.2 101.6  15.0
  3.|-- ae5.tcore01-m.net.bbox.fr                    0.0%   100   38.3  14.0   0.6  95.2  23.1
  4.|-- be35.cbr01-ntr.net.bbox.fr                   0.0%   100    5.8   5.1   1.2   9.0   2.4
  5.|-- lag36.rpt02-th2.net.bbox.fr                 61.0%   100    9.8   6.4   2.2  31.5   6.2
  6.|-- kwaoo.equinix-ix.fr                          0.0%   100    2.0   2.0   1.9   4.5   0.4
  7.|-- core01-toq.dea.kwaoo.net                     0.0%   100    7.3   8.1   7.0  41.1   3.9
  8.|-- 3-76-4-185.ftth.cust.dea.kwaoo.net           0.0%   100    4.9   4.8   4.7   5.2   0.1

(j'ai pris pour mon traceroute la première IP de la plage du calvados qui répond au ping, je ne pense pas que ce client soit sur le SmokePing)

Adeli / Maxnod => Clients K-Net du Calvados :
Cliquez sur le lien : https://lafibre.info/images/k-net/201308_clients_k-net_calvados_adeli.png

Le traceroute : Comme pour Bouygues telecom, c'est du peering direct via equinix Paris
$ mtr -rwc100 185.4.76.3
HOST: lafibre.info                           Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz                   0.0%   100    0.3   1.7   0.2 106.9  10.7
  2.|-- 6k-1-gi4-11-th2-paris.infr.liazo.net  0.0%   100    6.8  17.2   6.6 197.3  35.7
  3.|-- kwaoo.equinix-ix.fr                   0.0%   100    8.4   8.4   8.3  10.2   0.2
  4.|-- core01-toq.dea.kwaoo.net              0.0%   100   14.9  15.4  13.5  80.2   7.5
  5.|-- 3-76-4-185.ftth.cust.dea.kwaoo.net    0.0%   100   11.6  11.5  11.4  11.7   0.1


J'ai indiqué qu'on ne passait jamais par Lyon. Certains vont me dire que pour sortir du Maxnod, je suis obligé de passer par Lyon.

En fait Adeli viens de mettre en service un lien optique Paris - Saint-Trivier-sur-Moignans dans l'Ain où est situé le Maxnod qui ne passe pas par Lyon afin de gagner environ 100 Km dans chaque sens.

La fibre utilisée n'est pas sur l'autoroute mais voici ce que cela donne pour une voiture :
(https://lafibre.info/images/adeli/201308_maxnod_fibre_direct_paris.gif)

Vénissieux (situé au sud de Lyon), c'est le LyonIX.
137 Boulevard voltaire dans le 11ème à Paris, c'est Telehours2, le centre de l'Internet Français où tous les opérateurs (même K-Net et Adeli) sont présents.
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 09:11:10
Bouygues Telecom Paris => Clients K-Net de l'Ain :
Cliquer sur le lien : https://lafibre.info/images/k-net/201308_clients_k-net_ain_bouygues.png

Le traceroute : (vers une IP au hasard en début de plage)
On passe par le peering privé Bytel de Neo Telecoms puis Ielo, un des transitaire de K-Net qui transporte le flux jusqu'à Lyon :
$ mtr -rwc100 81.28.200.1
HOST: testdebit.info                                     Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 89.84.127.61                                      0.0%   100    0.7   0.4   0.3   1.0   0.1
  2.|-- v113.tengec5-10g.core04-t2.club-internet.fr       5.0%   100    0.4   7.0   0.2 235.4  32.1
  3.|-- ae5.tcore01-m.net.bbox.fr                         0.0%   100    0.9  16.1   0.8 129.4  27.8
  4.|-- be35.cbr01-ntr.net.bbox.fr                        0.0%   100    1.6   5.4   1.5   9.2   2.3
  5.|-- lag13.rpt02-ix2.net.bbox.fr                      44.0%   100    2.1   5.5   1.9  30.6   6.1
  6.|-- 83.167.32.213.static.not.updated.neotelecoms.com  0.0%   100    1.9   2.5   1.8  46.9   4.6
  7.|-- 83.167.55.46                                      0.0%   100    1.9   2.1   1.9   8.8   0.7
  8.|-- xe2-1-0.ter1.eqx2.par.as8218.eu                   0.0%   100    2.3   3.5   2.3  59.0   7.2
  9.|-- ge1-5.br1.rdb.par.ielo.net                        0.0%   100    6.7   4.3   2.0  12.8   3.3
 10.|-- 10ge-5-2-cr2.th2.fr.rt.ielo.net                   0.0%   100    2.6   4.2   1.5  12.0   3.5
 11.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net       0.0%   100   18.7  11.0   8.5  19.2   3.4
 12.|-- kwaoo.ix-customers-le9lyon.ielo.net               0.0%   100    8.7   8.7   8.6   9.3   0.1
 13.|-- border1-sgp.kwaoo.net                             0.0%   100   11.6  11.8  11.5  13.1   0.2
 14.|-- 1-200-28-81.ftth.cust.kwaoo.net                   0.0%   100   14.1  14.4  14.0  26.1   1.2


Traceroute inverse : (Merci Titidu01) K-Net envoie le trafic vers Bouygues Telecom en peering direct sur Equinix Paris en utilisant le lien Paris - Lyon de K-net
HOST: raspberrypi                                Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1                                 0.0%     1    0.8   0.8   0.8   0.8   0.0
  2.|-- border1-sgp.kwaoo.net                       0.0%     1    4.8   4.8   4.8   4.8   0.0
  3.|-- border1-th2.kwaoo.net                       0.0%     1   14.1  14.1  14.1  14.1   0.0
  4.|-- ? ?                                        100.0     1
  5.|-- be36.cbr01-ntr.net.bbox.fr                  0.0%     1   18.1  18.1  18.1  18.1   0.0
  6.|-- ae35.tcore01-m.net.bbox.fr                  0.0%     1   16.4  16.4  16.4  16.4   0.0
  7.|-- po101.core04-t2.net.bbox.fr                 0.0%     1   16.9  16.9  16.9  16.9   0.0
  8.|-- v113.tengec5-10g.c6k02-t2.club-internet.fr  0.0%     1   17.0  17.0  17.0  17.0   0.0
  9.|-- testdebit.info                               0.0%     1   16.7  16.7  16.7  16.7   0.0


Adeli / Maxnod => Clients K-Net de l'Ain :
Cliquer sur le lien : https://lafibre.info/images/k-net/201308_clients_k-net_ain_adeli.png

Le traceroute : Dans les deux sens on passe par le CIXP
$ mtr -rwc100 81.28.200.1
HOST: lafibre.info                      Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz              0.0%   100    0.3   1.4   0.2  98.5   9.8
  2.|-- cixp.kwaoo.com                   0.0%   100    2.2   2.1   2.1   2.3   0.0
  3.|-- border1-sgp.kwaoo.net            0.0%   100    2.4   2.3   2.3   3.0   0.1
  4.|-- 1-200-28-81.ftth.cust.kwaoo.net  0.0%   100    4.6   5.0   4.4  31.3   3.1


Traceroute inverse : (Merci Titidu01)
HOST: raspberrypi            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1             0.0%     1    0.8   0.8   0.8   0.8   0.0
  2.|-- border1-sgp.kwaoo.net   0.0%     1    4.6   4.6   4.6   4.6   0.0
  3.|-- border1-cixp.kwaoo.net  0.0%     1    4.8   4.8   4.8   4.8   0.0
  4.|-- cixp-adeli.cern.ch      0.0%     1    7.3   7.3   7.3   7.3   0.0
  5.|-- lafibre.info            0.0%     1    7.0   7.0   7.0   7.0   0.0
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 09:17:08
Conclusion :
- Pas de saturation quand on rentre/sort sur le réseau par Equinix-Paris (peering) et que l'on va dans le calvados.
- Saturation quand on rentre/sort par le CIXP (peering) et qu'on va dans l'Ain ou le datacenter en suisse ou sont hébergé les serveurs de K-Net
- Saturation quand on rentre par le IELO Lyon + Equinix-Paris en sortie et qu'on va dans l'Ain ou le datacenter en suisse ou sont hébergé les serveurs de K-Net
- IPv6 : Saturation on rentre/sort par le Cogent quand va dans l'Ain ou le datacenter en suisse ou sont hébergé les serveurs de K-Net

Le problème est donc localisé sur le réseau K-Net dans l'Ain. Je pense qu'il doit y avoir un point commun entre Lyon-IX, le CIXP, le trafic récupère du SIEA et le trafic de l'hébergement web

Voici un ancien schéma du réseau K-Net :
(https://lafibre.info/images/k-net/201211_reseau_k-net.png)

Où sont les serveurs web ?

En lien on a testé donc IELO/LyonIX (Bouygues), Cogent (Adeli IPv6) et CIXP (Adeli IPv4) et on observe la même saturation vers les clients IPv4 et IPv6 + vers le site web IPv4 + IPv6
Titre: Saturation chez Knet?
Posté par: K-net le 22 août 2013 à 09:25:25
Nous avons atteint 2.5Gbs (1.5down/1up) de trafic cumulé sur l'Ain, la capacité maximum du routeur Cisco ASR 1001 de St-Genis-Pouilly.

Nous devons le remplacer par un routeur Brocade d'une capacité de 40Gbs, le même que celui déployé cet été sur Paris.

L'intervention étant critique,  nous attendions le retour de tous nos ingénieurs.
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 09:28:09
Il y a un routeur ou un switch sur Genève ?

Si c'est un routeur, je ne comprends pas que le trafic qui viens du CIXP (Genève) et a destination du site web (également sur Genève) va en France sur St-Genis-Pouilly...

C'est bon signe, cela signifie que K-net est en pleine croissance et que le réseau a un peu de mal a suivre...
Titre: Saturation chez Knet?
Posté par: butler_fr le 22 août 2013 à 09:34:43
ce que je trouve étonnant aussi c'est que le traffic interclient de l'ain soit aussi impacté
cf:
http://smokeping.thibault01.com/?target=Operateurs.Knet.Clients.Ain (http://smokeping.thibault01.com/?target=Operateurs.Knet.Clients.Ain)
(https://lafibre.info/images/k-net/201308_smokeping_titidu01_vers_client_k-net_jenecplu.png)

TitiDu01 => Tipiak
(https://lafibre.info/images/k-net/201308_smokeping_titidu01_vers_client_k-net_tipiak.png)
(sauf si le graph n'est pas fiable avec les téléchargement)

ce traffic passe également par ce routeur?
il n'y aurait pas moyen de les faire communiquer en direct sans passer dessus?
Titre: Saturation chez Knet?
Posté par: K-net le 22 août 2013 à 09:50:45
Nous avons 3 pop dans un rayon de 10km.
- SGP avec un routeur de coeur  de réseau, la collecte du SIEA et des serveurs de services pour l'Ain
- Cixp avec un routeur de bordure, des clients pro,  peering et transit level3
- Equinix avec la collecte SIG (K-sys), des serveurs de services non géographique,  des clients pro et le rattachement à la boucle européenne.

@butler_fr
L'ensemble du trafic doit passer par l'opérateur de service,  nous avons des obligations légales à respecter.
Titre: Saturation chez Knet?
Posté par: butler_fr le 22 août 2013 à 09:55:34
Effectivement je n'y avais pas pensé!

merci pour l'info  ;)
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 09:57:26
Effectivement pour joindre le site web de K-net on fait :

Maxnod / Adeli (Saint-Trivier-sur-Moignans) => CIXP / Adeli (Genève) => CIXP / K-Net (Genève) => Routeur "border1-sgp" / K-Net (Saint-Genis-Pouilly) => Serveurs K-Net (GV1 à Genève)

Le traceroute ne me dit pas que le serveur est à GV1 à Genève, mais c'est une info de jack :
k-net.fr est à gv1, en Suisse

Pourquoi passer par Saint-Genis-Pouilly si il y a un routeur a Genève ?
Je pensais que le déplacement des serveurs de services non géographique à Genève était pour éviter d'être impacté par les coupures sur Saint-Genis-Pouilly.

$ mtr -4rwc100 k-net.fr
HOST: lafibre.info            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz    0.0%   100    0.3   1.9   0.2 147.5  14.7
  2.|-- cixp.kwaoo.com         0.0%   100    2.1   2.1   2.1   2.5   0.0
  3.|-- border1-sgp.kwaoo.net  0.0%   100    2.4   2.3   2.3   3.0   0.1
  4.|-- admin-knet.kwaoo.net   0.0%   100    3.0   3.1   2.8   3.5   0.1
Titre: Saturation chez Knet?
Posté par: Thibault le 22 août 2013 à 10:08:25
Ha donc le problème est sur la collecte à SGP ?
Mais vous dites tous saturation, sauf que j'ai strictement rien ressenti ! Mon téléchargement aller très vite, et les pages se chargées bien.

Pour voir l'utilisation réseau, je conseil de regarder ce graphe : http://smokeping.thibault01.com/?target=Local.MonRouteur (http://smokeping.thibault01.com/?target=Local.MonRouteur) Si il monte, logiquement le routeur commence à saturer.
Titre: Saturation chez Knet?
Posté par: butler_fr le 22 août 2013 à 10:12:13
la saturation peut ètre plus ou moins importante
ici c'est encore légé, de ton coté tu n'as pas eu de pertes de paquets

de mon coté quelques pertes mais modérées(au max 3/20 ping perdus)

(https://lafibre.info/images/k-net/201308_smokeping_orange_vers_k-net.png)
Titre: Saturation chez Knet?
Posté par: vivien le 22 août 2013 à 10:17:33
Pour ceux qui ont du mal à suivre, c'est un SmokePing depuis une connexion Orange FTTH sur Rennes (35).
Tu monitorais quelle cible chez K-Net ?

Tu nous ferais un traceroute ?
Je suppose que cela passe par le peering payant que IELO possède avec Orange et que c'est IELO qui transporte le trafic entre Paris et Lyon.
Titre: Saturation chez Knet?
Posté par: Thibault le 22 août 2013 à 10:17:37
Oui j'ai remarqué que tu fais beaucoup de ping toi.
Moi j'ai suivi les graphes de Vivien donc 5 ping en 300s pour bien pouvoir comparer.

Par contre K-net c'est clair que d'avoir un routeur à 2.5GBS et un réseau qui supporte beaucoup plus derrière, c'est pas le tip top ;D
Mais vaut mieux attendre l'équipe au complet que de tomber en panne :D

Butler ping mon Ip.

Vivien moi voilà la mtr vers Butler : A la fin il ne répond plus car il a un problème, et son smokeping ne marche plus.
HOST: raspberrypi                                      Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1                                       0.0%     1    0.7   0.7   0.7   0.7   0.0
  2.|-- border1-sgp.kwaoo.net                             0.0%     1    4.9   4.9   4.9   4.9   0.0
  3.|-- border1-lyonix.kwaoo.net                          0.0%     1    7.8   7.8   7.8   7.8   0.0
  4.|-- sw1-le9lyon-ge-1-6.ix-customers-le9lyon.ielo.net  0.0%     1    8.0   8.0   8.0   8.0   0.0
  5.|-- 2ge-e1-5-e3-20-cr2.th2-prs.fr.rt.ielo.net         0.0%     1   15.1  15.1  15.1  15.1   0.0
  6.|-- po1.parse1.Paris.opentransit.net                  0.0%     1   15.5  15.5  15.5  15.5   0.0
  7.|-- xe-2-0-3-0.auvtr3.Aubervilliers.opentransit.net   0.0%     1   17.7  17.7  17.7  17.7   0.0
  8.|-- 193.251.132.163                                   0.0%     1   18.6  18.6  18.6  18.6   0.0
  9.|-- 81.253.184.97                                     0.0%     1   15.8  15.8  15.8  15.8   0.0
 10.|-- ? ?                                              100.0     1

Titre: Saturation chez Knet?
Posté par: butler_fr le 22 août 2013 à 10:32:27
alors depuis ce matin ma box ne répond plus
je pense qu'elle à planté (no-ip et OVHdyndns sont sur deux machines différentes: la livebox et mon "routeur" donc aucune chance qu'il y ai un problème sur les deux)

je verais en rentrant ce soir

par contre j'avais déjà fait un mtr dans mon premier post:
Host                                  Loss%   Snt   Last   Avg  Best  Wrst StDev
 1. 192.168.23.1                      0.0%   100    0.8   0.8   0.5   1.1   0.1
 2. 80.10.127.97                      0.0%   100    1.6   1.7   1.2   2.7   0.3
 3. 10.123.200.202                    0.0%   100    1.6   2.5   1.3  27.9   3.6
 4. ae44-0.nimsr302.paris.francetele  0.0%   100    7.8   8.2   7.4  31.8   2.7
 5. 81.253.184.98                     0.0%   100    9.6  10.0   7.8  12.5   1.2
 6. tengige0-15-0-11.auvtr4.aubervil  0.0%   100    8.6  10.1   7.8  12.5   1.2
 7. te1-2.parse1.paris.opentransit.n  0.0%   100    8.6  12.5   7.9  54.2  10.8
 8. lostoasis.gw.opentransit.net      0.0%   100   16.9  10.7   7.8  19.0   3.4
 9. 2ge-e1-17-e1-18-cr5.le9-lyon.fr.  0.0%   100   15.0  17.9  15.0  26.6   3.6
10. kwaoo.ix-customers-le9lyon.ielo.  0.0%   100   15.4  15.6  15.1  17.4   0.4
11. border1-sgp.kwaoo.net             1.0%    99   19.7  19.7  18.3  22.1   0.9
12. 100-200-28-81.ftth.cust.kwaoo.ne  6.1%    99   38.8  30.2  22.2  46.7   5.6


pour le nombre de ping j'ai laissé par défaut
je vais peut être baisser un peu (mais c'est un tout autre sujet ;) )
Titre: Saturation chez Knet?
Posté par: K-net le 22 août 2013 à 10:45:57
Au prix des routeurs on va pas brûler les étapes.
En juin 2010, quand j'ai fait le choix pour des routeurs à 2.5Gbs, je suis passé pour un dingue, on me conseillait plus de partir sur du routage linux ou du cisco à 800Mbs.

La capacité total de routage est passé de 7.5Gbs à 47.5Gbs avec la mise en prod du routeur de Paris.

Après l'ICMP est le premier à souffrir d'un routeur qui plafonne, le trafic n'est pas automatique impacté.
Titre: Saturation chez Knet?
Posté par: Thibault le 22 août 2013 à 10:55:41
Non mais si c'est prévu de le changer, il y a rien a ce reprocher ! Surtout que uniquement l'icmp a été touché.
Titre: Saturation chez Knet?
Posté par: butler_fr le 22 août 2013 à 10:59:49
Citer
Au prix des routeurs on va pas brûler les étapes.

Totalement d'accord

pour l'instant on est pas sur de la grosse saturation donc pas de gros problème

il faudrait peut ètre faire un sujet dans la section dédiée sur votre forum! (pour éviter d'autres sujet dans le genre^^)
Titre: Saturation chez Knet?
Posté par: vivien le 24 août 2013 à 15:26:02
Message de  Frank Bisetti (pseudo K-Net sur ce forum) à l'instant sur le forum K-Net (https://forum.k-net.fr/index.php?topic=1877.0).
L'upgrade est prévu le 28 août 2013.

Bonjour,

Pour accompagner dans les meilleures conditions l'utilisation que vous faites de la fibre optique dans l'Ain, nous allons remplacer les 2 liens Gbs par 1 lien 10Gbs.

Une coupure de quelques minutes est à prévoir.
Titre: Saturation chez Knet?
Posté par: K-net le 24 août 2013 à 22:36:01
On a pas prévu de changer le routeur.

Dans l'idéal,  il nous faudrait remplacer le routeur,  2 switch cisco,  les liaisons avec le SIEA et retirer les STB Comtrend qui sont encore en exploitation.
On va le faire par étape, on manque de ressources pour tout mener de front.
Titre: Saturation chez Knet?
Posté par: Thibault le 27 août 2013 à 20:50:11
C'est bizarre car le ping est après l'ain dans mon cas. Sur SGB à TH2 (exemple) :
pi@raspberrypi ~ $ mtr -rwc100 testdebit.info
HOST: raspberrypi                                Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1                                 0.0%   100    0.9   1.2   0.8   5.4   0.8
  2.|-- border1-sgp.kwaoo.net                       0.0%   100    9.8   7.6   3.9  24.0   4.1
  3.|-- border1-th2.kwaoo.net                       0.0%   100   49.3  52.0  31.0  73.5   8.0
  4.|-- ? ?                                        100.0   100    0.0   0.0   0.0   0.0   0.0
  5.|-- be36.cbr01-ntr.net.bbox.fr                  5.0%   100   48.4  53.6  38.1  80.3   9.2
  6.|-- ae35.tcore01-m.net.bbox.fr                  2.0%   100  108.7  99.0  38.6 208.3  40.7
  7.|-- po101.core04-t2.net.bbox.fr                 2.0%   100   46.6  60.3  36.8 219.1  27.8
  8.|-- v113.tengec5-10g.c6k02-t2.club-internet.fr  4.0%   100   44.2  53.7  37.6  78.8   8.9
  9.|-- 89.84.127.55                                3.0%   100   49.4  54.7  37.1  74.2   8.3


Edit : idem sur SGB <=> Lyon :
pi@raspberrypi ~ $ mtr -rwc100 lafibre.info
HOST: raspberrypi            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1             0.0%   100    0.8   1.9   0.8  74.2   7.3
  2.|-- border1-sgp.kwaoo.net   0.0%   100   15.7  17.7   4.1  42.3   8.1
  3.|-- border1-cixp.kwaoo.net  0.0%   100   64.7  53.5  30.1 101.3  11.1
  4.|-- cixp-adeli.cern.ch      0.0%   100   53.6  52.0  34.4  76.2   8.6
  5.|-- lafibre.info            1.0%   100   55.6  57.2  31.8 114.8  11.5


On a quand même une hausse de Moi <=> SGB mais moins grande.
Titre: Saturation chez Knet?
Posté par: vivien le 27 août 2013 à 21:01:56
On voit aussi des pertes de paquets très importantes sur ton premier traceroute (tous les routeurs après border1-th2.kwaoo.net )
Pour les pertes, 100 ping est un peu faible, il faut plutôt 1000 pour avoir une info plus fiable.

Voici le traceroute inverse :

Depuis TestDebit.info / Bouygues Telecom :
$ mtr -rwc100 81.28.200.xxx
HOST: testdebit.info                                     Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 89.84.127.61                                      0.0%   100    0.4   0.4   0.3   1.5   0.2
  2.|-- v113.tengec5-10g.core04-t2.club-internet.fr      14.0%   100    0.3   4.4   0.2 103.5  14.9
  3.|-- ae5.tcore01-m.net.bbox.fr                         0.0%   100    0.9  13.9   0.8  97.4  24.1
  4.|-- be35.cbr01-ntr.net.bbox.fr                        0.0%   100    6.2   5.3   1.5   9.4   2.3
  5.|-- lag13.rpt02-ix2.net.bbox.fr                      80.0%   100    2.0   3.5   1.9  14.5   3.5
  6.|-- 83.167.32.213.static.not.updated.neotelecoms.com  0.0%   100    1.9   2.5   1.8  36.7   4.2
  7.|-- 83.167.55.46                                      0.0%   100    1.9   2.1   1.9  10.5   0.9
  8.|-- xe2-1-0.ter1.eqx2.par.as8218.eu                   0.0%   100    2.4   3.1   2.2  40.8   4.5
  9.|-- ge1-5.br1.rdb.par.ielo.net                        0.0%   100    2.2   5.5   2.0  40.2   6.0
 10.|-- 10ge-5-2-cr2.th2.fr.rt.ielo.net                   0.0%   100    7.8   3.8   1.5  12.1   3.3
 11.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net       0.0%   100    8.7  11.2   8.6  19.1   3.4
 12.|-- kwaoo.ix-customers-le9lyon.ielo.net               0.0%   100    8.8   8.9   8.6  10.8   0.4
 13.|-- border1-sgp.kwaoo.net                             0.0%   100   43.7  33.4  16.5  55.3   8.5
 14.|-- xxx-200-28-81.ftth.cust.kwaoo.net                 3.0%   100   67.0  59.0  33.8  82.5   9.9


Cela n'aide pas de ne pas avoir de chemin symétrique (on passe par un chemin complètement différent selon le sens)

Depuis LaFibre.info / Adeli / Maxnod :

$ mtr -rwc100 81.28.200.xxx
HOST: lafibre.info                        Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz                0.0%   100    0.3   0.5   0.2   2.8   0.6
  2.|-- cixp.kwaoo.com                     0.0%   100    2.1   2.1   2.1   2.5   0.1
  3.|-- border1-sgp.kwaoo.net              0.0%   100   35.7  32.7  18.9  48.0   5.2
  4.|-- xxx-200-28-81.ftth.cust.kwaoo.net  0.0%   100   40.0  55.3  40.0  92.6   9.3
Titre: Saturation chez Knet?
Posté par: Thibault le 27 août 2013 à 21:11:45
Oui mais pour lafibre.info c'est bon il me semble, chemin est symétrique. Je te fais les tracerts avec 1000 pings.
Titre: Saturation chez Knet?
Posté par: Thibault le 27 août 2013 à 21:28:48
Le problème est bien à SGP de K-net <=> K-net (Moi <=> Tipiak) le ping augmente aussi :

(https://lafibre.info/images/k-net/201308_smokeping_titidu01_vers_client_k-net_tipiak_2.png)

Vers testdebit.info :
pi@raspberrypi ~ $ mtr -rwc1000 testdebit.info
HOST: raspberrypi                                  Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1                                 0.2%  1000    0.9   0.8   0.7  27.5   1.4
  2.|-- border1-sgp.kwaoo.net                       0.0%  1000    3.9   8.8   3.8 129.8   6.3
  3.|-- border1-th2.kwaoo.net                       0.5%  1000   65.8  67.9  38.6 114.6  10.0
  4.|-- ? ?                                        100.0  1000    0.0   0.0   0.0   0.0   0.0
  5.|-- be36.cbr01-ntr.net.bbox.fr                  2.3%  1000   71.8  77.3  46.9 114.9  10.0
  6.|-- ae35.tcore01-m.net.bbox.fr                  3.9%  1000   72.4  81.7  45.4 170.7  23.3
  7.|-- po101.core04-t2.net.bbox.fr                 2.8%  1000   74.5  78.7  44.7 295.4  32.2
  8.|-- v113.tengec5-10g.c6k02-t2.club-internet.fr  2.8%  1000   81.8  70.6  39.9 108.5   9.9
  9.|-- 89.84.127.55                                1.9%  1000   83.9  70.7  44.4 151.0  10.


Vers Lafibre.info :
pi@raspberrypi ~ $ mtr -rwc1000 lafibre.info
HOST: raspberrypi              Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 192.168.1.1             0.1%  1000    0.8   0.8   0.7  30.0   1.2
  2.|-- border1-sgp.kwaoo.net   0.0%  1000    4.1   4.3   3.8  16.2   1.0
  3.|-- border1-cixp.kwaoo.net  0.3%  1000   32.3  50.2  21.0  86.4   9.9
  4.|-- cixp-adeli.cern.ch      0.6%  1000   29.6 431.9  22.4 3192. 664.9
  5.|-- lafibre.info            0.4%  1000   33.7  52.1  22.7 124.5   9.8



EDIT : Le passage par Lyonix à l'air beaucoup moins chargé. Presque pas de saturation :
(http://puu.sh/4crou.png)
Titre: Saturation chez Knet?
Posté par: arnaud le 28 août 2013 à 15:21:09
Oui cela correspond a une saturation de l'un des routeurs de Saint Genis (le cisco ASR installé il y'a 18 mois a atteint sa capacité de routage). Nous avons été livrés de son remplaçant qui devrait être installé cette semaine, le temps de le configurer et de l'intégrer dans le coeur de réseau, je pense qu'il sera raisonablement en production vers la mi septembre.
Titre: Saturation chez Knet?
Posté par: vivien le 28 août 2013 à 15:30:29
Arnaud, dans l'architecture actuelle je ne comprend pas pourquoi un flux qui doit rester sur Genève passe par ce routeur de Saint-Genis-Pouilly.

Exemple pratique : consultation du site K-Net (ou du forum) depuis Adeli (le peering se fais dans les deux sens au CIXP)

Les serveurs K-Net sont à GV1 à Genève. Pourquoi passer par Saint-Genis-Pouilly si il y a un routeur a Genève ?
Je pensais que le déplacement des serveurs de services non géographique à Genève était pour éviter d'être impacté par les coupures sur Saint-Genis-Pouilly.

Le traceroute :
$ mtr -4rwc100 k-net.fr
HOST: lafibre.info            Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- portevlan.adeli.biz    0.0%   100    0.3   1.9   0.2 147.5  14.7
  2.|-- cixp.kwaoo.com         0.0%   100    2.1   2.1   2.1   2.5   0.0
  3.|-- border1-sgp.kwaoo.net  0.0%   100    2.4   2.3   2.3   3.0   0.1
  4.|-- admin-knet.kwaoo.net   0.0%   100    3.0   3.1   2.8   3.5   0.1


Maxnod / Adeli (Saint-Trivier-sur-Moignans) => CIXP / Adeli (Genève) => CIXP / K-Net (Genève) => Routeur "border1-sgp" / K-Net (Saint-Genis-Pouilly) => Serveurs K-Net (GV1 à Genève)
Titre: Saturation chez Knet?
Posté par: arnaud le 28 août 2013 à 15:39:16
Parce que tous les serveurs ne sont pas encore migrés, il reste encore 2 ou 3 broutilles a éteindre^déplacer, quelques bétises historique a renuméroter etc ...  avant de faire ça.
Ça reste dans la todolist. 
Titre: Saturation chez Knet?
Posté par: jack le 07 octobre 2013 à 17:44:02
Hop, le nouveau routeur est en prod, avec une bonne dose d'abonnés (pas tous) dessus !