La Fibre
Hébergeurs et opérateurs pro / entreprises => Hébergeurs et opérateurs pro / entreprises => 
Scaleway => Discussion démarrée par: guizmo34 le 02 avril 2014 à 23:09:38
-
Bonsoir,
Online semble être (ENFIN) connecté au FranceIX depuis ce soir.
Voici un mtr :
(https://lafibre.info/images/peering/201403_peering_online_franceix_he.png)
Vous constatez la même chose depuis chez vous ?
Un smokeping depuis ONLINE est disponible ici : http://smokeping-online.intuxication.net/cgi-bin/smokeping.cgi (http://smokeping-online.intuxication.net/cgi-bin/smokeping.cgi)
Bonne soirée :)
-
https://twitter.com/mmarcha/status/451470108716974082 (https://twitter.com/mmarcha/status/451470108716974082)
Mickael Marchand (@mmarcha)
Qqs peerings en +: hivane,fotolia,wifirst,http://he.net ,akamai,mediactive,intrinsec,dstorage (et facebook sous peu) #moretocome
11:23 PM - 2 Apr 2014
-
France-IX Pop de Vitry :
(https://lafibre.info/images/peering/201403_franceix_pop_vitry.png)
-
Peering up ;)
-
Effectivement, route plus courte.
Je fais Amsix -> HE -> FranceIX au lieu de faire Amsix -> HE -> Level3 (donc on évite le cumul de 2 transitaires) et le débit semble déjà beaucoup plus confortable (avant, ~10Mbps avec un thread iperf, maintenant ~80Mbps) ;)
(https://lafibre.info/images/peering/201403_peering_online_franceix_newsoo.png)
-
(https://lafibre.info/images/peering/201404_franceix_pop_vitry.png)
-
Par contre je trouve étonnant que K-Net envoi tout son trafic via Ielo, son transitaire.
Dans le sens Online => K-Net, je vois qu'une partie du trafic passe par France-IX, c'est visiblement les routes plus précises des clients parisiens.
Pour les clients de Lyon et le site Web, c'est Ielo dans les deux sens.
Le graphe qui montre que la grande majorité du trafic Online passe par Ielo :
(https://lafibre.info/images/k-net/201404_wethermap_k-net_023_online_as12876.png)(https://lafibre.info/images/k-net/201402_wethermap_k-net_legende.png)
Traceroute IPv4 Online => K-Net : On passe par le transitaire de K-Net : Ielo (qui a un PNI avec Online)
$ mtr -4rwc100 k-net.Fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 62.210.156.14.te-dns.org 0.0% 100 0.7 2.4 0.6 17.6 2.8
2.|-- a9k1-1049.dc3.poneytelecom.eu 0.0% 100 2.1 1.5 0.6 15.0 2.5
3.|-- 45x-1-4080.pni.dc2.poneytelecom.eu 0.0% 100 5.0 2.4 0.8 11.9 2.3
4.|-- pni-poneytelecom-e1-5-cr7.iliad-dc2.fr.rt.ielo.net 0.0% 100 0.4 2.4 0.3 10.9 3.3
5.|-- ge-1-1-df-cr2.th2-prs.fr.rt.ielo.net 0.0% 100 4.5 3.2 0.6 11.1 3.3
6.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net 0.0% 100 8.3 10.4 7.7 18.2 3.5
7.|-- 2ge-e1-1-e1-2-cr10.eqx1-gnv.ch.rt.ielo.net 0.0% 100 10.4 12.4 10.4 20.9 3.1
8.|-- kwaoo.ix-customers-gva1.ielo.net 0.0% 100 11.0 43.9 10.5 286.5 56.4
9.|-- pop.kwaoo.net 0.0% 100 11.6 11.3 11.0 11.9 0.2
Traceroute IPv6 : On passe par France-IX systématiquement
$ mtr -6rwc100 k-net.Fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 2001:bc8:2::1 0.0% 100 3.2 2.9 0.6 12.1 2.7
2.|-- 2a01:e0b::ded1:beef:3d 7.0% 100 0.9 1.4 0.8 18.0 1.9
3.|-- he.franceix.net 0.0% 100 5.6 4.1 0.8 42.1 5.4
4.|-- kwaoo.franceix.net 0.0% 100 1.6 3.9 1.2 46.9 7.3
5.|-- border1-cixp.kwaoo.net 0.0% 100 10.7 11.6 10.3 58.3 4.9
6.|-- tickets.kwaoo.net 0.0% 100 11.2 11.3 10.6 16.9 0.8
Traceroute IPv4 d'un abonné sur Deauville : on passe par France-IX (c'est le même type de traceroute pour les clients K-Net en ile de France ou sur Nancy / Deauville : ils ont des annonces plus précises sur le GIX.
$ mtr -rwc100 185.4.76.xx
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 62.210.156.14.te-dns.org 0.0% 100 0.9 2.2 0.6 11.9 2.4
2.|-- a9k1-1049.dc3.poneytelecom.eu 0.0% 100 0.8 1.6 0.7 25.4 3.2
3.|-- kwaoo.franceix.net 0.0% 100 20.5 3.8 0.6 92.8 13.0
4.|-- core01-toq.dea.kwaoo.net 0.0% 100 5.9 7.3 5.9 32.2 4.0
5.|-- xx-76-4-185.ftth.cust.dea.kwaoo.net 0.0% 100 4.5 4.2 3.8 6.7 0.6
-
Peut être que ONLINE et K-NET ne peer pas ensemble au FranceIX ?
Ou alors K-net priorise le trafic via IELO (Qui dispose d'un PNI avec Online...)
-
Dans l'autre sens depuis l'Ain :
Traceroute K-Net (Ain) => IPv4 Online : On passe par le transitaire de K-Net : Ielo (qui a un PNI avec Online)
pi@raspberrypi ~ $ mtr -rwc100 62.210.156.14
HOST: raspberrypi Loss% Snt Last Avg Best Wrst StDev
1.|-- 192.168.1.1 0.0% 100 1.0 1.0 0.8 5.3 0.4
2.|-- border1-sgp.kwaoo.net 0.0% 100 4.0 4.3 3.9 10.0 0.9
3.|-- 172.16.121.6 0.0% 100 4.3 52.6 3.9 1955. 274.0
4.|-- cr10-10ge-2-4.ix-customers-gva1.ielo.net 0.0% 100 9.7 6.6 4.1 15.3 3.3
5.|-- 2ge-e1-3-e1-4-cr5.le9-lyon.fr.rt.ielo.net 0.0% 100 7.4 9.4 6.8 21.7 3.5
6.|-- 2ge-e1-5-e3-20-cr2.th2-prs.fr.rt.ielo.net 0.0% 100 21.6 16.6 14.0 25.4 3.6
7.|-- ge-2-3-df-cr7.iliad-prs.fr.rt.ielo.net 0.0% 100 25.2 17.2 14.2 34.1 3.9
8.|-- pni-poneytelecom.iliad-dc2.fr.rt.ielo.net 0.0% 100 15.3 16.9 14.9 33.0 2.8
9.|-- a9k1-4080.dc3.poneytelecom.eu 0.0% 100 16.2 15.9 15.0 24.4 1.4
10.|-- 62.210.156.14.te-dns.org 1.0% 100 15.2 17.0 14.9 25.3 2.4
Traceroute K-Net (Ain) => IPv6 Online : On passe par Hurricane Electric
pi@raspberrypi ~ $ mtr -rwc100 2001:bc8:2::1
HOST: raspberrypi Loss% Snt Last Avg Best Wrst StDev
1.|-- 2a03:4980:1:d::1 0.0% 100 1.1 1.1 1.0 4.1 0.3
2.|-- border1-sgp.kwaoo.net 0.0% 100 4.4 15.8 4.0 142.6 31.3
3.|-- border1-th2.kwaoo.net 1.0% 100 14.4 14.0 13.1 40.0 2.8
4.|-- 10gigabitethernet-2-2.par2.he.net 1.0% 100 13.5 17.0 13.3 26.1 3.9
5.|-- 10ge3-1.core1.par1.he.net 0.0% 100 13.7 16.5 13.6 25.9 3.4
6.|-- online.franceix.net 0.0% 100 15.7 16.5 14.9 36.9 3.0
7.|-- 2001:bc8:2::1 0.0% 100 17.1 17.1 14.8 31.9 2.7
-
Je n'avais pas vu que en IPv6 on passait par HE (Hurricane Electric) dans les deux sens.
HE propose du transit gratuit en IPv6.
Les IP ne sont pas tout a fait exacte, tu as pingé un routeur online et pas le serveur.
Voici les nom de domaine à utiliser :
- IPv4 et IPv6: intuxication.testdebit.info
- IPv4 only : ipv4.intuxication.testdebit.info
- IPv6 only : ipv6.intuxication.testdebit.info
-
Ça ne change pas grand chose :
Traceroute K-Net (Ain) => IPv4 Online : On passe par le transitaire de K-Net : Ielo (qui a un PNI avec Online)
pi@raspberrypi ~ $ mtr -rwc100 ipv4.intuxication.testdebit.info
HOST: raspberrypi Loss% Snt Last Avg Best Wrst StDev
1.|-- 192.168.1.1 0.0% 100 1.0 1.0 0.8 2.6 0.3
2.|-- border1-sgp.kwaoo.net 0.0% 100 3.9 90.8 3.9 203.2 46.6
3.|-- 172.16.121.6 0.0% 100 4.0 5.1 4.0 28.6 3.5
4.|-- cr10-10ge-2-4.ix-customers-gva1.ielo.net 1.0% 100 4.3 6.4 4.1 14.8 3.4
5.|-- 2ge-e1-3-e1-4-cr5.le9-lyon.fr.rt.ielo.net 0.0% 100 14.2 9.7 6.8 17.7 3.6
6.|-- 2ge-e1-5-e3-20-cr2.th2-prs.fr.rt.ielo.net 0.0% 100 14.1 16.7 13.9 25.1 3.4
7.|-- ge-2-3-df-cr7.iliad-prs.fr.rt.ielo.net 1.0% 100 14.5 17.2 14.3 25.2 3.5
8.|-- pni-poneytelecom.iliad-dc2.fr.rt.ielo.net 0.0% 100 15.9 16.5 14.8 31.8 2.7
9.|-- a9k2-4040.dc3.poneytelecom.eu 0.0% 100 15.0 15.6 14.9 28.1 1.4
10.|-- 45x-s44-2-1050.dc3.poneytelecom.eu 0.0% 100 16.2 16.7 14.9 24.3 2.2
11.|-- jaguar.intuxication.net 0.0% 100 14.5 15.6 14.3 27.1 2.7
Traceroute K-Net (Ain) => IPv6 Online : On passe par Hurricane Electric
pi@raspberrypi ~ $ mtr -rwc100 ipv6.intuxication.testdebit.info
HOST: raspberrypi Loss% Snt Last Avg Best Wrst StDev
1.|-- 2a03:4980:1:d::1 0.0% 100 1.2 1.1 1.0 1.5 0.1
2.|-- border1-sgp.kwaoo.net 0.0% 100 113.8 87.6 7.1 163.0 41.5
3.|-- border1-th2.kwaoo.net 0.0% 100 13.4 13.5 13.0 18.6 0.9
4.|-- 10gigabitethernet-2-2.par2.he.net 0.0% 100 24.7 19.6 13.3 87.0 8.3
5.|-- 10ge3-1.core1.par1.he.net 0.0% 100 15.9 16.8 13.6 25.5 3.0
6.|-- online.franceix.net 4.0% 100 15.5 16.1 14.8 24.3 1.6
7.|-- 2a01:e0b::ded1:beef:3e 0.0% 100 16.1 17.9 14.6 30.2 3.0
8.|-- jaguar.ipv6.intuxication.net 0.0% 100 14.3 15.1 14.1 19.6 1.0
-
Je viens de discuter avec Mickael (l'ingénieur Réseau et Sécurité chez Online) sur IRC.
Maintenant le trafic KNET <=> Online passe par France-IX dans les deux sens.
Online => K-NET :
HOST: xxxxx Loss% Snt Last Avg Best Wrst StDev
1.|-- 88-191-186-1.rev.poneytelecom.eu 0.0% 10 0.4 0.5 0.4 0.7 0.1
2.|-- 88.191.1.97 0.0% 10 0.9 0.9 0.7 1.1 0.1
3.|-- a9k1-be2.dc3.poneytelecom.eu 0.0% 10 0.9 0.9 0.7 1.2 0.1
4.|-- kwaoo.franceix.net 0.0% 10 0.7 0.8 0.7 0.9 0.1
5.|-- border1-cixp.kwaoo.net 0.0% 10 9.7 10.3 9.6 12.1 1.0
6.|-- xxxx.kwaoo.net 0.0% 10 9.7 9.7 9.6 9.8 0.0
K-NET => Online :
HOST: xxxx Loss% Snt Last Avg Best Wrst StDev
1.|-- border1-cixp.kwaoo.net 0.0% 10 0.3 1.0 0.3 3.5 1.2
2.|-- border1-th2.kwaoo.net 0.0% 10 9.3 9.4 9.3 9.5 0.1
3.|-- online.franceix.net 0.0% 10 10.2 10.5 10.2 12.9 0.8
4.|-- 88.191.1.102 0.0% 10 10.1 10.0 9.9 10.1 0.1
5.|-- xxxxxxxx 0.0% 10 9.7 9.8 9.7 10.4 0.2
-
Je confirme.
Le problème était où ?
Online => K-Net en IPv4 aujourd'hui :
$ mtr -4rwc100 k-net.fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 62.210.156.14.te-dns.org 0.0% 100 0.9 2.0 0.6 19.3 2.6
2.|-- a9k1-1049.dc3.poneytelecom.eu 0.0% 100 0.8 1.1 0.7 9.2 0.9
3.|-- kwaoo.franceix.net 0.0% 100 0.6 6.9 0.6 106.8 18.6
4.|-- border1-cixp.kwaoo.net 0.0% 100 9.8 31.1 9.5 139.8 37.9
5.|-- pop.kwaoo.net 0.0% 100 10.2 10.2 9.9 11.1 0.1
Hier : (gain 1,1ms)
$ mtr -4rwc100 k-net.Fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 62.210.156.14.te-dns.org 0.0% 100 0.7 2.4 0.6 17.6 2.8
2.|-- a9k1-1049.dc3.poneytelecom.eu 0.0% 100 2.1 1.5 0.6 15.0 2.5
3.|-- 45x-1-4080.pni.dc2.poneytelecom.eu 0.0% 100 5.0 2.4 0.8 11.9 2.3
4.|-- pni-poneytelecom-e1-5-cr7.iliad-dc2.fr.rt.ielo.net 0.0% 100 0.4 2.4 0.3 10.9 3.3
5.|-- ge-1-1-df-cr2.th2-prs.fr.rt.ielo.net 0.0% 100 4.5 3.2 0.6 11.1 3.3
6.|-- 2ge-e1-17-e1-18-cr5.le9-lyon.fr.rt.ielo.net 0.0% 100 8.3 10.4 7.7 18.2 3.5
7.|-- 2ge-e1-1-e1-2-cr10.eqx1-gnv.ch.rt.ielo.net 0.0% 100 10.4 12.4 10.4 20.9 3.1
8.|-- kwaoo.ix-customers-gva1.ielo.net 0.0% 100 11.0 43.9 10.5 286.5 56.4
9.|-- pop.kwaoo.net 0.0% 100 11.6 11.3 11.0 11.9 0.2
En IPv6 :
Online => K-Net en IPv6 aujourd'hui :
$ mtr -6rwc100 k-net.fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 2001:bc8:2::1 0.0% 100 0.6 3.0 0.6 12.4 2.7
2.|-- 2a01:e0b::ded1:beef:3d 6.0% 100 0.9 1.3 0.8 16.9 1.7
3.|-- kwaoo.franceix.net 0.0% 100 0.6 1.9 0.6 33.3 4.7
4.|-- border1-cixp.kwaoo.net 0.0% 100 14.0 49.2 9.5 1989. 235.1
5.|-- ipv6.kwaoo.net 0.0% 100 10.1 10.2 10.0 11.7 0.3
Hier : (gain 1,1ms)
$ mtr -6rwc100 k-net.Fr
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 2001:bc8:2::1 0.0% 100 3.2 2.9 0.6 12.1 2.7
2.|-- 2a01:e0b::ded1:beef:3d 7.0% 100 0.9 1.4 0.8 18.0 1.9
3.|-- he.franceix.net 0.0% 100 5.6 4.1 0.8 42.1 5.4
4.|-- kwaoo.franceix.net 0.0% 100 1.6 3.9 1.2 46.9 7.3
5.|-- border1-cixp.kwaoo.net 0.0% 100 10.7 11.6 10.3 58.3 4.9
6.|-- tickets.kwaoo.net 0.0% 100 11.2 11.3 10.6 16.9 0.8
-
Aucun problème mais Online est sur les Route-Serveur de France-IX et ne peer pas avec tout le monde.
Je crois que pour l'instant (à vérifier), Online n'a que 10G du coup ils jouent avec les communautés de France-IX pour ne peerer qu'avec ceux qui répondent avec cette policy :
A minimum of 50 Mbit/sec and maximum of 500 Mbit/sec on public exchange place.
Whois AS51706 (AS de France-IX)
remarks: 0:peer-as = Don't send route to this peer as
remarks: 51706:peer-as = Send route to this peer as
remarks: 51706:51706 = Send route to all peers
Ils ont donc joué avec la bonne communauté 51706:24904 afin de nous annoncer leurs préfixes.
Pour le sens Online => KNET ils ont dû augmenter la local-pref afin de préférer nos préfixes appris de France-IX.
-
Je confirme sur le fait que Online n'a que 10 Gb/s sur France-IX mais il ne sont pas pleins.
Enfin, c'est sage de monter doucement en puissance.
Petit test en IPv4 depuis le Maxnod, dans l'Ain, avec le réseau Adeli :
Adeli => Online :
$ mtr -4rwc100 intuxication.testdebit.info
Start: Tue Apr 8 08:53:02 2014
HOST: lafibre.info Loss% Snt Last Avg Best Wrst StDev
1.|-- portevlan.adeli.biz 0.0% 100 3.9 2.4 0.2 107.0 10.8
2.|-- online.franceix.net 0.0% 100 12.1 6.9 6.4 12.2 0.7
3.|-- 45x-s44-2-1049.dc3.poneytelecom.eu 0.0% 100 6.5 8.7 6.4 24.4 3.2
4.|-- jaguar.intuxication.net 0.0% 100 6.0 6.0 5.9 6.1 0.0
Online => Adeli :
$ mtr -4rwc100 lafibre.info
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 62.210.156.14.te-dns.org 0.0% 100 0.6 2.1 0.6 8.3 2.0
2.|-- a9k1-1049.dc3.poneytelecom.eu 0.0% 100 0.8 1.0 0.6 8.7 0.9
3.|-- adeli.franceix.net 0.0% 100 6.1 6.9 6.0 16.0 1.8
4.|-- lafibre.info 0.0% 100 6.0 6.0 5.9 6.6 0.1
Le gain sur un graphe SmokePing en IPv4 : https://lafibre.info/dns/smokeping.cgi?target=speedtest.vitry4
(https://lafibre.info/images/adeli/201404_gain_france-ix_online_adeli_ipv4.png)
En IPv6 :
Adeli => Online :
$ mtr -6rwc100 intuxication.testdebit.info
Start: Tue Apr 8 08:56:00 2014
HOST: lafibre.info Loss% Snt Last Avg Best Wrst StDev
1.|-- bgp1.adeli.biz 0.0% 100 0.4 1.5 0.2 30.0 3.5
2.|-- online.franceix.net 0.0% 100 6.8 7.0 6.5 16.1 1.0
3.|-- 2a01:e0b::ded1:beef:3e 0.0% 100 6.9 8.3 6.4 34.1 3.5
4.|-- jaguar.ipv6.intuxication.net 0.0% 100 6.0 6.0 5.9 6.8 0.0
Online => Adeli :
$ mtr -6rwc100 ipv6.lafibre.info
HOST: jaguar Loss% Snt Last Avg Best Wrst StDev
1.|-- 2001:bc8:2::1 0.0% 100 3.8 2.4 0.6 8.7 2.2
2.|-- 2a01:e0b::ded1:beef:3d 0.0% 100 1.0 1.1 0.7 3.8 0.6
3.|-- adeli.franceix.net 0.0% 100 6.1 6.7 6.0 14.8 1.6
4.|-- lafibre.info 0.0% 100 6.0 6.0 5.9 6.4 0.1
Graphe IPv6 : https://lafibre.info/dns/smokeping.cgi?target=speedtest.vitry6
(https://lafibre.info/images/adeli/201404_gain_france-ix_online_adeli_ipv6.png)
Il y a une différence non négligeable avec K-Net en terme de ping, plus de 4ms !
-
On a maintenant du trafic ayant pour origine l'AS12322 (FREE) passant par France-IX. (environ 60 Mbps au 95th)
D'après les stats flow de nos routeurs ce sont des adresses de PoneyTelecom toujours annoncées sous l'AS de FREE.
Le bloc concerné est 88.190.0.0/15, l'ancien bloc pour les anciennes gammes de serveurs Online avant migration vers le nouveau réseau (cf post d'Arnaud sur le forum d'Online (http://forum.online.net/index.php?/topic/3757-a-propos-du-réseau-comparaison-concurrence/?p=18967))
Du coup le vrai trafic de FREE vers KNET ne représente qu'environ 20~30Mbps au 95th alors que notre sortant est d'environ 180Mbps.
-
Avec tout ce nouveau trafic en peering, il va falloir bientôt upgrader le lien K-Net <=> France-IX de 1 à 10 Gb/s !
-
C'est vraiment super cette histoire, Online va enfin monter en gamme pour son réseau qui passait en majorité par le transit Level3 avant (à Londres en plus!)
-
Enfin avant, c'est exclusivement puis majoritairement du Free...
En fait, la coupure du peering entre Free et Numericable (https://lafibre.info/peering/probleme-de-peering-entre-nc-et-le-reseau-freeonlineproxad/) a été la goutte d'eau qui a fait déborder le vase.
Plus je réfléchit, plus je me dit que Rani Assaf a eu une bonne idée de couper le peering. On avait un gros hébergeur avec un mauvais réseau lié a la saturation dans le sens descendant de Free vers la majortié des routes de l'internet (saturation des transit) et on se retrouve maintenant avec un hébergeur avec un bon réseau. Il reste des choses à améliorer, notamment vers certains gros opérateurs étrangers qui sont comme Free avec un dimensionnement un peu juste des transitaires, mais vraiment rien à avoir avec la précédente situation.
Donc, merci Free pour la dégradation volontaire de ton réseau qui a fait partir Online...
-
Free je ne l'aime pas et je ne l'aimerai jamais, tout au rabais. Ils s'en foutent des saturations on dirait, jamais rien n'a changé!
-
Ils ne s'en foutent pas, ils les provoquent !
-
Online est sur Equinix IX Paris : https://twitter.com/EIXParis/status/468334009052045312
Et un PNI avec Google up : https://twitter.com/mmarcha/status/468283513448706048
(faudra ptet renommer le sujet, ou alors en créer un autre par contre)