La Fibre

Hébergeurs et opérateurs pro / entreprises => Hébergeurs et opérateurs pro / entreprises => NetSyst NetSyst => Discussion démarrée par: Channels le 15 décembre 2019 à 12:52:52

Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 15 décembre 2019 à 12:52:52
Sommaire :
- Présentation NetSyst (https://lafibre.info/netsyst/presentation-netsyst/)
- Présentation de #DataGarage (https://lafibre.info/netsyst/datagarage/)
- Installation des fibres (https://lafibre.info/netsyst/installation-fibre-40957/)
- Installation électrique et du groupe électrogène diesel (https://lafibre.info/netsyst/installation-electrique/)
- Installation de la Climatisation (https://lafibre.info/netsyst/installation-climatisation/)
- Remplacement du Cisco Catalyst 6500 par un Nexus (https://lafibre.info/netsyst/remplacement-du-cisco-catalyst-6500/)
- Installation nouveau cœur de réseau: Cisco ASR 9006
- #DataGarage chez les parents (https://lafibre.info/netsyst/datagaragechezparents/)
- Idée/Projet de devenir FAI sur le RIP SIEA RESO-Liain (https://lafibre.info/netsyst/ideeprojet-de-devenir-fai-sur-le-rip-siea-reso-liain/)




Hello !
Le Père Noël n'a livré un gros cadeau cet année !!
Le "paquet" fait 115kg


(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_03.jpg)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_05.jpg)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_06.jpg)
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 12:54:43
Il s’agit d’un Cisco ASR 9006 !

C’est un gros joujou, mais cela me permettra, tout d’abord, de mieux appréhender IOS XR, puis surtout, ça remplacera les deux Cisco ASR 1002 qui sont des « brouettes » ©Clément, et qui rament pendant au moins 10-15 minutes chaque fois que je veux jouer avec BGP.  :P

Une autre raison plus utile a la migration est que SHD nous propose une seconde interco BGP avec un autre routeur a eux pour plus de résilience/redondance, et nous envisageons de prendre un autre transitaire a SHD et/ou Maxnod d’ici quelques temps.  8)
Les ASR 1002 étant « limité » après 2 fulls, on ne pouvait donc pas prendre une interco supplémentaire, quelque sois le transitaire.

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_07.jpg)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_08.jpg)

Il s’agit d’un Cisco ASR 9006, qui comprend :
- 1x ASR-9006-AC-V2= ASR 9006 AC Chassis with PEM Version 2
- 2x ASR-9006-FAN-V2 ASR-9006 Fan Tray Version 2
- 2x PWR-3KW-AC-V2 3KW AC Power Module Version 2
- 2x A9K-RSP440-TR Cisco ASR 9000 Route Switch Processor A9K-RSP440-TR ASR9K Route Switch Processor with 440G/slot Fabric and 6GB
- 1x A9K-24X10GE-TR 24-port 10GE, Packet Transport Optimized L
- 1x A9K-MOD80-TR A9K-MOD80-TR Cisco ASR 9000 Ethernet Linecard dans laquelle on met jusqu’à deux cartes MPA
- 1x A9K-MPA-20X1GE Cisco ASR 9000 Modular Port Adapter

J’ai préféré un châssis de 9006 plutôt évolutif et compatible avec les trois générations de carte Cisco (Trident, Typhoon et Tomahawk) plutôt qu’un 9001 légèrement moins cher mais surtout pas évolutif.
Très belle doc de Cisco à ce sujet : https://www.ciscolive.com/c/dam/r/ciscolive/emea/docs/2016/pdf/BRKARC-2003.pdf (https://www.ciscolive.com/c/dam/r/ciscolive/emea/docs/2016/pdf/BRKARC-2003.pdf)
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 12:54:57
Et puis, maintenant que j'ai ouvert le colis, on va pas le laisser trainer dans sa boite, hein ?    ???

On rack le chassis :
(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_09.jpg)

On met les linescards et la sauce :
(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_10.jpg)

Ca rend pas mal  8)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_11.jpg)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_12.jpg)
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 12:57:34
On ne va pas s'arrêter en si bon chemin, et si on l'allumait ?  :P

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_13.jpg)

Ca boot !

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_14.jpg)
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 12:57:43
Je commence tout doucement dessus, config de base, interfaces, vrrp, ospf, bgp, ... puis le premier lien vers SHD à commencé à être migré dessus. (La weathermap est à jour, mais un peu vide pour le moment)

(https://lafibre.info/images/pro/201912_netsyst_cisco_asr9000_01.jpg)

Je ne sais pas encore ce que je vais faire des ASR 1002…  :-\
Je pensais m’en servir comme routeur de bordure pour avoir un réseau « un peu complexe » et pouvoir mieux apprendre ?
Peut être le dédié a la collecte FTTH du SIEA que nous allons avoir ?
Qu’en pensez-vous ?

Titre: Installation nouveau coeur de réseau
Posté par: Hugues le 15 décembre 2019 à 13:00:01
Les ASR 1002 étant « limité » après 2 fulls, on ne pouvait donc pas prendre une interco supplémentaire, quelque sois le transitaire.
Tu aurais pu sans souci, la limite est sur les routes actives, tu peux avoir 4 ou 5 full sur un 1002.
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 13:02:29
Tu aurais pu sans souci, la limite est sur les routes actives, tu peux avoir 4 ou 5 full sur un 1002.
Ah bah j'ai essayé de tout regrouper sur l'un, SHD + Maxnod + Toi, il reset la dernière session BGP pour "out of memory"
000104: *Nov 30 14:14:01: %BGP-4-BGP_OUT_OF_MEMORY: BGP resetting because of memory exhaustion.

(Je n'ai plus les logs complets, mais ce qui est sûr, c'est que j'ai beaucoup de mal à avoir la main dessus, et les BGP flappais)
Titre: Installation nouveau coeur de réseau
Posté par: Hugues le 15 décembre 2019 à 13:05:39
Chez Grifon, ils ont un 1001 avec 2 fullview + une en iBGP, et il reste encore de la RAM, donc étrange étrange...
Titre: Installation nouveau coeur de réseau
Posté par: Channels le 15 décembre 2019 à 13:08:58
Chez Grifon, ils ont un 1001 avec 2 fullview + une en iBGP, et il reste encore de la RAM, donc étrange étrange...
J'avais moins de lag sur le 1001 bizarrement a chaque modif par rapport au 1002, sauf qu'il n'a pas de port 10G (ou 1 avec MPA)
Titre: Installation nouveau coeur de réseau
Posté par: Leon le 15 décembre 2019 à 13:24:13
Ouch! Impressionnant.
Un routeur de 400Gbps dans un garage d'un particulier, je n'avais jamais vu ça encore.
On aurait pu appeler ça "the terabit project".

Il ne reste plus qu'à faire des liens  40 ou 100Gbps avec l'extérieur pour alimenter la bête!  ;)

Leon.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Hugues le 15 décembre 2019 à 13:26:48
Oui après l'A9K c'est assez modulaire, en l'occurence, il coute à peu près aussi cher qu'un 9001, mais il consomme beaucoup plus... :)

Là, je pense que son chassis est à 13-15k, si tu veux faire du 100G, tu es plus vers 40-50k avec les optiques.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Leon le 15 décembre 2019 à 18:07:55
Je viens de voir dans le billet sur l'installation fibre, que tu n'avais que des liens de transit à 1Gbps.
Du coup, il doit un peu s'ennuyer ton routeur de 400Gbps, avec 3 ou 4 liens 1Gbps.
Au moins il y a de la marge pour la suite.
Tu envisages de faire grossir les transit? De prendre du peering? D'étendre ton réseaux dans d'autres datacenters où les interconnexions sont moins chères?

Leon.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 17 décembre 2019 à 21:21:58
C'est pas tant la capacité de forward qui m'interesse, mais plutot le nombre de transits/fullview que le routeur accepte et son temps de convergence a chaque fois que je fais joujou.
Faire grossir les transits: je ne pense pas, on est déja a moins de 200mb/sec au 95th tout confondu,
Par contre, etendre vers d'autres transitaires ou vers des peerings/GIX, pourquoi pas.

Pour l'interconnexions dans d'autres DC, je n'ai pas d'autre choix que de repartir depuis SHD ou Maxnod.
Repartir de ces DC, c'est un peu la porte ouverte vers tout.
il n'y a pas d'autres DC Aindinois a proximité, peut etre OneSystem qui est a Miribel mais je sais pas si ils font du housing/transits et si ils sont point de terminaison de FON SIEA.
J'ai cru comprendre de la part du SIEA que mon PBO etait complet, et qu'une troisieme FON impliquait un réaménagement du reseau de leurs part.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Leon le 18 décembre 2019 à 18:52:46
C'est pas tant la capacité de forward qui m'interesse, mais plutot le nombre de transits/fullview que le routeur accepte et son temps de convergence a chaque fois que je fais joujou.
Si tu n'as pas besoin de gros débit, pourquoi avoir pris un routeur de très grosse capacité qui est spécialisé dans multi-100Gbps? Ces routeurs ont des cartes très chères, remplies d'ASIC permettant de faire du routage 100Gb/s. Et ça, tu n'en n'as apparemment pas besoin du tout.

Tu as un routeur capable de 400Gbps, et tu n'en n'utiliseras jamais que quelques Gbps grand maximum. Je n'avais jamais vu un sur-dimensionnement d'un facteur 100 comme ça!

Attention, je ne suis pas spécialiste, je vais peut-être dire des conneries:
Si tu veux plein de "full view BGP", et des convergences BGP rapides, il faut surtout un "route processeur" puissant, avec beaucoup de RAM.
Un Cisco ASR 1004 avec un route processor RP2, avec un CPU très correct, jusqu'à 16Go de RAM, ça n'aurait pas été plus judicieux?
Bien plus performant que tes anciens ASR 1001 et 1002 en terme de calcul/convergence de route à priori.
En restant dans du Cisco, vu que c'était ta contrainte. 
Donc à priori performant en capacité de calcul/convergence de route, mais avec des capacités de forwarding limitées à quelques dizaines de Gbps.
Et surtout beaucoup moins cher (2 à 3 fois moins cher?), et plus économe en énergie.

Leon.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: vivien le 18 décembre 2019 à 20:09:34
C'est vrai qu'il y a les deux types de routeurs.

Chez mon précédent employeur, il y avait les routeurs Cisco CRS, capable de gérer des centaines de Tb/s (routeurs équipés uniquement de ports 100 Gb/s avec une concentration assez incroyable), mais pas capable de faire beaucoup de chose sur le trafic et des routeurs Alcatel-Lucent (Nokia depuis) qui sont en mesure de gérer des opérations avancées. Ce sont eux qui terminent par exemple les connexions des clients, mais ils seraient en mesure de faire bien plus. Par exemple il reçois deux flux multicast identique de deux sources et est capable de choisir dynamiquement le meilleur pour l'envoyer pour ses clients.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Hugues le 18 décembre 2019 à 22:16:27
@Leon, en termes de conso, entre un 1004 et un 9006, t'es assez proche, et c'est ce qui compte au final :)
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 18 décembre 2019 à 22:19:18
@Leon, en termes de conso, entre un 1004 et un 9006, t'es assez proche, et c'est ce qui compte au final :)
Et puis 9k, c'est un peu plus l'avenir que 1k non ?
Et puis 9k, c'est apprendre XR, et XR, c'est l'avenir non ?
 ;D ;D
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Hugues le 18 décembre 2019 à 22:21:20
Bof, non, pas vraiment, XR ne remplace pas XE, il le complète sur les très gros routeurs.

Et les 1000 sont quand même plus polyvalents que les 9000, même si je préfère ces derniers :)
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 18 décembre 2019 à 22:23:56
Bof, non, pas vraiment, XR ne remplace pas XE, il le complète sur les très gros routeurs.

Et les 1000 sont quand même plus polyvalents que les 9000, même si je préfère ces derniers :)
Ah ca, je te confirme ...
RP/0/RSP0/CPU0:core1(config)#interface GigabitEthernet 0/0/0/0
RP/0/RSP0/CPU0:core1(config-if)#ipv4 address dhcp?
                                             ^
% Invalid input detected at '^' marker.
RP/0/RSP0/CPU0:core1(config-if)#ipv4 address dhcp
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 21 décembre 2019 à 18:23:30
Avec les deux liens FON en prod dessus :
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 29 décembre 2019 à 01:02:05
Hello
Un petit LG (qui sert pas a grand chose mais bon, c'est toujours cool d'en avoir un et de savoir l'installer/le maintenir)
=> http://bird.as209097.net/ (http://bird.as209097.net/)
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Nh3xus le 29 décembre 2019 à 01:04:52
Salut,

Le LG ne fonctionne pas depuis Bytel.
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 29 décembre 2019 à 01:06:24
Théoriquement corrigé.
Port non ouvert sur le firewall :D
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: alain_p le 29 décembre 2019 à 12:13:51
Au fait, d'après la couleur, tu utilises des jarretières multimode sur ton Cisco 9006 ? C'est le prix des SFP+ Cisco monomode qui est dissuasif (et je comprend bien, si tu n'utilises pas des modules sans marque) ?
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 29 décembre 2019 à 12:24:06
Au fait, d'après la couleur, tu utilises des jarretières multimode sur ton Cisco 9006 ? C'est le prix des SFP+ Cisco monomode qui est dissuasif (et je comprend bien, si tu n'utilises pas des modules sans marque) ?
Je prend tout chez FS.COM (Jarretieres & optiques) pour le 10G et pour le 1G, j'ai un gros gros stock de recup.
En MMF 10G, ca reste moins chers a l'unité et vu les longueurs (300m max pour du 10G MMF) c'est largement bon.
https://www.fs.com/fr/specials/10g-sfp-series-fiber-optic-transceivers-49.html (https://www.fs.com/fr/specials/10g-sfp-series-fiber-optic-transceivers-49.html)
Je suis pas fan du SMF pour des longueurs aussi courtes.
(Par contre, j'aurais pu mettre des DAC a 30 balles, mais j'aime pas du tout ces trucs là.
https://www.fs.com/fr/products/39292.html (https://www.fs.com/fr/products/39292.html)



Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: vivien le 29 décembre 2019 à 17:45:46
Par contre, j'aurais pu mettre des DAC a 30 balles, mais j'aime pas du tout ces trucs là.

Pourquoi ?

C'est pas cher et cela permet une latence plus faible (de quelques micro secondes) que la fibre, non ?
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Leon le 30 décembre 2019 à 09:09:15
Avec les deux liens FON en prod dessus :
Donc si on essaye de recenser toutes les connexions sur ce big routeur, j'en compte 8:
* 1Gb/s fibre orange vers l'ONT K-Net-SIEA
* 2x 10Gbps bidi monomode vers les 2 datacenter, via les 2 fibres noires
* 2x 10Gbps sans doute vers ton switch 10Gbps
* 3x 10Gbps sans doute vers les 3 routeurs ASR100x. Ces liaisons sont devenues inutiles.

J'ai bon?

Leon

(https://lafibre.info/index.php?action=dlattach;topic=41088.0;attach=76900;image)
Titre: Installation nouveau cœur de réseau: Cisco ASR 9006
Posté par: Channels le 30 décembre 2019 à 15:41:56
Donc si on essaye de recenser toutes les connexions sur ce big routeur, j'en compte 8:
* 1Gb/s fibre orange vers l'ONT K-Net-SIEA
* 2x 10Gbps bidi monomode vers les 2 datacenter, via les 2 fibres noires
* 2x 10Gbps sans doute vers ton switch 10Gbps
* 3x 10Gbps sans doute vers les 3 routeurs ASR100x. Ces liaisons sont devenues inutiles.

J'ai bon?

Leon

Il y a eu quelques changements depuis.

* 1Gb/s fibre orange vers l'ONT K-Net-SIEA = oui, va devenir 1000Base-TX vers Livebox a réception de celle ci.
* 2x 10Gbps bidi monomode vers les 2 datacenter, via les 2 fibres noires = Il y en a une de repassé sur un 1002, pour faire joujou
* 2x 10Gbps sans doute vers ton switch 10Gbps = Oui en LACP
* 3x 10Gbps sans doute vers les 3 routeurs ASR100x. Ces liaisons sont devenues inutiles. = Oui, Pas tant inutile que ca, ca me permet de jouer et de découvrir d'autres protos de routage.

Ne pas hésiter à aller voire la Weathermap pour voir les liens physiques, je bricole tout le temps, mais elle est systématiquement a jour.