Bonjour LaFibre !
Après le recâblage de la baie de CBO le jour précédent, nous avons attaqué samedi dernier la baie de dc2scale !
Au menu, relativement la même chose :
- Des câbles de fibre optique Uniboot pour faciliter le câblage
- Des beaux câbles d'alim rouge et bleu
- Des câbles RJ45 AWG 28 tout fins
- Du 40G
- De l'Arista !!
On a commencé aux alentours de 21h.
On a d'abord commencé par trier et inventorier tous les câbles qu'on avait en stock, notamment ceux de l'intervention d'hier soir.
Avis aux intéressés, ils sont à vendre en lot si vous en voulez :p
Petit changement par rapport à l'autre intervention, on a migré quelques services à Lyon avant l'intervention, comme par exemple :
- le support
- la télé
- la compta
dans le but de minimiser l'impact et/ou de récupérer d'éventuelles infos qu'on aurait loupé.
Cette baie est la plus ancienne de la "nouvelle" infra, c'est le premier POP à n'avoir jamais eu de Mikrotik et à avoir toujours été routé proprement :p
Mais du coup, la stack était aussi la plus ancienne de l'infra, il était donc temps de faire le ménage !
Comme d'habitude, un petit état de la baie avant :
Comme vous pouvez le voir, c'est un sacré bazar. On a donc décidé de faire un grand ménage de printemps !
On y voit donc coté réseau :
- Un Brocade CES2024C qui gérait le routage du POP
- Un Dell N4032 qui gère l'étage de switching/agrégation
- Un RB4011 pour les quelques tunnels qu'on a sur ce POP
On a d'abord retiré tout le matériel des abonnés en Housing
Puis le réseau
Pendant que Pierre triait et inventoriait les câbles
Et voilà la baie toute vide !
On a reculé les montants de la baie pour laisser un peu d'espace à nos QSFP :
Pour vérifier qu'on avait assez reculé les montants, on a remis en rack l'Arista en prenant les optiques les plus longues qu'on allait mettre en place et en les mettant tout au bout, là où la porte tapait dessus avant :
Pendant ce temps, votre serviteur
qui n'en fout jamais une s'occupait de reconfigurer le réseau :
Réseau tout juste réinstallé dans la baie :
Nicolas voyant qu'il était déjà 1h30 du matin et qu'on avait encore racké aucun serveur :
Bon, on a aussi réalisé a ce moment là qu'on avait une optique QSFP HS, c'est pas de bol, mais bon, on avait prévu 2x40G entre le routeur et le switch, ça sera à 40G jusqu'à ce qu'on fasse réparer celle là :
On a ensuite passé les fibres qui vont aux serveurs, toujours en Uniboot, c'est tellement plus facile à câbler !
Pendant ce temps là, Nico s'occupait de remettre de l'électricité dans les serveurs :
Et moi j'étais toujours sur mon réseau, en train de migrer la config Brocade vers Arista :
et Pierre continuait son inventaire de câbles, ça commence à être joli
2h39 : Message d'un abonné sur Télégram : "Ma VM semble down, c'est normal ?"
Réponse du support : C'est normal, elle est _ici_ ! :
3h du matin, on commence a tous être bien fatigués, le réseau est quasiment UP, le câblage suit son cours, les serveurs des abonnés ont tous été réinstallés.
Seuls restent nos hyperviseurs, on a besoin de l'espace pour passer proprement les câbles de l'avant à l'arrière de la baie, ils seront réinstallés à la fin.
4h du matin, le câblage avance bien, Nico fait un taf de dingue pendant que François et Pierre s'occupent de remonter l'infra système et moi de reconfigurer le réseau d'out-of-band/management.
Pour le rendre plus efficace, nous avons décidé à l'unanimité d'enfermer Nico dans la baie jusqu'à ce que le câblage soit terminé :
5h du matin : On a fini la baie ! Il nous manquait quelques câbles pour le management donc on a du tricher en mettant des câbles de couleur similaire, mais voici le résultat :
On a ensuite rangé le matériel et on est rentré à la maison une heure plus tard.
Bilan, 9h d'intervention. On a pas trop compris pourquoi ça a mis autant de temps, mais on s'est bien marré, c'est l'essentiel
On a maintenant sur ce POP :
- 1 Wave vers TH2 (via FiberWay/Sipartech)
- Un L2L 40G vers DC2 (via AppliWave)
- Un L2L 10G vers CBO (via AppliWave)
- Un transit 40G fia FiberWay / AS49434
Encore bravo à mes équipes et un énorme merci à Nico pour ce recâblage, c'est un vrai don chez lui !
@+
Hugues pour l'équipe de MilkyWan !