La Fibre
Fournisseurs d'accès à Internet fixe en France métropolitaine => Opérateurs grand public alternatifs => 
MilkyWan => Discussion démarrée par: Hugues le 08 octobre 2022 à 01:03:25
-
Salut salut !
Cet après midi avec les copains, on a recâblé la baie de CBO ! Au menu :
- Des câbles de fibre optique Uniboot pour faciliter le câblage
- Des beaux câbles d'alim rouge et bleu
- Des câbles RJ45 AWG 28 tout fins
- Du 40G
- De l'Arista !!
On a commencé aux alentours de 15h. On s'est organisé de la sorte :
- Pierre s'occupait de communiquer sur notre page de statut l'état des services
- Je m'occupais de poster des photos régulièrement sur le canal télégram réservé aux abonnés
- François s'occupait d'étiqueter le matériel
Voici l'état initial de la baie :
(https://pix.milkywan.fr/XIKzZMgJ.jpeg)
(https://pix.milkywan.fr/G0gtd0XH.jpeg)
Il faut savoir qu'on avait câblé quelques trucs "à l'arrache" en sachant pertinemment qu'on allait recâbler cette baie.
Ça a pas mal tardé à cause de FS qui a mis 3 mois à nous livrer les câbles d'alim...
Vous pouvez aussi admirer le beau Brocade CES2024 qui fera ses adieux au réseau ce soir. en effet, outre son manque de ports 10G, le fait qu'il ne supporte pas VxLAN/EVPN fait qu'il n'a plus sa place sur notre infra.
La première étape a été de repérer tous les crossconnect et les ports coté client pour ne pas faire d'erreur au recâblage.
(https://pix.milkywan.fr/FCFix3eh.jpeg)
La seconde étape a été d'enlever les équipements en laissant les câbles dans la baie :
(https://pix.milkywan.fr/xmQOktk8.jpeg)
(https://pix.milkywan.fr/L1tItfYl.jpeg)
(https://pix.milkywan.fr/ba6FeL7M.jpeg)
Ensuite, on a viré le gros paquet de câbles puisqu'ils avaient quasiment tous vocation à être changés, pendant ce temps là, François décalait les montants de la baie pour laisser plus d'espace à nos QSFP :
(https://pix.milkywan.fr/rYC6a141.jpeg)
Pendant ce temps là, de mon côté, je préparais un plan de la nouvelle baie, la configuration du nouveau routeur, j'échangeais avec AppliWave pour voir quels L2L arrivaient sur quelle interco avec eux...
Et voilà la baie toute vide ! :)
(https://pix.milkywan.fr/c6IpECkf.jpeg)
On a donc ensuite re-racké le matériel, en suivant la logique suivante :
- Matos réseau
- Matos système
- Routeurs des abonnés
- Serveurs des abonnés
(https://pix.milkywan.fr/YeVwJmt6.jpeg)
Une fois le matériel réseau racké, j'ai câblé en volant le réseau pour reconfigurer le backbone sur les nouveaux liens
Pendant ce temps là, mes collègues rackaient le reste des serveurs et le matériel des abonnés :
(https://pix.milkywan.fr/0YM7E8Gs.jpeg)
Ensuite, place à l'électricité :
(https://pix.milkywan.fr/t4XLgI4O.jpeg)
Puis le management :
(https://pix.milkywan.fr/3M0H4qm8.jpeg)
Puis le réseau vers les serveurs et les abonnés, je câblais d'abord en volant, et ensuite François repassait la fibre au propre, ça me permettait de valider le fonctionnement du réseau.
(https://pix.milkywan.fr/EzHcxKxv.jpeg)
Et voilà le final !
(https://pix.milkywan.fr/4NEG4dNP.jpeg)
(https://pix.milkywan.fr/SoVEMjte.jpeg)
Du coup ça donne 100G d'intercos, réparties comme ceci :
- 40G vers DC2+Dc2scale
- 40G vers TH2
- 10G de collecte FTTH/xDSL Appliwave
- 10G de collecte FTTH/xDSL ielo
Coté serveurs, le speedtest passera bientôt à 40G, on a déjà un abonné en 40G également
Les hyperviseurs sont tous les trois en 2x10G
Bref, on y a passé un sacré bout de temps (7h) dont 4h de coupure franche, mais le résultat est là, la baie est propre pour quelques années maintenant :)
N'hésitez pas à me poser vos questions sur ce que vous voyez :)
@+
-
gg
-
Perso je vois deux choses.
La première c'est qu'il existe visiblement des polos MilkyWan. Ou est la boutique pour les commander et pour montrer son appartenance au clan MW ?
La deuxième c'est que le travail des enfants, et encore plus la nuit dans notre pays est interdit. Qui a donc emmené son fils avec lui pour cette intervention ;D ;D ;D ? On voit sur des photos un gosse avec un polo bleu qui s'amuse avec les câbles.
Sinon beau boulot ;)
-
La première c'est qu'il existe visiblement des polos MilkyWan. Ou est la boutique pour les commander et pour montrer son appartenance au clan MW ?
Ils sont réservés à l'équipe (et ont couté plus de 50€ pièce ^^)
La deuxième c'est que le travail des enfants, et encore plus la nuit dans notre pays est interdit.
Mouais... On a fait ça l'après midi, c'est écrit hein :)
-
C’est moi ou y’a 2x la même photo d’une paire de mains dans les fibres jaunes? ;D
-
Corrigé
-
Mouais... On a fait ça l'après midi, c'est écrit hein :)
Mince j'ai regardé a quelle heure tu as posté, et j'en ai déduis que vous aviez fait ça la nuit. Alors qu'en effet c'est écrit début à 15h :-X
-
Un enfant devrait quand même dormir à cette heure-ci! ;)
Ou à la rigueur consommer du Netflix pour faire gagner des sous à Reed Hastings.
https://trends.levif.be/economie/magazine/netflix-la-bataille-pour-notre-sommeil-et-la-societe-decadente/article-normal-1452223.html?cookie_check=1665219858
En tout cas, merci pour le reportage et très probablement à bientôt sur MW! :)
-
Ce soir on recâble la baie de dc2scale :P
-
Salut,
Je suppose que les couleurs de câble d'alimentation sont pour différencier le no break de la partie normale ?
Autre chose, quand tu parles d'un abonné en 40G, c'est un abo FTTH ? :D
-
Merci pour les photos (étant nouvel abonné raccordé en FTTH/collecte Ielo depuis hier je confirme que ça marche nickel :) )
Salut,
Je suppose que les couleurs de câble d'alimentation sont pour différencier le no break de la partie normale ?
Une chaîne électrique / une couleur à mon avis, même si les deux chaînes sont ondulées et secourues.
C'est ce que ma boite fait aussi, avec les mêmes couleurs bleu/rouge.
-
D'après les couleurs, il y a la phase d'un coté et le neutre de l'autre.
C'est juste pour voir les ceuces qui suivent...
-
Elle est bien bonne celle là :D
-
D'après les couleurs, il y a la phase d'un coté et le neutre de l'autre.
C'est juste pour voir les ceuces qui suivent...
Et la terre en jaune ;) :D :D :D :D :D
-
Et la terre en jaune ;) :D :D :D :D :D
ah ben non, la terre c'est marron. Et salissant ;D
-
Non, c'est vert-jaune.
D'ailleurs, je n'ai pas vu sur les photos, de renvoi équipotentiel vert-jaune. C'est discret mais il doit bien y avoir au moins un.
-
D'après les couleurs, il y a la phase d'un coté et le neutre de l'autre.
C'est juste pour voir les ceuces qui suivent...
Nope, chaque connecteur C13 à son neutre, sa phase et sa terre
Ici, on a juste deux alimentations différentes, séparés par des câbles de couleur (parce que c'est sympa)
Edit: bien joué pour le blanc sur fond blanc :D
-
Salut Hugues,
Sur la photo suivante, on voit 3 routeurs "Cust MWCxx" reliés chacun avec un SFP+ 10Gb/s au reste du réseau.
1 Brocade et 2 MikroTik.
(https://pix.milkywan.fr/4NEG4dNP.jpeg)
Je suis surpris, car vos offres de housing indiquent 100Mb/s de trafic livré sur une interface 1Gb/s.
A moins que les SFP+ ne soient volontairement bridés/utilisés à 1Gb/s?
Leon.
-
Tu arrives à repérer des SFP+ à l'oeil ? chapeau :p
Plus sérieusement, on sait être arrangeant, ça dépend l'usage, le projet, etc.
Pour être totalement transparent, on a arrêté de dire que c'était livré sur un port 10G à cause d'une personne très pénible qui nous a bien pourri parce qu'il n'avait que 2-3Gbit/s sur son port (ça datait de l'époque ou notre réseau était routé en mikrotik) et qu'il s'attendait à plus car livré sur un port 10G puis a fini par résilier 1 mois après en disant qu'il était trop déçu, on a perdu beaucoup de temps sur ce dossier. Depuis ce jour là, c'est livraison sur un port 1G, sauf exceptions.
Et le Brocade est en 1G lui par exemple
-
Tu arrives à repérer des SFP+ à l'oeil ? chapeau :p
Bah oui, facile, vu que la LED "10Gb" du Mikrotik CCR2004 est allumée, c'est qu'il est synchronisé à 10Gb.
Leon.
-
Je continue avec mes questions (désolé).
Initialement, le site d'AppliWave Croissy-Beaubourg n'était pas prévu pour être un vrai datacenter.
Notamment, il n'y avait pas de groupe électrogène.
Est-ce que ça a changé récemment?
La question se pose principalement cette année vu le risque de coupures cet hiver.
Côté équipements, je comprends que vous terminez les tunnels des clients sur le petit routeur Mikrotik (RB4011iGS?).
Vous terminez tous les types de tunnels sur cet unique routeur? En terme de débit, et de nombre de sessions ouvertes en parallèle, il arrive à tenir la cadence?
Leon.
-
Est-ce que ça a changé récemment?
Nop, et je n'y crois pas trop aux coupures :p
en vrai on a de quoi remonter toute la production ailleurs rapidement :
- La porte ielo est livrée dans un autre datacenter (Sungard Lognes), appliwave nous la livre à CBO mais peut la livrer aussi à Lyon avec 3 lignes de conf dans un routeur
- la porte appliwave est redondée à lyon
- les VM sont backup toutes les nuits à Lyon et peuvent être remontées là bas sans souci
Le seul truc SPOF c'est le housing, et globalement personne n'héberge rien de critique là bas
Côté équipements, je comprends que vous terminez les tunnels des clients sur le petit routeur Mikrotik (RB4011iGS?).
Vous terminez tous les types de tunnels sur cet unique routeur? En terme de débit, et de nombre de sessions ouvertes en parallèle, il arrive à tenir la cadence?
Petit routeur ? faut le dire vite, il est en 10G et a quand même pas mal de patate sous le pied :p
Le nombre de sessions n'a aucune importance vu qu'il ne fait pas de NAT
Mais pour te répondre, il est en train de faire ses adieux, tout va passer par l'ASR à terme, comme à Lyon.
-
Petit routeur ? faut le dire vite, il est en 10G et a quand même pas mal de patate sous le pied :p
Le nombre de sessions n'a aucune importance vu qu'il ne fait pas de NAT
Je voulais parler de nombre de sessions VPN, et pas de nombre de connexions TCP/UDP. J'aurais du le préciser, désolé.
Leon.
-
Non il doit avoir une vingtaine de tunnels GRE et autant de L2TP, donc clairement il en a encore sous le coude
-
Ça donne envie, beau boulot ;)