Auteur Sujet: MilkyWan - Photos des POP  (Lu 9665 fois)

0 Membres et 1 Invité sur ce sujet

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 11 622
  • Lyon (69) / St-Bernard (01)
    • Twitter
MilkyWan - Photos des POP
« le: 10 avril 2021 à 14:49:12 »
Hello !

Comme je sais que vous adorez les photos de matos, je vais partager quelques photos de nos différents POP prises cette semaine pendant notre grande tournée d'inventaire :)


1ère partie : les POP Réseau
Les POP réseau sont des Datacenter ou nous allons chercher de la connectivité, mais ou nous n'hébergeons pas (à une exception près) de serveurs.
Auparavant Mikrotik, notre nouveau Backbone est majoritairement composé d'Arista 7050. D'excellents petits routeurs, qui, s'il ne tiennent pas une fullview IPv4, tiennent la full v6 et convergent super vite, le tout en ayant une communation hardware, donc une latence et un packetloss incomparables à ce qu'on avait avant :)
Nous avons aussi du Brocade et du Juniper en Edge.

Scaleway DC2 :

- Un petit Arista 7050SX d'Edge avec une interco 10G avec Appliwave, un transit 10G avec Appliwave, une wave DWDM 10G vers TH2, un port FranceIX, et dans le futur, des waves vers DC2/CBO :)
- Un vieil R610, le premier serveur de MilkyWan, toujours vaillant, 6*512Go SSD et 96Go de RAM

Telehouse 2 :

Comme à DC2, un Arista 7050SX d'Edge, avec une interco 40G avec Appliwave, un transit 40G Appliwave, une wave 10G DWDM vers DC2Scale, une wave 10G DWDM vers DC2, et tout plein de transits/peerings/custs
Rien de plus, l'hébergement à TH2 coute déjà assez cher :D

SFR Venissieux :

- Un Cisco ASR1002-ESP10 avec un 10G vers le backbone, il sert à la collecte des abonnés FTTH et aux tunnels L2TP/GRE livrés à Lyon
- Un Arista 7050SX d'Edge, avec port MXP (3x40G) splitté en 40G VxLAN Appliwave et en 40G de transit Appliwave, un port 10G LyonIX qui transporte aussi le VLAN vers Maxnod et le VLAN vers HosTELyon :)

CIV Lille :

- Un Juniper MX80, avec un port 10G vers Appliwave et des VLAN vers TH2/DC2/LYN et un port 10G vers LillIX ! Le but de ce routeur est pour l'instant simplement de collecter LillIX en 10G, on en fera peut-être plus avec un jour :)


Cogent Rennes :

Je n'ai qu'une vieille photo, c'est maintenant un CCR1009 avec 10G vers BreizhIX et le VLAN vers Paris via Quantic, et 1G vers Grifon :)

Toulouse Cogent

Un Brocade CER2024 avec 2x10G, un vers Appliwave qui nous transporte vers DC2/VNX et un vers FranceIX Toulouse !

Maxnod Saint-Trivier :

Un ASR1001 qui collecte les abonnés du coin, notamment en FTTH et un Nexus 3064 48x10G qui sert d'agrégation.

Voilà pour les POP Réseau/Edge, on va passer aux POP Sys !

2eme partie : les POP Système

DISCLAIMER : Ces POP sont toujours en cours d'intégration, on va refaire tout le câblage de zéro dans les prochaines semaines, avec des fibres Uniboot, des cables Ethernet fins et colorés, et des cables électriques Rouges/Bleus

Les POP système sont des POP ou nous n'avons pas vocation à avoir d'intercos transit/peering, ils n'ont donc pas la fullview BGP, seulement les routes internes. Nous avons donc pu mettre en prod du matos un peu plus sympa, mais avec une limite en nombre de routes qui ne permettrait pas de les utiliser en Fullview.

DC2Scale - Vélizy

- Un Brocade CES2024 4x10G qui route tout le POP
- Un Dell N4032f avec la carte 2x40G qui gère la partie Switching, avec 40G vers Appliwave (et ensuite DC2), 10G vers CBO (pour l'instant en L2, demain en Wave), 40G vers Fiberway, et 10G vers TH2 en Wave
Ensuite pour l'hébergement :
- Un filer Lenovo RD650 avec 8x4To
- Deux hyperviseurs HP dl380p G8 avec 256Go de RAM chacun
Et ensuite des équipements perso/clients


AppliWave - CBO

- Un Brocade CES2024 4x10G qui route tout le POP
- Un Cisco 4500x (clairement sous utilisé) qui s'occupe du switching, avec 1x10G vers Appliwave, et des VLAN vers TH2, DC2 et D2S (à terme ça sera 3x10G en Wave)
- Les mêmes G8 qu'a DC2Scale mais cette fois avec 8x1To de SSD par machine, les 2 du bas ne sont pas encore installées, on attend de remplir la première
- Un ASR1002-F qui servira de LNS pour les offres FTTH et xDSL (ça arrive très bientôt)
- Et des équipements clients :)


HosTELyon - Lyon 7

Notre tout dernier POP, et celui qui est le plus propre, il héberge une bonne partie de notre infra interne, ainsi que les VM des abonnés qui veulent être dans la région Lyonnaise.
Coté matos :
- Un Arista 7050QX-32S avec 32x40G + 4x10G, interconnecté en 2x10G DWDM avec Venissieux, 10G vers Rezopole et 10G vers Appliwave qui nous transporte à Lille
- Un Cisco Catalyst 4500X interconnecté en 2x10G avec l'Arista (bientot 4x10G) pour distribuer le réseau aux machines / abonnés
- Un monstrueux Dell R820 Quadri-CPU avec 256Go de RAM et 6*512Go SSD
- Un Dell R620 avec 256Go de RAM et 4x1To de SSD
- Un Dell R410 avec 72Go de RAM et 2x1To HDD qui nous sert à faire tourner tout ce qui gère les netflows chez milkywan (on ne met pas ça sur des disques durs pour des raisons d'usure de ceux-ci)
Un pop full Dell, ça change :)
On a aussi un NAS Thecus 12*3To qui héberge les sauvegardes des hyperviseurs de Paris :)

Et voilà pour le petit tour de l'infra de MilkyWan en 2022, ça a bien évolué depuis 2018 et les 2U à DC2 :D
On devrait rester dans cette config un petit moment encore, ça tourne comme un charme :)

N'hésitez pas si vous avez des questions !

@+
Hugues
« Modifié: 02 juin 2022 à 11:18:53 par Hugues »

proap

  • Abonné MilkyWan
  • *
  • Messages: 562
MilkyWan - Photos des POP
« Réponse #1 le: 10 avril 2021 à 15:24:11 »
je suis épaté. c'est passionnant ce que vous faites avec une équipe de bénévoles et passionnés.

bravo!

DrumSlayer

  • Abonné Free fibre
  • *
  • Messages: 6
  • Suresnes (92)
    • Mon Twitter
MilkyWan - Photos des POP
« Réponse #2 le: 12 avril 2021 à 00:11:10 »
Impressionnant la présence surtout pour une asso, vous vous basez sur de l'investissement personnel pour financer tout ça ?
Ça fait rêver en tout cas :)

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 11 622
  • Lyon (69) / St-Bernard (01)
    • Twitter
MilkyWan - Photos des POP
« Réponse #3 le: 12 avril 2021 à 00:13:45 »
Non, on se fait sponsoriser certains trucs, le reste est autofinancé ! Et l'idée est de tout autofinancer à terme :)

DrumSlayer

  • Abonné Free fibre
  • *
  • Messages: 6
  • Suresnes (92)
    • Mon Twitter
MilkyWan - Photos des POP
« Réponse #4 le: 12 avril 2021 à 00:30:36 »
D'accord, c'est génial comme objectif en tout cas, je suis fan de l'initiative
Plus qu'à suivre le reste des aventures  :P

DamienC

  • Abonné Sosh fibre
  • *
  • Messages: 2 222
  • FTTH ↓ 300Mbps ↑ 300 Mbps sur Brest (29)
MilkyWan - Photos des POP
« Réponse #5 le: 12 avril 2021 à 08:30:54 »
Oh mon petit serveur, je l'ai vu 🥰

JeannotPlanche

  • Expert Scaleway
  • Abonné Free fibre
  • *
  • Messages: 113
  • 93
MilkyWan - Photos des POP
« Réponse #6 le: 12 avril 2021 à 20:14:01 »
Je retiens qu'on voit un 2960S posé et non vissé  ;)

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 11 622
  • Lyon (69) / St-Bernard (01)
    • Twitter
MilkyWan - Photos des POP
« Réponse #7 le: 12 avril 2021 à 20:18:12 »
C'est dommage si c'est la seule chose que tu retiens :)

Nico

  • Modérateur
  • *
  • Messages: 43 867
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
MilkyWan - Photos des POP
« Réponse #8 le: 12 avril 2021 à 20:29:08 »
Il manque beaucoup de vis, ça craint :'(

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 11 622
  • Lyon (69) / St-Bernard (01)
    • Twitter
MilkyWan - Photos des POP
« Réponse #9 le: 12 avril 2021 à 20:43:11 »
En vrai on corrigera, soyez rassurés  ;D
J’oublie systématiquement les écrous cages quand je vais en DC...

apteor

  • Abonné Free adsl
  • *
  • Messages: 29
  • Rouen (76)
MilkyWan - Photos des POP
« Réponse #10 le: 29 avril 2021 à 22:08:36 »
Vous êtes hébergé dans vos propres baies ou en collocation ?

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 11 622
  • Lyon (69) / St-Bernard (01)
    • Twitter
MilkyWan - Photos des POP
« Réponse #11 le: 29 avril 2021 à 22:21:52 »
à DC2Scale/CBO/Hostelyon, dans nos propres baies, ailleurs, coloc