Auteur Sujet: Réseau OVH US : SPOF sur le POP de Newark?  (Lu 27630 fois)

0 Membres et 1 Invité sur ce sujet

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Réseau OVH US : SPOF sur le POP de Newark?
« le: 28 octobre 2016 à 23:03:58 »
Salut à tous.

On parle beaucoup du réseau d'Online, mais pas beaucoup du réseau d'OVH.
Voici 2 belles photos du POP de Newark, donc sur la côte est-américaine.
Je trouve ça vraiment beau, cette densité de ports 100Gbps, ces couleurs. Et puis, cette méthode d'OVH d'associer un systématiquement 1 routeur avec 1 switch, c'est assez élégant, ils doivent économiser de l'argent.

Mais il y a un truc qui me chiffonne.
On voit ici, en 3 baies seulement, le plus gros POP d'OVH aux US. Tout le trafic transatlantique interne à OVH passe par là (2 x 3  x 100Gbps).
La majorité du trafic issu du gros datacenter de Beauharnois passe également par ce point (2 x 4 x 100Gbps).
Ce POP n'est visiblement pas redondé géographiquement.

Est-ce que ça ne ressemble pas à un bon gros "Single Point of Failure" (=point de défaillance unique)?
Pour un réseau d'une telle ampleur, et d'une telle importance (on parle de 800Gbps bien remplis), ça me semble vraiment très très étonnant.
Si c'est bien le cas, c'est du jamais vu pour moi.
Imaginez la panique si cet unique POP tombe...

http://weathermap.ovh.net/#usa

Leon.
« Modifié: 29 octobre 2016 à 20:23:55 par Leon »

TroniQ89

  • @TroniQ89
  • Abonné Free adsl
  • *
  • Messages: 743
Réseau OVH US
« Réponse #1 le: 29 octobre 2016 à 00:11:33 »

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Réseau OVH US
« Réponse #2 le: 29 octobre 2016 à 06:34:20 »
OVH a aussi un point de présence à Miami et à Chicago:
http://weathermap.ovh.net/#newark_newyork
http://weathermap.ovh.net/#miami
http://weathermap.ovh.net/#chicago
Oui, j'ai bien conscience de ça.
Sauf que si le POP de Newark tombe, ça se passera à priori très mal:
* le POP de Chicago a une capacité très inférieure à celui de Newark, et ne pourrait pas reprendre le trafic
* le trafic depuis Beauharnois vers le POP de Miami passe visiblement par... le POP de Newark! (à moins que ça ait changé)

Newark, c'est visiblement LE point central d'OVH aux US, il est le plus proche de Beauharnois. Et cout ça concentré en seulement 3 petites baies...

Leon.

TroniQ89

  • @TroniQ89
  • Abonné Free adsl
  • *
  • Messages: 743
Réseau OVH US
« Réponse #3 le: 29 octobre 2016 à 11:22:41 »
C'est vrai que c'est pas très fiable cette histoire...

Après si je dis pas de bêtises, je crois qu'OVH a des liens avec certains opérateurs américains a Beauharnois.

buddy

  • Expert
  • Abonné Free fibre
  • *
  • Messages: 15 096
  • Alpes Maritimes (06)
Réseau OVH US
« Réponse #4 le: 29 octobre 2016 à 13:56:40 »
Bonjour,

Pour le réseau OVH, il est en cours d'upgrade vers un peu partout, donc çà sera probablement mieux redonder d'ici peu.

Après, est-ce grave si les liens transatlantiques tombent tous ? (les serveurs Europe perdent les PNIs Nord Américain et inversement ) mais est-ce très grave ? tant que çà passe de manière satisfaisante par d'autres transitaires ?

le réseau se comportent peut être très bien en 2 réseaux isolés.

Pour la liaison BHS => NWK il me semble qu'elle est déjà tombé plusieurs fois à cause de travaux / sabotages sur la fibre les reliant et qu'au final çà s'écouler quand même correctement via les autres liens. (c'était un point faible il y a 1.5 ans, ils devaient travailler dessus, je suppose donc que çà va mieux.)

OVH est toujours "limite" sur ce sujet là.

Je me souviens d'un mercredi de début des soldes où 1 des 2 liens RBX <=> Paris avait été coupé par une pelleteuse, il y avait de nombreuses pertes de paquets un 1er jour des soldes ... (et en pleine soirée).  http://travaux.ovh.net/?do=details&id=7874

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 424
  • Lyon (69) / St-Bernard (01)
    • Twitter
Réseau OVH US
« Réponse #5 le: 29 octobre 2016 à 14:52:17 »
le réseau se comportent peut être très bien en 2 réseaux isolés.

Ooooooh que non. le réseau Americain est trop souvent employé, même.

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Réseau OVH US
« Réponse #6 le: 29 octobre 2016 à 15:03:06 »
Pour le réseau OVH, il est en cours d'upgrade vers un peu partout, donc çà sera probablement mieux redonder d'ici peu.
Tu veux dire que c'est une constante chez OVH : c'est en cours de résolution / d'upgrade / ça ira mieux demain / on travaille sur le sujet / c'est encore une beta, ça sera stable dans 1 mois / promis on va résoudre les problèmes d'hubic une fois pour toutes...

Qui a dit "Demain on rase gratis"?

Désolé pour le troll...  :-[

Leon.

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Réseau OVH US
« Réponse #7 le: 29 octobre 2016 à 15:32:52 »
Newark n'est pas un POP... c'est une vile :)

http://www.datacentermap.com/usa/new-jersey/newark/

Vu les peering, je parie que nwk-1-n7 est chez Level3 et nwk-5-n7 est à Equinix.

Les liaisons nwk-1-n7 <-> ldn-1-n7 et nwk-5-n7 <-> ldn-5-n7 sont donc très certainement sur des chemins différents.

Donc pas de SPOF, enfin s'il y en a un, il ne saute pas aux yeux :)


Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Réseau OVH US
« Réponse #8 le: 29 octobre 2016 à 19:37:31 »
Newark n'est pas un POP... c'est une vile :)

Vu les peering, je parie que nwk-1-n7 est chez Level3 et nwk-5-n7 est à Equinix.

Les liaisons nwk-1-n7 <-> ldn-1-n7 et nwk-5-n7 <-> ldn-5-n7 sont donc très certainement sur des chemins différents.
BadMax, regarde les photos!

Les 2 Nexus 7000 sont dans 2 baies à côté l'une de l'autre.
Il n'y a aucun doute là dessus: on voit bien 2 Nexus 7xxx, avec un gros nombre de ports 100G et 10G. Le nombre de ports utilisés coïncide parfaitement avec la Weathermap.
Et on voit les copains ASR 9004 juste au dessus avec leurs 16 ports 100G chacun. Aucun doute, ça coïncide parfaitement avec la Weathermap.

Donc clairement, je suis persuadé qu'OVH n'a qu'un seul POP à Newark!
Si la Weathermap est à jour, c'est clairement un bon gros SPOF! 
Le genre de truc qui ne devrait pas exister. Et si ça existe, pourquoi le montrer en public?

Les 2 photos sont très récentes, postées par Octave il y a quelques jours.

Leon.
« Modifié: 29 octobre 2016 à 20:27:43 par Leon »

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Réseau OVH US : SPOF sur le POP de Newark?
« Réponse #9 le: 29 octobre 2016 à 22:17:42 »
Ca ne veut rien dire, les deux n7 que tu vois doivent être en VPC (liens agrégés inter-chassis) -> la vue weathermap est certainement une vue de synthèse des 2 chassis. Le routage est de toutes façons porté par les ASR, on voit les 100G en MPO24 (cables violets) partir des deux côtés. Certains vont jusque sur les chassis optiques Cisco tout à gauche. Les ASR sont configurés en 2x 100G mais impossible de voir si les cables sont croisés vers un seul N7 ou 2. Bref, difficile de retrouver la photo sur la WM.

D'après peeringdb c'est sûr qu'on parle au moins d'Equinix: https://www.peeringdb.com/fac/9
 -> Il y manque Cogent.

Les autres DC sont incomplets donc impossible de savoir si ça colle avec Level 3.


BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Réseau OVH US : SPOF sur le POP de Newark?
« Réponse #10 le: 29 octobre 2016 à 22:30:44 »
La weathermap est soit incomplète, soit pas à jour. Depuis mon VPS à Strasbourg, je passe par BHS pour arriver à Equinix New York sans passer par Newark:
admin@vps-sbg:~$ mtr -rwc 10 198.32.118.106
Start: Sat Oct 29 20:28:55 2016
HOST: vps-sbg                   Loss%   Snt   Last   Avg  Best  Wrst StDev
  1.|-- 1.ip-167-114-224.eu        0.0%    10    0.1   0.1   0.1   0.2   0.0
  2.|-- 222.ip-92-222-54.eu        0.0%    10    0.2   0.2   0.2   0.3   0.0
  3.|-- sbg-z2b5-a70.fr.eu         0.0%    10    0.3   0.3   0.2   0.7   0.0
  4.|-- po105.sbg-z2g1-a75.fr.eu   0.0%    10    0.3   0.3   0.3   0.5   0.0
  5.|-- 10.21.57.19                0.0%    10    0.3   0.3   0.3   0.4   0.0
  6.|-- vl1309.bhs-g2-a75.qc.ca    0.0%    10   89.9  90.0  89.9  90.0   0.0
  7.|-- be100-1279.chi-5-a9.il.us  0.0%    10  111.8 111.8 111.7 112.2   0.0
  8.|-- be10-1313.bhs-g2-a9.qc.ca  0.0%    10  115.7 111.0 109.2 115.7   2.1
  9.|-- eqx.ny.ovh.net             0.0%    10  109.5 109.7 109.4 109.8   0.0

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 971
Réseau OVH US : SPOF sur le POP de Newark?
« Réponse #11 le: 29 octobre 2016 à 22:34:55 »
Ca ne veut rien dire, les deux n7 que tu vois doivent être en VPC (liens agrégés inter-chassis) -> la vue weathermap est certainement une vue de synthèse des 2 chassis. Le routage est de toutes façons porté par les ASR, on voit les 100G en MPO24 (cables violets) partir des deux côtés. Certains vont jusque sur les chassis optiques Cisco tout à gauche. Les ASR sont configurés en 2x 100G mais impossible de voir si les cables sont croisés vers un seul N7 ou 2. Bref, difficile de retrouver la photo sur la WM.
Je ne te comprends pas du tout.

Je précise une nouvelle fois : le nombre de ports que l'on voit sur les 4 chassis (les 2 Nexus 7xxx et les 2 ASR 9000) est totalement cohérent avec la weathermap. On arrive très bien à compter le nombre de liens 100G entre chassis (les violets) et les liens 100G distants (les jaunes). Et tout ça est très cohérent, pour chacun des 4 chassis, avec la weathermap.
Il n'y a que 4 grosses machines à Newark, et elles apparaissent à la fois sur la weathermap, et sur les 2 baies des photos.

Comment peux-tu imaginer qu'il y a un 2ieme POP à Newark?? 

De mon côté, je persiste à penser qu'il y a un SPOF sur le réseau d'OVH est-Américain.
Qui oserai demander une explication à Octave pour en avoir le coeur net??  ::)

Leon.