Auteur Sujet: Quelle techno pour interconnecter les serveurs en 10Gb/s?  (Lu 14838 fois)

0 Membres et 1 Invité sur ce sujet

Leon

  • Client SFR sur réseau Numericable
  • Modérateur
  • *
  • Messages: 5 961
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« le: 14 février 2016 à 08:21:06 »
Salut à tous,

Quelles sont les technologies actuellement privilégiées pour interconnecter des serveurs en Ethernet 10Gb/s, à (très) courte distance, vers leurs switches ethernet "top of rack"?
Je connais les solutions suivantes, mais je ne sais pas s'il en existe d'autre, ni celles qui sont privilégiées.
N'hésitez pas à nous partager les avantages/inconvénients des différentes solutions

* 10Gbase-T : Economique à l'achat, mais apparemment critiqué en terme de fiabilité et consommation électrique.
* CX4 : je n'en vois pas beaucoup. Pourtant, ça semble une très bonne solution. Google utilise ça visiblement. Ces produits (carte réseau, et switches) ne semble pas très répandus. Visiblement, la largeur du connecteur pose problème pour les switches denses.
* câbles SFP+ "direct attach". Avantage : utilise des switches à cage SFP+, très répandus. C'est la solution d'OVH.
* SFP+ optique : forcèment plus cher

Leon.

vivien

  • Administrateur
  • *
  • Messages: 46 994
    • Twitter LaFibre.info
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #1 le: 14 février 2016 à 09:02:51 »
Il me semble que c'est le SFP+ "direct attach" qui est le plus économique. Je trouve que les câbles direct attach sont assez cher.

Le 10Gbase-T semble problématique en terme de dissipation d'énergie (pas de switch avec une haute densité de ports, limitation à 2 ports par carte, contre 4 en direct attach).

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #2 le: 14 février 2016 à 09:46:34 »
Dans la liste de Léon, le choix se limite entre 10G-T et DirectAttach. CX4->nécessite de très gros cable infiniband, peu pratique à manipuler, nécessite un gros connecteur type 10G-X2. A été beaucoup utilisé il y a 4-5 ans avant la généralisation du SFP+. L'optique est hors de prix si on achète des SFP+ de marque. Sinon en multi-mode 10G-SR en SolidOptics, c'est pas cher.

Le 10G-T existe en haute-densité : Nexus 93128Tx, 96x 1G/10G-T non-bloquant dans 3U. En FEX, on trouve du 32x SFP+ et du 32x 10G-T. Sur N7K, il y a des cartes 48x SFP+ et 48x 10G-T. Donc égalité entre les deux.

Pour moi la différence se fait sur la connectique : le DirectAttach est bien plus fiable (détection de la connexion/dé-connexion instantanée, cable plus solide, connecteur SFP). Cela dit j'ai déjà utilisé du 10G-T, ça marche bien.

vivien

  • Administrateur
  • *
  • Messages: 46 994
    • Twitter LaFibre.info
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #3 le: 14 février 2016 à 10:02:09 »
Il y a de l’électronique dans les câble SFP+ "direct attach" ?

Je me demande si il y a risque d’incompatibilité, comme c'est le cas avec les SFP+

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #4 le: 14 février 2016 à 10:09:27 »
Passif= non (i.e moins les 3 octets d'EEPROM contenus dedans pour connaitre la marque du cable)
Actif= oui

A moins d'un bridage volontaire (exemple: mettre un DirectAttach Juniper sur un switch Cisco) il n'y a pas d'incompatibilité avec les passifs. Avec les actifs, il ne devrait pas y en avoir non plus mais apparemment il y aurait quelques entorses sur les specs électriques pour pouvoir supporter des longueurs de 10m (par exemple).

Bengelly

  • AS12876 Expert Scaleway
  • Expert
  • *
  • Messages: 297
  • Paris (75)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #5 le: 14 février 2016 à 11:47:15 »
Il me semble que c'est le SFP+ "direct attach" qui est le plus économique. Je trouve que les câbles direct attach sont assez cher.

Salut,

Si tu négocies bien, une solution à base de SFP+ SR (en LR, c'est fois deux) aux deux extrémités plus breakouts fibres usinés sur mesure revient au même prix. Cette solution a à mon sens plusieurs avantages comme :

- support du DOM au niveau des optiques, très pratique pour du debug. Et en cas de panne, tu ne changes qu'une seule extrémité au lieu de tout le câble DAC,

- flexibilité et épaisseur faible du câblage, surtout quand tu en câbles des dizaines sur des TOR massifs,

- distances couvertes plus importantes entre les équipements (jusque 500m), surtout en cas de transport de protocole type FCoE qui est limité à 5m / 7m en théorie,

Dans notre cas, nous raccordons nos châssis blade en passthrough sur nos TORs, ca monte très vite en nombre de ports câblés, donc la solution optiques + fibres de bout en bout devient vite intéressante.

My 2 cents.

@++

jack

  • Professionnel des télécoms
  • *
  • Messages: 1 674
  • La Madeleine (59)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #6 le: 14 février 2016 à 15:58:23 »
J'ai des devis de cette année, le DAC est beaucoup moins cher que le triplet 2*SR + paire de fibre, d'un facteur 3-4

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #7 le: 14 février 2016 à 16:03:10 »

Dans notre cas, nous raccordons nos châssis blade en passthrough sur nos TORs, ca monte très vite en nombre de ports câblés, donc la solution optiques + fibres de bout en bout devient vite intéressante.


J'ai installé du Blade IBM en passthrough+DAC sur des ToR. Même en inter-rack c'est resté gérable en cablage.

vivien

  • Administrateur
  • *
  • Messages: 46 994
    • Twitter LaFibre.info
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #8 le: 14 février 2016 à 16:25:11 »
et le prix DAC (Direct Attach Cable) vs 10Gbase-T ?

jack

  • Professionnel des télécoms
  • *
  • Messages: 1 674
  • La Madeleine (59)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #9 le: 14 février 2016 à 16:39:01 »
Je ne sais pas
Le 10G-baseT, ça consomme beaucoup de jus (2-5W/port, il parait, ça fait quand même jusqu'à 250W par switch, ce n'est pas négligeable)
La question du type de port se pose aussi : switch 10G-baseT vs switch SFP+. Est-ce que la densité est la même ? (vu le post de badmax: oui. Reste à voir la question du coût)

vivien

  • Administrateur
  • *
  • Messages: 46 994
    • Twitter LaFibre.info
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #10 le: 14 février 2016 à 16:40:47 »
Le 10G-T existe en haute-densité : Nexus 93128Tx, 96x 1G/10G-T non-bloquant dans 3U. En FEX, on trouve du 32x SFP+ et du 32x 10G-T. Sur N7K, il y a des cartes 48x SFP+ et 48x 10G-T. Donc égalité entre les deux.

Pour moi la différence se fait sur la connectique : le DirectAttach est bien plus fiable (détection de la connexion/dé-connexion instantanée, cable plus solide, connecteur SFP). Cela dit j'ai déjà utilisé du 10G-T, ça marche bien.

jack

  • Professionnel des télécoms
  • *
  • Messages: 1 674
  • La Madeleine (59)
Quelle techno pour interconnecter les serveurs en 10Gb/s?
« Réponse #11 le: 14 février 2016 à 16:45:20 »
 ::)

Badmax, est-ce que c'est aussi comparable au niveau du prix ?