Auteur Sujet: Les Cartes Ethernet 10Gb  (Lu 11051 fois)

0 Membres et 1 Invité sur ce sujet

delurk

  • Abonné Orange Fibre
  • *
  • Messages: 72
    • Site perso
Les Cartes Ethernet 10Gb
« le: 14 décembre 2018 à 15:48:28 »
Bonjour,

À l’avènement du réseau domestique 10Gb (Freebox Delta), je crée ce topic pour regrouper nos expériences et recommandations concernant le choix des cartes Ethernet 10Gb.

Mon expérience :
Je possède un seul modèle : une carte Ethernet 10Gb/40Gb Mellanox Connect-X 3 OEM IBM avec deux ports SFP+ acheté 60€ d'occasion.
Les difficultés rencontrées : driver à compiler, màj firmware arrêté cause OEM IBM, problème perte IPv6, flow control activé par défaut et difficile/impossible à désactiver

À vos claviers pour compléter cette liste de cartes 10Gb et apporter vos expériences  :
- Mellanox ConnectX-2
- Intel X520
- Chelsio T320
- FS.com #75851 (PCIe2.0 x8 Single Port SFP+ 10 Gigabit Server Adapter)
« Modifié: 17 décembre 2018 à 12:37:08 par delurk »

Nico

  • Modérateur
  • *
  • Messages: 44 449
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Les Cartes Ethernet 10Gb
« Réponse #1 le: 14 décembre 2018 à 15:59:51 »

delurk

  • Abonné Orange Fibre
  • *
  • Messages: 72
    • Site perso
Les Cartes Ethernet 10Gb
« Réponse #2 le: 14 décembre 2018 à 16:08:13 »
Est-ce que ce topic ne correspondrait pas ?

https://lafibre.info/free-les-news/comment-obtenir-10gbps-sur-son-reseau-local/

Le topic cité ci-dessus explique la mise en œuvre d'une l'infrastructure 10Gb domestique. Ici, je souhaite focaliser l'attention sur le choix des cartes Ethernet 10Gb. Comme il existe un topic sur le choix des switchs Mikrotik 10Gb https://lafibre.info/switch/switchs-mikrotik-10g/

Ilyazam

  • Abonné MilkyWan
  • *
  • Messages: 118
  • proche Rennes (35)
Les Cartes Ethernet 10Gb
« Réponse #3 le: 14 décembre 2018 à 18:58:15 »
J'ai chez moi :
- Intel 10 Gigabit AF DA Dual Port SFP+ E10G42AFDA : 2 ports SFP+ mais ne supporte que les DAC, pas les SFP+ fibre ou cuivre (bridage par Intel dans le firmware)
=> fonctionne bien (testé avec Ubuntu 18.04 et avec un câble DAC Cisco)
- Mellanox ConnectX-2 EN  : 1 port SFP+
=> fonctionne bien (testé avec Proxmox / Debian et un SFP+ FS.com)

Globalement Intel, Mellanox et Chelsio sont des marques réputées et les cartes fonctionnent bien. Le seul problème est de trouver une carte pas trop chère mais pas trop ancienne pour la compatibilité, vu que les cartes restent chères en neuf.
Enfin c'est ce que je pensais, mais FS.com est passé par là : 110 € pour une carte 1 port SFP+ sur base Intel :
https://www.fs.com/fr/products/75851.html
Le chip est ancien mais toujours supporté :
https://ark.intel.com/products/66004/Intel-82599EN-10-Gigabit-Ethernet-Controller?q=Intel%c2%ae%2082599EN

delurk

  • Abonné Orange Fibre
  • *
  • Messages: 72
    • Site perso
Les Cartes Ethernet 10Gb
« Réponse #4 le: 17 décembre 2018 à 12:35:04 »
@Ilyazam merci pour ton post.

Si je comprends bien, Intel nomme ses modèles "DA" lorsque ses cartes sont uniquement compatibles "Direct Attach". Et que signifie "AF" ?
À ce propos, Mellanox nomme ses modèles "InfiniBand" lorsqu'il s'agit de carte SAN.

@Thornhill sur l'InfiniBand  :
Citer
@delurk : tu peux voir Infiniband comme un concurrent d'Ethernet à faible latence et gros débit pour des interconnexions courtes (cas typique : interconnexions de composants serveurs en clusters et stockage dans des appliances). Le matériel est consitué de cartes (HCA) et de switchs. Tu peux faire transiter par dessus plusieurs protocoles, le plus courant étant IP (IPoIB).


Je rajoute la carte FS à la liste.
« Modifié: 18 décembre 2018 à 13:29:29 par delurk »

Thornhill

  • Abonné SFR fibre FttH
  • *
  • Messages: 3 976
  • Saint-Médard-en-Jalles (33)
Les Cartes Ethernet 10Gb
« Réponse #5 le: 17 décembre 2018 à 13:33:31 »

À ce propos, Mellanox nomme ses modèles "InfiniBand" lorsqu'il s'agit de carte SAN.

Tu as vu ça où ? Parce que Infiniband c'est pas vraiment ce qu'on appelle traditionnellement du SAN (même si on peut faire du protocole de stockage mode bloc  dessus en encapsulant avec FCoIB ou avec iSCSI à travers IPoIB ).

delurk

  • Abonné Orange Fibre
  • *
  • Messages: 72
    • Site perso
Les Cartes Ethernet 10Gb
« Réponse #6 le: 17 décembre 2018 à 16:05:36 »
@Thornhill

Effectivement, j'ai fait un raccourci par manque de connaissance à ce sujet. J'ai juste constaté que les cartes Mellanox Ethernet qui nous intéressent dans ce topic (Connect-X) peuvent également être nommées "InfiniBand" ou "VPI".

Maintenant, si tu veux bien je t'invite à nous expliquer de quoi il s'agit.

mattmatt73

  • Expert.
  • Abonné Bbox fibre
  • *
  • Messages: 7 340
  • vancia (69)
Les Cartes Ethernet 10Gb
« Réponse #7 le: 17 décembre 2018 à 18:02:56 »
Tu as vu ça où ? Parce que Infiniband c'est pas vraiment ce qu'on appelle traditionnellement du SAN (même si on peut faire du protocole de stockage mode bloc  dessus en encapsulant avec FCoIB ou avec iSCSI à travers IPoIB ).

FCoIB: même dans une soirée réseau geeks avec beaucoup d'alcools, ça ne doit pas arriver dans la liste des sujets...

Thornhill

  • Abonné SFR fibre FttH
  • *
  • Messages: 3 976
  • Saint-Médard-en-Jalles (33)
Les Cartes Ethernet 10Gb
« Réponse #8 le: 17 décembre 2018 à 18:40:52 »
FCoIB: même dans une soirée réseau geeks avec beaucoup d'alcools, ça ne doit pas arriver dans la liste des sujets...

Effectivement, jamais vu ça déployé.
On a des appliances Oracle avec des switchs Infiniband pour interconnecter les nœuds, mais il font soit de l'IPoIB (pour de l'IP simple ou bien comme support à iSCSI pour les accès stockage mode bloc), soit du RDS pour les IPC des noeuds RAC. Et quand il s'agit de se connecter à un SAN ils ajoutent de bons vieux HBA Fibre Channel.

@delurk : tu peux voir Infiniband comme un concurrent d'Ethernet à faible latence et gros débit pour des interconnexions courtes (cas typique : interconnexions de composants serveurs en clusters et stockage dans des appliances). Le matériel est consitué de cartes (HCA) et de switchs. Tu peux faire transiter par dessus plusieurs protocoles, le plus courant étant IP (IPoIB).

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 424
  • Lyon (69) / St-Bernard (01)
    • Twitter
Les Cartes Ethernet 10Gb
« Réponse #9 le: 17 décembre 2018 à 19:14:53 »
Ca sert surtout quand tu fais évoluer ton réseau de FC vers IP j'imagine :)

Thornhill

  • Abonné SFR fibre FttH
  • *
  • Messages: 3 976
  • Saint-Médard-en-Jalles (33)
Les Cartes Ethernet 10Gb
« Réponse #10 le: 17 décembre 2018 à 19:29:19 »
Ca sert surtout quand tu fais évoluer ton réseau de FC vers IP j'imagine :)

Même pas, :  point d'IP dans FCoIB: c'est du protocole FC directement encapsulé dans de l'Infiniband. A part pour interconnecter un stockage FC avec des serveurs IB-only, je ne vois pas l'intérêt. Il semble que des gateways FC-FCoIB existent mais ça n'a pas du beaucoup se vendre.

Le standard pour accéder du stockage mode bloc sur de l'IP c'est plutôt iSCSI.

Hugues

  • AS2027 MilkyWan
  • Modérateur
  • *
  • Messages: 12 424
  • Lyon (69) / St-Bernard (01)
    • Twitter
Les Cartes Ethernet 10Gb
« Réponse #11 le: 17 décembre 2018 à 21:05:18 »
Ah oui pardon, j'ai lu FCoIP :)