Auteur Sujet: Quelle techno pour interconnecter les serveurs en 10Gb/s? (Lu 18343 fois)

vivien · « **Réponse #12 le:** 14 février 2016 à 16:53:11 »

Sinon, ce qui m'étonne dans une carte avec des cages SFP+, c'est que sans SFP+ le lien est considéré comme ok en direct attach alors que je n'ai rien mis dans la cage :

SFP + avec une carte Intel Corporation 82599ES 10-Gigabit SFI/SFP+ Network Connection (rev 01) :
$ dmesg | grep ixgbe [ 3.207176] ixgbe: Intel(R) 10 Gigabit PCI Express Network Driver - version 4.0.1-k [ 3.221897] ixgbe: Copyright (c) 1999-2014 Intel Corporation. [ 3.407951] ixgbe 0000:01:00.0: Multiqueue Enabled: Rx Queue count = 8, Tx Queue count = 8 [ 3.408175] ixgbe 0000:01:00.0: PCI Express bandwidth of 32GT/s available [ 3.408190] ixgbe 0000:01:00.0: (Speed:5.0GT/s, Width: x8, Encoding Loss:20%) [ 3.408305] ixgbe 0000:01:00.0: MAC: 2, PHY: 18, SFP+: 5, PBA No: E66560-005 [ 3.408317] ixgbe 0000:01:00.0: 90:e2:ba:19:f7:50 [ 3.422525] ixgbe 0000:01:00.0: Intel(R) 10 Gigabit Network Connection [ 4.571968] ixgbe 0000:01:00.1: Multiqueue Enabled: Rx Queue count = 8, Tx Queue count = 8 [ 4.589804] ixgbe 0000:01:00.1: PCI Express bandwidth of 32GT/s available [ 4.598945] ixgbe 0000:01:00.1: (Speed:5.0GT/s, Width: x8, Encoding Loss:20%) [ 4.608450] ixgbe 0000:01:00.1: MAC: 2, PHY: 1, PBA No: E66560-005 [ 4.617403] ixgbe 0000:01:00.1: 90:e2:ba:19:f7:51 [ 4.626857] ixgbe 0000:01:00.1: Intel(R) 10 Gigabit Network Connection [ 4.639489] ixgbe 0000:01:00.0 p1p1: renamed from eth0 [ 4.657241] ixgbe 0000:01:00.1 p1p2: renamed from eth1 [ 12.715244] ixgbe 0000:01:00.0: registered PHC device on p1p1 [ 12.877320] ixgbe 0000:01:00.0 p1p1: detected SFP+: 5 [ 13.132163] ixgbe 0000:01:00.0 p1p1: NIC Link is Up 10 Gbps, Flow Control: RX/TX [ 196.588395] ixgbe 0000:01:00.0 p1p1: NIC Link is Down [ 197.843582] ixgbe 0000:01:00.0 p1p1: NIC Link is Up 10 Gbps, Flow Control: RX/TX

10Gbase-T : Avec une carte "Intel Corporation Ethernet Controller 10-Gigabit X540-AT2 (rev 01)" :
$ dmesg | grep ixgbe [ 2.341867] ixgbe: Intel(R) 10 Gigabit PCI Express Network Driver - version 4.0.1-k [ 2.346498] ixgbe: Copyright (c) 1999-2014 Intel Corporation. [ 2.664894] ixgbe 0000:08:00.0: Multiqueue Enabled: Rx Queue count = 8, Tx Queue count = 8 [ 2.725862] ixgbe 0000:08:00.0: PCI Express bandwidth of 32GT/s available [ 2.731996] ixgbe 0000:08:00.0: (Speed:5.0GT/s, Width: x8, Encoding Loss:20%) [ 2.898573] ixgbe 0000:08:00.0: MAC: 3, PHY: 0, PBA No: G54042-005 [ 2.904420] ixgbe 0000:08:00.0: a0:36:9f:31:50:6e [ 3.164002] ixgbe 0000:08:00.0: Intel(R) 10 Gigabit Network Connection [ 3.550195] ixgbe 0000:08:00.0 p2p1: renamed from eth0 [ 8.956142] ixgbe 0000:08:00.0: registered PHC device on p2p1 [ 14.865953] ixgbe 0000:08:00.0 p2p1: NIC Link is Up 10 Gbps, Flow Control: RX/TX

Bengelly · « **Réponse #13 le:** 14 février 2016 à 20:12:32 »

Citation de: jack le 14 février 2016 à 15:58:23

J'ai des devis de cette année, le DAC est beaucoup moins cher que le triplet 2*SR + paire de fibre, d'un facteur 3-4

Salut,

Ça dépend beaucoup des conditions commerciales que tu as avec ton revendeur/grossiste et du volume.

Je t'invite à en demander plusieurs et à faire jouer la concurrence 😀

@++

Bengelly · « **Réponse #14 le:** 14 février 2016 à 20:16:48 »

Citation de: BadMax le 14 février 2016 à 16:03:10

J'ai installé du Blade IBM en passthrough+DAC sur des ToR. Même en inter-rack c'est resté gérable en cablage.

On a de ca et du bladecenter H (en fin de vie) et du Dell M1000e, mais bon OSEF un peu.

Je ne dis pas que le DAC est une mauvaise solution. Mon propos est que j n'aime pas trop cette solution car ça devient vite le bordel à gérer quand tu en as plusieurs dizaines et surtout c'est beaucoup moins flexible qu'un breakout usiné à mon sens.

Les goûts et les couleurs 😉

@++

jack · « **Réponse #15 le:** 16 février 2016 à 10:14:12 »

Citation de: Bengelly le 14 février 2016 à 20:12:32

Ça dépend beaucoup des conditions commerciales que tu as avec ton revendeur/grossiste et du volume.
Je t'invite à en demander plusieurs et à faire jouer la concurrence 😀

Tu le touches à combien, ton DAC ?

vivien · « **Réponse #16 le:** 16 février 2016 à 10:21:19 »

Je suis intéressé par des tarifs (sans citer le fournisseur si c'est problématique)

PS: indiquez bien si c'est HT ou TTC

Bengelly · « **Réponse #17 le:** 16 février 2016 à 11:34:36 »

Salut,

Faisant tourner du Brocade, on doit utiliser des DACs actifs. Comme très compliqué à re-coder et qu'on ne veut pas à se faire chier avec le support pour des histoires de compatibilité, on les prends chez Brocade / $GROSSISTE :

- 1 pack de 8 en 3m : à peu près 700€ H.T,
- 1 pack de 8 de 5m : à peu près 850€ H.T,

Un SFP+ recodé comme tu veux, c'est grosso merdo dans les 30-33€ pièce chez les fournisseurs habituels.

Donc pour un chassis blade 16 lames avec deux passthrough, je compte :

- 64 SFP+ SR à 30€ pièce + un breakout fibre 40 brins multi-mode 10m usiné à 500€ pièce = 2500€ / blade vs les prix pour du DAC au dessus.
- En DAC 3m : 2800€ H.T
- En DAC 5m : 3400€ H.T

Perso, avec les avantages cités avant, je prends en optique.

My 2 cents.

@++

jack · « **Réponse #18 le:** 16 février 2016 à 11:38:52 »

T'as des prix pour du moins long (genre 30cm ?)

Bengelly · « **Réponse #19 le:** 16 février 2016 à 11:41:02 »

Citation de: jack le 16 février 2016 à 11:38:52

T'as des prix pour du moins long (genre 30cm ?)

30 cm en DAC ? ou en fibre ?

@++

jack · « **Réponse #20 le:** 16 février 2016 à 11:41:54 »

En DAC

Bengelly · « **Réponse #21 le:** 16 février 2016 à 11:43:47 »

A ma connaissance, les longueurs standards pour des DACs, c'est : 1 / 3 / 5 / 7m. Je sais que du 10 et 15m existent.

Jamais vu de DACs en dessous de 1m. D'ailleurs, ça se fait usiner à moins de 1m ?!?

@++

jack · « **Réponse #22 le:** 16 février 2016 à 11:48:40 »

Au temps pour moi: c'est du 1m
(je trouve ça énorme pour brancher des serveurs, m'enfin)

Bengelly · « **Réponse #23 le:** 16 février 2016 à 11:51:38 »

Citation de: jack le 16 février 2016 à 11:48:40

Au temps pour moi: c'est du 1m
(je trouve ça énorme pour brancher des serveurs, m'enfin)

Tout dépend de l'urbanisation de tes salles et de ce que tu transportes sur ton media. Tous nos blades ne sont pas dans les baies où se trouvent les TOR.

Globalement, il n'y a pas de bonnes et/ou de mauvaises solutions. Il y a celles qui te correspondent.

@++