Auteur Sujet: Comment monter un réseau 10Gbit/s chez soi  (Lu 1296705 fois)

0 Membres et 2 Invités sur ce sujet

Brashen

  • Abonné Free fibre
  • *
  • Messages: 5
  • carcassonne - 11
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4680 le: 31 mai 2023 à 21:10:22 »
Bon mon intuition était bonne le SSD en sata était le goulot d'étranglement, le nvme est vraiment important :) je tape 5Gbits/s c'est encore un peu en dessous des 8 mais c'est pas mal déjà

sf!

  • Abonné Free fibre
  • *
  • Messages: 419
  • Nord - 59
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4681 le: 01 juin 2023 à 03:18:55 »
Bon mon intuition était bonne le SSD en sata était le goulot d'étranglement, le nvme est vraiment important :) je tape 5Gbits/s c'est encore un peu en dessous des 8 mais c'est pas mal déjà
y'a aucune raison pour qu'un disque soit utilisé pour un speedtest ou un nperf.

Brashen

  • Abonné Free fibre
  • *
  • Messages: 5
  • carcassonne - 11
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4682 le: 01 juin 2023 à 07:00:44 »
y'a aucune raison pour qu'un disque soit utilisé pour un speedtest ou un nperf.

J'ai switché l'OS sur le nvme et déconnecté le SSD c'est ce qui m'a laissé penser que c'était le goulot d'étranglement car je suis passé de 3 à 5Gbits/s. je regarde ce soir du côté d'iperf3 ce qu'il me dit.

fansat70

  • Abonné Free fibre
  • *
  • Messages: 5 192
  • 70 - St Loup-sur-Semouse
    • Carte ZANRO/ZASRO-PM Haute Saône
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4683 le: 01 juin 2023 à 10:04:31 »
J'ai switché l'OS sur le nvme et déconnecté le SSD c'est ce qui m'a laissé penser que c'était le goulot d'étranglement car je suis passé de 3 à 5Gbits/s. je regarde ce soir du côté d'iperf3 ce qu'il me dit.
Comme il a été dit maintes fois en ces murs, les 8Gb sont un débit que l'on atteint rarement en permanence, que ce soit dans la journée ou par périodes. Il suffit qu'un des éléments entre ta machine et le serveur "coince" à un moment ou à un autre pour que les perfs se cassent la figure! Cela peut être un goulot d'étranglement local (CPU "bouffée" par autre chose, Driver carte et/ou ses options pas correctes, Slot PCI pas le bon, soft "optimiseur" de réseau - Peut-être utile pour l'ADSL, mais à proscrire avec une connexion fibre...), une passerelle sui sature, un peering idem certains moments, et j'en passe.
Il est clair aussi que les 8Gb "speedtests ou nperf" ne seront jamais représentatifs de ce que l'on peut obtenir avec un simple download, en mono-connexion; un speedtest donne ce que peut donner la ligne "à fond" comme si l'on avait de multiples utilisations simultanées, sans plus...

Brashen

  • Abonné Free fibre
  • *
  • Messages: 5
  • carcassonne - 11
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4684 le: 02 juin 2023 à 15:14:00 »
Comme il a été dit maintes fois en ces murs, les 8Gb sont un débit que l'on atteint rarement en permanence, que ce soit dans la journée ou par périodes. Il suffit qu'un des éléments entre ta machine et le serveur "coince" à un moment ou à un autre pour que les perfs se cassent la figure! Cela peut être un goulot d'étranglement local (CPU "bouffée" par autre chose, Driver carte et/ou ses options pas correctes, Slot PCI pas le bon, soft "optimiseur" de réseau - Peut-être utile pour l'ADSL, mais à proscrire avec une connexion fibre...), une passerelle sui sature, un peering idem certains moments, et j'en passe.
Il est clair aussi que les 8Gb "speedtests ou nperf" ne seront jamais représentatifs de ce que l'on peut obtenir avec un simple download, en mono-connexion; un speedtest donne ce que peut donner la ligne "à fond" comme si l'on avait de multiples utilisations simultanées, sans plus...

Bonjour, je suis au courant que ce sont 8Gb "théorique" je ne m'attends pas à taper en permanence ce débit quelque soit le serveur que je vais solliciter.
Durant mes tests qui ont précédés au remplacement du SSD par le nvme j'avais le débit qui plafonnait toujours à 1Gb rarement moins, ce qui a fini par me convaincre de remplacer le SSD ce sont les micros freeze durant toute la durée du speedtest affectant la fluidité du pc.
Tous mes tests ont été effectués sur un pc avec un OS installé pour l'occasion, j'ai tous les drivers à jour sans autre fioritures pour réduire au maximum les "interférences".
Je suis hyper content de mon débit de 5Gb qui ne bouge pas que ce soit le soir en heure de pointe ou en pleine journée, mais j'ai toujours cette impression qu'il y a encore quelque chose qui génère un nouveau plafond de verre, mais je ne vais pas chipoter passer de rien à la fibre c'est toujours mieux que rien :)

fansat70

  • Abonné Free fibre
  • *
  • Messages: 5 192
  • 70 - St Loup-sur-Semouse
    • Carte ZANRO/ZASRO-PM Haute Saône
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4685 le: 02 juin 2023 à 16:28:49 »
Bonjour, je suis au courant que ce sont 8Gb "théorique" je ne m'attends pas à taper en permanence ce débit quelque soit le serveur que je vais solliciter.
Durant mes tests qui ont précédés au remplacement du SSD par le nvme j'avais le débit qui plafonnait toujours à 1Gb rarement moins, ce qui a fini par me convaincre de remplacer le SSD ce sont les micros freeze durant toute la durée du speedtest affectant la fluidité du pc.
Tous mes tests ont été effectués sur un pc avec un OS installé pour l'occasion, j'ai tous les drivers à jour sans autre fioritures pour réduire au maximum les "interférences".
Je suis hyper content de mon débit de 5Gb qui ne bouge pas que ce soit le soir en heure de pointe ou en pleine journée, mais j'ai toujours cette impression qu'il y a encore quelque chose qui génère un nouveau plafond de verre, mais je ne vais pas chipoter passer de rien à la fibre c'est toujours mieux que rien :)
Tout à fait! Si les speedtests sont stables, c'est que vraisemblablement tu ne souffres pas de goulet d'étranglement "hors les murs". Après, il resterait à peut-être chercher quel le "goulet intérieur" (peut-être un problème de port PCIE avec débit partagé?), en sachant comme il a été dit plus haut que les speedtest et autres nerf n'utilisent pas d'accès disques, les i/o se faisant sur un truc du genre /dev/null...

Fuzy

  • Abonné Free fibre
  • *
  • Messages: 556
  • RENNES
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4686 le: 08 juin 2023 à 20:49:46 »
Il marche bien ce soir le serveur de téléchargement battle.net !

400 Mo/s... ça relance l'intéret d'une connexion au delà du Gb !



carbex

  • Abonné Free Pro
  • *
  • Messages: 19
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4687 le: 20 juin 2023 à 17:58:50 »
Bonsoir,
Ayant malheureusement peu de chance avec mon propre thread ici https://lafibre.info/free-pro/comment-avoir-du-10g-sur-le-reseau-local/ je viens chercher des reponses ici.

Je suis client free-pro depuis peu (mi mai) et le wifi est horrible entre mon bureau (sous sol) et la box au rdc. Des timeouts et des latences fluctuant en permanence lorsque je ping 8.8.8.8 depuis mon poste de travail que je ne constate pas depuis un raspberry connecte en rj45 au cul de la freebox pro.

Donc vu que j'ai un port 10gb de libre, autant acheminer le 10gb dans mon bureau.

A la lecture du premier post, je constate qu'il n'y en a que pour microtik. Existe-t-il d'autres produits equivalents.

Ce que j'imaginais c'etait plutot ceci :

- Tirer une jarretiere entre le RDc et le Sous sol, environ 15M de fibre.
- Connecter cette jarretiere avec la freebox avec un module sfp, Lequel ??
- connecter cette jarretiere au switch place dans le bureau (meme module sfp ? sinon lequel? )
- connecter le pc et les autres equipements en 1gb dans un premier temps
- commander une carte 10gb pour mon poste de travail et le brancher sur le switch (meme principe de jarretiere ? ou alors directement cuivre ? )
- Pour la carte je vois que ca parle beaucoup de mellanox/nvidia/intel, quid de solarflare (vu que j'ai travaille avec ce fabricant lorsque je travaillais dans le HFT/LLT)

Etant plutot systeme expert que reseau, j'ai un peu neglige la revolution fibre, mes connaissances debutant avec du 10base-T et des bouchons au millenaire derniers pour s'arreter au RJ45 classique et petit switch netgear qu'on trouve a la fnac, (dans mes differents boulots ya toujours un expert reseau, et c'etait pas moi :), me limitant a flasher les firmwares sur les cartes mellanox et solarflare et mettre a jour les drivers proprio pour faire du kernel bypass)

Donc en teneur ma connaissance du reseau c' est surtout de l'ethtool, iperf, ping, tcpdump, wireshark, mais pas trop la couche physique et ses nouveaux materiels, voila pourquoi je suis perdu.

Par ailleurs la encore, la seul fois ou j'ai participe a une commande de qsfp en urgence pour un client, il y avait une histoire de firmware compatible avec les switchs (cisco) et donc la encore est-ce toujours d'actualite et dois-je faire attention lorsque je commande des composants pour qu'ils soient compatibles entre eux.

merci par avance de vos reponses.

Ps: Une autres question de taraude, 15m de Jarretiere entre la box et la sous sol est-ce possible ou faut-il rajouter un petit switch au cul de la box pour reamplifier un signal trop faible (j'ai cru comprendre que le port sfp 10gb de la freebox pro etait limite en puissance) , ce qui ferait donc 2 switchs un au rdc pour gere la connexion a la freebox et la descente au sous sol et le deuxieme pour distribuer le 10gb et consorts aux equipements du bureau au sous sol. Merci de vos explications par avance.

Ps2: Je tiens a preciser que je suis independant et donc chef de ma petit entreprise, et qu'au dela de reponse sur un forum de passionnes il est tout a fait envisageable de payer une facture de consulting sur ce sujet particulier a des personnes morales pretes a m'aider dans ce projet si cela est necessaire.

ps3: :La solution la plus simple serait de descendre un rj45 sur un port 1gb de la freebox et de brancher a l'autre bout le repeteur wifi de free, mais cela ne serait pas drole, et je veux pouvoir profiter des 7gb descendants de la connexion (annonce)

zigzag08

  • Abonné Free fibre
  • *
  • Messages: 44
  • Roanne 42
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4688 le: 20 juin 2023 à 19:34:38 »
Je reprends la partie de Hugues qui s'adapte à ta demande :
Comment monter un réseau 10Gbit/s chez soi :



2) - Pour construire un nouveau réseau, en utilisant de la fibre de bout en bout:

NB : On utilise de la fibre monomode, un peu plus cher, mais plus pérenne.


J'ai changé le lien vers le MikroTik CRS305-1G-4S+IN qui sera réapprovisionné le 23/06 d'après le site.

Après chez moi, comme à part mon NAS synology, je n'ai pas d'équipements en 10G et surtout n'en ai pas l'utilité j'ai plutôt utilisé :

J'ai comme ça directement du RJ45 en 2,5Gb/s, qui est plus commun et moins cher.

Concernant solarflare, je pense que personne n'a utilisé, ou suffisamment utilisé pour donner un avis?

carbex

  • Abonné Free Pro
  • *
  • Messages: 19
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4689 le: 20 juin 2023 à 19:49:46 »
Je te remercie vivement pour cette reponse. Je vais etudier a l'aune des elements que tu preconises.

pour Solarflare, je connais bien puisque c'etait les cartes avec les plus basses latences qu'on avait. Mellanox a l'epoque n'etait pas oriente basse latence mais plutot gros flux. On en avait quelqu'unes mais pas sur des serveurs critiques.

Je viens de voir le cable il est deja serti avec les sfp, un peu difficile à faire passer dans le sous sol, j'aurais prefere une jarretiere et deux modules sfp. Car la jarretiere est plus facile a passer dans le sol du rdc pour aller dans le bureau au sous sol (environ 15m)

zigzag08

  • Abonné Free fibre
  • *
  • Messages: 44
  • Roanne 42
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4690 le: 20 juin 2023 à 21:58:00 »
Je reprends la partie de Hugues qui s'adapte à ta demande :
J'ai changé le lien vers le MikroTik CRS305-1G-4S+IN qui sera réapprovisionné le 23/06 d'après le site.

Après chez moi, comme à part mon NAS synology, je n'ai pas d'équipements en 10G et surtout n'en ai pas l'utilité j'ai plutôt utilisé :

J'ai comme ça directement du RJ45 en 2,5Gb/s, qui est plus commun et moins cher.

Concernant solarflare, je pense que personne n'a utilisé, ou suffisamment utilisé pour donner un avis?

Il te suffit de prendre la fibre proposé par Hugues (voir mon message précédent) ainsi que 2 SFP+ LR (10G, Monomode) en + de ce que je t'ai indiqué ci-dessus à la place de Cable Direct Attach SFP+

ajds

  • Abonné Free fibre
  • *
  • Messages: 1 082
  • 78-TDF Delta 10G+Devialet
Comment monter un réseau 10Gbit/s chez soi
« Réponse #4691 le: 07 juillet 2023 à 10:03:44 »
Bonjour

je me suis équipé tout récemment en suivant ce thread. Et je sature a 4.5gbs.

Et j'ai compris pourquoi :

Supports profil bas et pleine hauteur. Express* 2.0. 5.0 G T/s x8 Lane. Compatible avec les emplacements PCI Express* x8, x16 standard et low-profile.

La carte 10gbs conseillée en début de thread : https://www.amazon.fr/gp/product/B01GHTXHMK/ref=ppx_yo_dt_b_asin_title_o00_s00?ie=UTF8&psc=1 
ne pourra jamais atteindre les 10gbs.

Simplement car elle est en pciexp 2 et non 3 et que sa vitesse maximum de transfert sur le bus pci est de 40GT/s (8x5gt/s) c'est a dire environ 4gb/s en vitesse de dL. car forcément la carte elle fait "passe plat" elle peut pas aller plus vite en réception sur le lien fibre que ce qu'elle est capable de transmettre sur le bus pci.

pour dépasser les 4gb/s de vitesse de DL et atteindre des vitesses supérieures  il faut absolument une carte pciexp 3 voir 4.

Donc il y a aussi de l'arnaque dans l'air car la carte est brandée en 10gb/s (c'est sur elle négocie du 10gb sur le lien fibre) mais est physiquement limitée par sa vitesse du bus PCI.

Donc il faut trouver des cartes 10gb/s avec du pciexp 3 minimum pour pretendre a du 8gb/s environ.

Les vitesses du bus pci sont en GT/s et les vitesses reseaux sont en Gb/s

Tout est expliqué ici https://paolozaino.wordpress.com/2013/05/21/converting-gts-to-gbps/


D'ailleurs dans Intel PRoset adapter configuration utility on peut voir :
"NEgociated Link Speed 5.0 GT/s"  qui est la vitesse négociée du bus pci et qui signifie qu'elle est en pciex 2.
et "Negociated link witdh x8" ce qui porte le nombre maximal de GT/s a 8x5=40GT/s.

Voili voilou


Pour info voila ce que j'ai ce matin https://www.speedtest.net/my-result/d/b99bc3ea-bbe2-40a9-8ac4-f74d87849a7c avec une freeboxpro.

Bonjour,

tu te trompe dans tes calculs ou ton interpretation des différents liens que tu cites, relis les bien.

40 GT/s avec l'encoding du Pcie 2.0 ca fait environ 32 Gbps full duplex, soit largement plus que les 10 Gbps requis.