Auteur Sujet: Bridage obscure à 1 Gb/s d'upload chez AWS ? (Lu 2907 fois)

Lucius Snow · « **le:** 23 octobre 2024 à 17:34:21 »

Salut à tous,

J'utilise depuis quelques années From Smash pour l'envoi de fichiers. Ils utilisent les serveurs d'AWS. Lors de mon passage en XGS-PON avec 2 Gb/s chez Bouygues, aucun souci : le serveur suivait et je remplissais quasiment à fond ma bande passante. Plusieurs mois plus tard, me voilà bridé à 1 Gbit/s sans aucun changement matériel de mon côté.

Sur mon PC n°1 (fixe) :
- je parviens à uploader sur d'autres serveurs à 2 Gb/s
- j'ai testé sous deux O.S. différents, Windows et Linux

Mais là où c'est étrange, c'est qu'un autre PC qu'on appellera n°2 (portable), lui équipé d'un carte Ethernet à 2,5 Gb/s (contre 10 Gb/s pour le n°1), n'a pas ce problème. J'ai alors soupçonné le switch et j'ai donc branché le PC1 directement sur la box, sans succès.

Le PC n°1 ayant un deuxième port Ethernet 10 Gb/s sur la carte mère, j'ai fait également le test en l'utilisant au cas où c'est l'adresse MAC de ma première carte réseau ferait l'objet d'un filtrage quelque part. Mais c'est pareil aussi.

J'en parviens alors à m'interroger sur AWS / From Smash qui pourrait appliquer certains bridages non pas d'après l'IP mais sur la base d'identification matérielle de PC.

Qu'en pensez-vous ?

Je peine par ailleurs à trouver des services de transferts de fichiers qui tiennent un tel débit d'upload et sans contrainte de taille. Impossible chez WeTransfer, MyAirBridge, Mega, Google drive... Peut-être massive.io mais qui coûte un bras !

Merci.

vivien · « **Réponse #1 le:** 23 octobre 2024 à 17:53:21 »

L'adresse mac de tes PC n'est pas remontée à AWS : Ta box est le dernier équipement à voir l'adresse mac de tes cartes réseau.

Tu as testé à environnement logiciel identique ?

Idéalement prendre le SSD du portable et le mettre dans ton PC fixe.

Lucius Snow · « **Réponse #2 le:** 23 octobre 2024 à 18:05:50 »

Citation de: vivien le 23 octobre 2024 à 17:53:21

L'adresse mac de tes PC n'est pas remontée à AWS : Ta box est le dernier équipement à voir l'adresse mac de tes cartes réseau.

Tu as testé à environnement logiciel identique ?

Idéalement prendre le SSD du portable et le mettre dans ton PC fixe.

Oui c'est pareil. Même O.S. configuré de la même manière, disques nVME, etc. Et je n'ai pas de problème à uploader à 2 Gb/s le même fichier sur un autre serveur. Par exemple, je peux sur frame.io qui utilise aussi AWS... mais peut-être pas exactement le même service que FromSmash. Ou alors ça viendrait de Bouygues ? Mais pourquoi alors autoriser un autre PC sur la box ?

Leon · « **Réponse #3 le:** 23 octobre 2024 à 18:50:46 »

Ton PC n°1 synchronise bien à 10Gb/s?
Tu as regardé le taux d'utilisation du processeur, sur le PC n°1 qui n'est pas assez rapide, pendant les transferts? Tu satures un coeur par exemple?

Leon.

Lucius Snow · « **Réponse #4 le:** 23 octobre 2024 à 18:51:31 »

Non ça ne vient pas de là. J'ai 64 coeurs.

Leon · « **Réponse #5 le:** 23 octobre 2024 à 18:52:36 »

Citation de: Lucius Snow le 23 octobre 2024 à 18:51:31

Non ça ne vient pas de là. J'ai 64 coeurs.

Justement, si l'application est monothread (par opposition à multithread), il est possible qu'elle sature un coeur unique.
Un processeur massivement multicoeur (64) est très souvent moins performant en mono-thread qu'un processeur à 6 coeurs par exemple.
Donc il est possible que l'appli soit plus rapide sur un processeur 4 fois moins cher.

Leon.

Lucius Snow · « **Réponse #6 le:** 23 octobre 2024 à 19:56:30 »

Ce n'est pas une application vraiment, ça part d'une simple page HTTPS sous Chrome. Ca donne ça :

J'avais testé avec Firefox aussi.

Si c'est une histoire de coeurs, alors ça signifierait que FromSmash ait changé quelque chose dans le code de leur page. Mais selon eux, rien n'a bougé entre le moment où j'uploadais à 2 Gb/s et la limitation actuelle de moitié.

La même chose depuis un upload sur frame.io qui monte à 2 Gb/s (en effet, on n'atteint pas les 100 % sur les coeurs) :

Leon · « **Réponse #7 le:** 23 octobre 2024 à 22:27:48 »

Les 2 coeurs à 100%, c'est très parlant. Ca sature, ça limite.
Le Threadripper 3990X a un score passmark-single-thread à 2500. C'est correct mais sans plus;
https://www.cpubenchmark.net/cpu.php?cpu=AMD+Ryzen+Threadripper+3990X

Sur des CPU 5 à 10 fois moins cher, on fait mieux en single thread.
Je te laisse comparer avec le score passmark-single-thread de ton PC portable; si c'est un PC portable moderne et/ou gaming, je n'ai pas trop de doute, le PC portable sera meilleur en single thread.
Ca ne donnera pas une conclusion définitive, mais une tendance, une piste.

Dans le "moniteur de ressources windows" tu devrai pouvoir vérifier quelles tâches provoquent les 100% sur 1 coeur.

Et il serait intéressant de comparer toute la chaine logicielle / matérielle, comme le propose Vivien.
- avec l'installation exacte du PC portable bootée sur le fixe; directement avec le SSD du portable sur le fixe
- voir si ça n'est pas un driver réseau ou un firewall à la ramasse sur le PC fixe
- vérifier toutes les extensions du navigateur

Leon.

Lucius Snow · « **Réponse #8 le:** 23 octobre 2024 à 22:33:38 »

Comme je le disais, j'ai bien 2 Gb/s avec exactement la même configuration mais sur un autre site Internet.

Donc comment expliquer que parfois les coeurs montent à 64 % et d'autres fois à 100 % ? C'est le développement de la page web ? La configuration du navigateur ?

Tarkok · « **Réponse #9 le:** 23 octobre 2024 à 23:08:35 »

Selon le protocole utilisé, la façon dont la page est faite, la façon dont le navigateur la lit (dépend donc de la version du navigateur et du moteur de rendu), cela peut être plus ou moins performant dans un contexte multi-cœur.

Lucius Snow · « **Réponse #10 le:** 23 octobre 2024 à 23:32:39 »

Merci. Ca semble bien en tout cas un souci de threads.

En bidouillant des paramètres avancés sous Chrome : pas de changement.
En bidouillant des paramètres avancés sous Firefox : 200 Mbit/s de plus que Chrome

Il reste 800 Mbit/s perdus dans la nature.

Le protocole, c'est toujours du HTTPS quelque soit la page web, non ?

Merci.

Leon · « **Réponse #11 le:** 24 octobre 2024 à 06:17:15 »

Citation de: Lucius Snow le 23 octobre 2024 à 23:32:39

Le protocole, c'est toujours du HTTPS quelque soit la page web, non ?

C'est beaucoup plus compliqué que ça. Il y a plein de méthodes pour transférer des fichiers via HTTPS.

En tout cas, tu as un début de solution : utiliser une machine plus performante (en single-thread) que ton ThreadRipper 3990X. Perso, ça m'intéresse de savoir pour quelle application tu utilises un tel CPU peu commun à 64 coeurs; une station de travail pour faire tourner des appli lourdes? De la virtualisation?
J'ai cru lire dans un autre sujet que tu était professionnel dans la création de vidéo, c'est sans doute ça.

Et si FromSmash propose une applications Windows, ça sera sans doute plus performant que passer via un navigateur web.
Sinon, change de service de partage de fichiers. Essaye Hetzner par exemple (je ne sais pas dire si on dépasse 1Gb/s avec, je n'ai ni le matériel ni la connexion pour tester).

Sinon, tu ne nous as pas répondu sur les 2 sujets suivants
- as-tu des extensions de navigateur? un firewall?
- as-tu regardé dans le "moniteur de ressources windows" pour voir quelle tâche/appli saturait tes 2 coeurs? C'est ton navigateur (FireFox / Edge / Chrome) dans les 2 cas?
- tu as essayé avec Chrome?

Leon.