Auteur Sujet: 50G PON  (Lu 10614 fois)

Optix, vocograme, brupala et 6 Invités sur ce sujet

kgersen

  • Modérateur
  • Abonné Orange Fibre
  • *
  • Messages: 9 649
  • Paris (75)
50G PON
« Réponse #36 le: Aujourd'hui à 00:05:05 »
On peut envisagé un avenir ou l'IA va tirer la demande en bande passante local pour télécharger des modeles localement et ce meme en domestique.

Si l'IA a un avenir c'est:

- des grands datacenters remplis de GPU pour entrainer les modeles
- des GPU locaux au plus près de utilisateurs pour de l'inférence. On a déjà des PC 'IA' pouvant accueillir des modeles de 70Go (a base d'AMD Strix Halo par exemple) et voir plus donc dans l'avenir.

Ca veut dire transferer d'énormes flux , les modèles calculés dans les DC vers les PC des utilisateurs et ce assez vite pour que la maj d'un modèle ne prennent pas des heures. Donc peut-etre qu'un débit de 25Gbps voir plus aura son utilité meme en grand public.

Pour référence télécharger un modele de 70G sur un ligne actuelle de 8Gbps ca prend quand meme 1minute 15secs (quand le maillon lent est la connexion Internet ce qui n'est pas toujours le cas (testé a l'instant, un modele de 65Gb ca passe "qu'a" 6Gbps sur ma ligne a 8 Gbps).

Bon après c'est hautement spéculatif, l'avenir de l'IA si y'en a un c'est peut-être pas avec de l'inférence local mais du full cloud comme maintenant (j'en doute quand meme si tout les humains veulent faire de l'inférence faudra bien 'localiser' l'inférence...) ou bien l'IA dans sa forme actuelle n'a pas d'avenir du tout ;)

Le plus gros problème de débit actuellement c'est surtout le "bufferbloat". https://en.wikipedia.org/wiki/Bufferbloat

le bufferbloat c'est un probleme du passé du temps de l'ADSL ...

MaxLebled

  • Abonné Free fibre
  • *
  • Messages: 987
  • Rennes (35)
    • Site web
50G PON
« Réponse #37 le: Aujourd'hui à 01:35:01 »
le bufferbloat c'est un probleme du passé du temps de l'ADSL ...

Ça existe toujours, c'est juste que ça n'est plus du côté de la ligne, mais cantonné au réseau local et en Wi-Fi.

En pratique, c'est un problème auquel se heurtera une partie non-négligeable du grand public (surtout ceux qui font du jeu vidéo en ligne), sans trop comprendre pourquoi.

Leon

  • Abonné Bbox fibre
  • Modérateur
  • *
  • Messages: 6 681
50G PON
« Réponse #38 le: Aujourd'hui à 06:18:53 »
Bon après c'est hautement spéculatif, l'avenir de l'IA si y'en a un c'est peut-être pas avec de l'inférence local mais du full cloud comme maintenant (j'en doute quand meme si tout les humains veulent faire de l'inférence faudra bien 'localiser' l'inférence...) ou bien l'IA dans sa forme actuelle n'a pas d'avenir du tout ;)
Il me semble assez probable que la majorité de l'inférence se fasse dans le cloud, et que seul des inférences simples, avec de petits modèles, se fassent en local, dans la très grande majorité des cas.
La majorité des utilisateurs consomment de l'IA sur des smartphones ou des PC portable de boulot aux ressources très limitées, bien loin des 70Go de RAM dont tu parles.
Pour ces utilisateurs, il est beaucoup plus pertinent de faire transiter la donnée via les réseaux (voix, texte, image, vidéo), donc quelques Mo à chaque interaction, plutôt que de déplacer les modèles entiers, à coup de dizaines de Go.

Oui, les "stations de travail IA" qui arrivent sur le marché, elles vont se déployer, et elles auront besoin de gros débits; mais de mon point de vue ça restera un petit marché assez confidentiel. Soit pour des gens qui font des recherches et développements en IA, soit pour garantir un haut niveau de confidentialité en conservant les données en local exclusivement.

Leon.
« Modifié: Aujourd'hui à 10:12:06 par Leon »

vivien

  • Administrateur
  • *
  • Messages: 51 194
    • Bluesky LaFibre.info
50G PON
« Réponse #39 le: Aujourd'hui à 07:20:28 »
Certains pensent que l'IA va basculer sur de la vidéo, avec des transferts importants de vidéo pour la reconnaissance de l'environnement : au lieu de parler à l'IA, on va filmer.

Pegasus38

  • Abonné Orange Fibre
  • *
  • Messages: 1 992
50G PON
« Réponse #40 le: Aujourd'hui à 07:32:02 »
Imaginez si tous les flux de camera de surveillance au monde doivent passer par un serveur externe pour être analysé par l'IA. Mais 40Gb/s c'est toujours 10 fois trop, je suis sûr qu'il y a des datacenter avec beaucoup moins en 2025

brupala

  • Abonné Free fibre
  • *
  • Messages: 265
  • Tours (37)
50G PON
« Réponse #41 le: Aujourd'hui à 11:35:12 »
Imaginez si tous les flux de camera de surveillance au monde doivent passer par un serveur externe pour être analysé par l'IA. Mais 40Gb/s c'est toujours 10 fois trop, je suis sûr qu'il y a des datacenter avec beaucoup moins en 2025
Les fausses barbes vont devenir un accessoire de base, histoire de pousser toutes ces "données" (volées)  à la poubelle.
En plus de toutes les vidéos de faux créées par les mêmes outils, on se prépare à un monde construit sur du faux, mais qui pourrait tout de même devenir référence, belles gamelles en vue, quand on voit ce qui s'est produit en général quand on a voulu remplacer la nature avec tous ses équilibres délicats, construits sur des millions de millénaires d'expériences ratées, mais bien plus puissants que les calculs tous les GPU du monde main dans la main.