Auteur Sujet: Netflix propose du streaming responsable  (Lu 4104 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« le: 28 mars 2021 à 21:04:46 »
Présentation de Netflix "Streaming Entertainment to 200 Million Members Around the World" de mars 2021

C'est bien différent du rapport Arcep car là on ne parle pas directement d'impact environnemental du numérique, mais Netflix détaille son architecture CDN et on voit qu'avec les nouveaux CDN Flash, un unique serveur de 2U arrive à délivrer plus de 180 Gb/s, avec une charge CPU <50% (serveur avec un seul microprocesseur de 32 cœurs). La consommation d’énergie de l'ensemble peut être évalué à 200 watts, donc près de 1 watt par Gb/s. 180 Gb/s, permet d’accueillir 56 250 clients avec un débit moyen de 3,2 Mb/s, le débit moyen de Netflix observé en France.

Les slides de la présentation de Netflix :
(cliquez sur la miniature ci-dessous - le document est au format PDF)


Voici le replay de cette présentation en anglais sous-titré en Français :


vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #1 le: 28 mars 2021 à 21:09:09 »
Voici un extrait des slides les plus intéressants de cette présentation :



Open Connect est le CDN de Netflix, qui distribue les contenus vidéos :




vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #2 le: 28 mars 2021 à 21:09:36 »
Voici a quoi ressemblent les serveur qui diffusent les contenu populaires sur Netflix :




Le schéma classique où les données passent trois fois par le CPU :


vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #3 le: 28 mars 2021 à 21:13:21 »
Netflix a fait beaucoup de tunning et optimisation et est fier de nous montrer qu'il est capable de gérer 180 Gb/s avec un simple serveur mono CPU :




Exemple de carte réseau Intel gérant 200 Gb/s :


vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #4 le: 28 mars 2021 à 21:14:13 »
Les différents types de serveur de Netflix :






vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #5 le: 28 mars 2021 à 21:17:56 »
Quand ce sont des disques dur classiques, Netflix va jusqu'à optimiser en plaçant les contenu les plus populaires en périphérie du disque, afin de bénéficier d'une plus grande vitesse de lecture :






vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #6 le: 28 mars 2021 à 21:20:36 »
Netflx cherche aussi à déporter un maximum d'opération vers la carte réseau, comme TSO qui consiste à envoyer des paquets de 16 Ko à la carte réseau, qui se charge ensuite de les découper en des plus petits paquets de 1,5 Ko.

J'ai découvert que le chiffrement pouvait être réalisé par la carte réseau !






Le schéma optimisé, qui permet d’atteindre 180 Gb/s de contenu TLS sur un simple serveur mono-cpu :


vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #7 le: 15 mai 2022 à 12:01:29 »
Les serveurs 200 Gb/s flash sont proposés par Netflix aux opérateurs et sur leur site web : https://openconnect.netflix.com/fr_fr/appliances/#the-hardware

Un serveur permet 190 Gb/s, soit en moyenne 59400 strems simultanés (au débit moyen observé en France de 3,2 Mb/s par stream)

La consommation à pleine charge est de 400 watts, soit 0,0067 watts par stream.



vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #8 le: 10 juin 2022 à 12:56:52 »
Je suis très étonné par la comparaison "1h de Netflix = 40min de clim" qui semble complètement erronée de l'article PhonAndroid que je vous partage ci dessous.

PhonAndroid s'est basé sur l'article We finally know how bad for the environment your Netflix habit is du 15 mars 2021.




Netflix : 1 heure de streaming émet autant de CO2 que 40 minutes de climatisation

On connaît enfin les émissions exactes de CO2 de Netflix. Selon une étude, regarder sa série préférée pendant une heure revient à utiliser une climatisation pendant 40 minutes. Au total, ce sont 100 g de carbone qui sont rejetés durant cette période. La plateforme est en retard par rapport aux autres géants de la tech sur ce sujet.

[...] Jusqu’à présent, Netflix n’a jamais mentionné ses chiffres d’émission de CO2, et pour cause : il est sûrement le plus mauvais élève de la classe. Mais la plateforme a fini par sauter le pas et a dévoilé les résultats obtenus par DIMPACT, un outil de mesure développé par des chercheurs de l’Université de Bristol. On apprend ainsi qu’une heure de streaming en 2020 rejette l’équivalent de 100 g de C02. À titre de comparaison, c’est moins qu’une climatisation allumée pendant la même durée.

Netflix veut réduire ses émissions de CO2

Pour les utilisateurs, cette information permet de mieux prendre conscience de l’impact de leurs habitudes de consommation. Pour Netflix, le but est avant tout de déceler les éléments sur lesquels il peut agir pour limiter ses émissions. C’est en effet précisément le rôle de DIMPACT. L’outil se décline en 4 modules : streaming, publicité, diffusion et business. « Netflix ou toute autre plateforme ne peut pas simplement brancher un outil de mesure à son infrastructure pour évaluer ses émissions de carbone » explique Daniel Schien, l’un des créateurs de DIMPACT.

La technologie permet ainsi d’obtenir des informations détaillées sur le rôle de chaque module dans les émissions Scope 3, c’est-à-dire la pollution générée par l’entreprise et ses clients. Le module streaming, par exemple, consiste à créer une simulation de l’envoi du contenu d’un datacenter à l’appareil utilisé. « Pour les médias qui font du divertissement, Scope 3 correspond à la production de contenus, à [leur] diffusion et à [leur] consommation par les utilisateurs », précise Christian Tonnesen, consultant chez Carnstone, impliqué dans le projet.

Sur le même sujet —La Nintendo Switch est la console la plus écologique de cette génération

En d’autres termes, DIMPACT permet d’identifier les sources majeures d’émissions de CO2 afin d’aider les services à adapter leur fonctionnement pour les réduire. Dans le cas de Netflix, on pourrait par exemple imaginer des datacenters plus proches du lieu de consommation, un arrêt de lecture plus rapide ou encore un accord avec Amazon Web Services, son hébergeur. On ne connaît donc pas le détail de l’étude réalisée par la plateforme, mais sa commande montre la volonté de cette dernière à faire bonne figure sur ce sujet.

Netflix est en retard par rapport aux autres géants de la tech

Ce n’est pas un hasard si Netflix ouvre soudainement les yeux sur son impact écologique. D’autres grands groupes ont déjà communiqué leurs objectifs environnementaux, bien ambitieux à la lumière du manque d’action du service de streaming jusqu’à maintenant. Microsoft, notamment, a promis d’atteindre un bilan carbone négatif d’ici 2030, c’est-à-dire qu’il retirera plus de CO2 de l’atmosphère qu’il n’en produit. Apple se montre plus réservé en visant la neutralité carbone d’ici la même échéance. Facebook, de son côté, souhaite que tous ses fournisseurs suppriment leurs émissions. Enfin, Google prévoit de n’utiliser que des énergies renouvelables à l’avenir.

Netflix, quant à lui, se montre bien discret à propos de ses objectifs environnementaux. Aucune communication n’a encore été faite sur le sujet. Néanmoins, cette dernière pourrait être le signe d’un nouveau départ pour la plateforme. En visualisant précisément ses sources d’émissions, des mesures adéquates pourront être mises en place pour limiter son impact. Le service promet ainsi de dévoiler son plan d’action d’ici le printemps 2021. En attendant, d’autres plateformes manquent encore à l’appel. En 2019, DIMPACT a révélé que YouTube dégage 10 Mt de CO2 dans l’atmosphère chaque année, un chiffre qui pourrait être drastiquement réduit en écoutant sa musique sans la vidéo.


Source : PhonAndroid  Par Simon Aunai Le 18/03/2021

vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #9 le: 14 décembre 2022 à 12:11:24 »
Les optimisations de Netflix pour gérer 400 Gb/s (présentation de septembre 2021) ou 800 Gb/s (présentation de septembre 2022) sur un unique serveur.

(cliquez sur les miniatures ci-dessous - les documents sont au format PDF)
   

À noter que ce sont des démonstrations technologiques. Les serveurs proposés aux opérateurs continuent fin 2022 de gérer 200 Gb/s par serveur (pour une consommation pic de 400 watts, ce qui est limité pour un serveur de ce type avec 24 To de SSD).

vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #10 le: 14 décembre 2022 à 12:12:28 »
Quelle consommation électrique coté serveur quand on regarde Netflix ?



Le débit moyen nécessaire pour un client Netflix en France est de 3,4 Mb/s (source : Netflix ISP Speed index pour la France de novembre 2022).

Les serveurs Netflix pour les opérateurs de grande taille (cache Netflix > 1,5 Tb/s) de sont des "Flash Appliances" qui gèrent 190 Gb/s par serveur pour 400 watts consommés (source : Netflix Open Connect). Un serveur "Flash Appliances" permet en moyenne 55882 strems simultanés en France (190 Gb/s divisé par 3,4 Mb/s par stream).

La consommation à pleine charge de ces "Flash Appliances" est de 400 watts, soit 0,007 watts par stream. Il faut toutefois prendre en compte que les serveurs ne sont presque jamais chargés à ce maximum : la consommation est plus fiable le matin et les opérateurs prévoient de la redondance. Quand un serveur est moins chargé, il consomme moins, mais la baisse de la consommation n'est pas proportionnelle à la baisse de trafic : l'efficacité par stream baisse.

Il est raisonnable de multiplier ce chiffre par 4 pour avoir une consommation par stream moyenne réaliste coté serveur : cela donne 0,0286 watts par stream. Ces serveurs sont dans un datacenter ou un POP réseau, pas forcément un datacenter vertueux en termes de PUE. On va prendre un PUE de 1,5 pour l'exercice : La consommation est ainsi de 0,0429 watts par stream en incluant la climatisation, les onduleurs,... On reste cependant sous les 0,05 watts par stream coté serveur, pour Netflix chez un grand opérateur (équipé de "Flash Appliances").

Il faut ensuite rajouter la consommation réseau et surtout celle de la télévision utilisée pour regarder Netflix.

Pourquoi je parle de grands opérateurs uniquement ? Ces serveurs n'ont que 24 To chacun de SSD, ce qui ne permet pas d'avoir tout le catalogue de Netflix France dans tous les codecs et toutes les résolutions. Il faut en mettre 8 au minimum pour avoir tout le catalogue et donc ce type de serveur est pertinent quand le trafic Netflix dépasse 1 Tb/s)
Un ensemble de 8 serveurs flash permet d'envoyer 1520 Gb/s de trafic pour une consommation d'environ 3,2 kilowatts.

Un opérateur de taille moyenne va utiliser des serveurs avec plus de stockage : "Storage Appliances" (un mix de SSD pour le contenu populaire et de disque dur à plateau pour les contenus moins regardés) avec une efficacité inférieure : 650 watts consommés pour 96 Gb/s de trafic. Ici un unique serveur stock 360 To, et peut ainsi sans problème contenir l'ensemble du catalogue de Netflix France.

Ce serveur "Storage Appliances" permet de gérer 28235 stream en France, soit 0,023 watts par stream. Si on multiplie ce chiffre par 4 pour tenir compte qu'il n'est pas toujours chargé au maximum, cela fait une moyenne de 0,092 watts par stream. Si on prend un PUE de 1,5 pour l'exercice, la consommation est de 0,138 watts par stream en incluant la climatisation, les onduleurs,...

vivien

  • Administrateur
  • *
  • Messages: 47 079
    • Twitter LaFibre.info
Netflix propose du streaming responsable
« Réponse #11 le: 29 octobre 2023 à 17:37:49 »
Je vois que Netflix, n'a pas fait évoluer ses appliances OpenConnect (les serveurs de contenu Netflix) depuis l'année dernière (cf son site).