Auteur Sujet: Baromètre nPerf mobile  (Lu 6005 fois)

0 Membres et 1 Invité sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile
« le: 07 juillet 2016 à 11:03:26 »
Baromètre nPerf des connexions mobiles



Trimestre T4 2015 sur le mobile : (Cliquez sur la synthèse pour télécharger le rapport complet au format PDF)

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile T1 2016
« Réponse #1 le: 07 juillet 2016 à 11:04:11 »

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile T2 2016
« Réponse #2 le: 07 juillet 2016 à 11:04:35 »

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile T3 2016
« Réponse #3 le: 06 octobre 2016 à 14:03:12 »

butler_fr

  • Client Bbox adsl
  • Modérateur
  • *
  • Messages: 3 605
  • FTTH orange
Baromètre nPerf mobile
« Réponse #4 le: 06 octobre 2016 à 16:18:30 »
très étonné par le résultat entre bouygues et free

 ???

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
Baromètre nPerf mobile
« Réponse #5 le: 06 octobre 2016 à 16:25:02 »
Y a t-il un effet des vacances d'été ?
avec les grandes villes désertés et donc leur réseau moins chargés ?

chantoine

  • Abonné Bbox fibre
  • *
  • Messages: 1 940
  • 91
Baromètre nPerf mobile
« Réponse #6 le: 06 octobre 2016 à 17:26:07 »
très étonné par le résultat entre bouygues et free

 ???

Très étonné par l'ensemble des résultats.

J'aimerais connaître les pondérations / échantillons / les contre-mesures adoptées pour prévenir les "bourrages d'urnes"...

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile
« Réponse #7 le: 06 octobre 2016 à 18:55:05 »
Comme tu le vois, le score nperf (exprimé en point) dépend :
- 60% pour les tests QoS (débit down / débit up / latence)
- 40% pour les tests usages (navigation / streaming)

Dans les tests QoS, le débit down semble prendre une place importante.

chantoine

  • Abonné Bbox fibre
  • *
  • Messages: 1 940
  • 91
Baromètre nPerf mobile
« Réponse #8 le: 06 octobre 2016 à 19:25:11 »
Oui, j'avais déjà remarqué la très forte pondération sur le down.

Il y a quelques mois j'avais comparé un réseau avec un fort down, un up très faible, et des performances très moyennes sur les autres tests ("réels"), et un réseau avec un down moins brillant et tout le reste bien au dessus, et c'était le premier qui sortait avec le plus de points.

Mais ce n'est qu'un aspect du problème. Certains outils de tests semblent clairement faire l'objet de ce que j'appelle un "bourrage d'urnes". On le voit très bien au nombre de tests, et au fait qu'ils sont "bien placés" et multipliés...

alegui

  • Abonné Bbox fibre
  • *
  • Messages: 464
  • FTTH Courbevoie (92)
Baromètre nPerf mobile
« Réponse #9 le: 06 octobre 2016 à 22:44:39 »
Le plus gros problème méthodologique c'est plutôt l'utilisation de la moyenne. Ici, un nombre réduit de tests très très bons peuvent effacer beaucoup de tests moyens voire médiocres. Il faudrait utiliser la médiane, (+ éventuellement des quartiles) pour représenter effectivement le ressenti moyen des gens.

Ici, on pourrait, par ailleurs, aussi rajouter un mécanisme pour limiter le phénomène de : "il y a un super débit, faisons plein de tests pour remonter la moyenne", qui doit probablement être à l'avantage d'un des quatre opérateurs...

vivien

  • Administrateur
  • *
  • Messages: 47 078
    • Twitter LaFibre.info
Baromètre nPerf mobile
« Réponse #10 le: 07 octobre 2016 à 08:41:55 »
Je suis un partisant de la médiane + 90centile + 10 centile, c'est ce que faisait l'ARCEP et c'est le mieux pour analyser les données.

Malheureusement, c'est un peu élitiste et pas mal de gens ne comprennent pas la médiane, c'est sans parler du centile.

Sur le fixe, plus de la moitié des tests sont réalisés en WiFi et là médiane va donc donner un débit en WiFi.

SpeedTest.net (le principal concurrent de nPerf avec 4Gmark sur le mobile) s'est mis à publié des données (aux USA uniquement pour le moment) et ils utilisent le 90centile qu'ils appellent "Top10%" pour le rendre  plu compréhensible du grand public. Cf https://www.speedtest.net/awards/methodology
On a alors uniquement des tests en Ethernet, sur l'offre la plus performante.

alegui

  • Abonné Bbox fibre
  • *
  • Messages: 464
  • FTTH Courbevoie (92)
Baromètre nPerf mobile
« Réponse #11 le: 07 octobre 2016 à 10:46:03 »
Malheureusement, c'est un peu élitiste et pas mal de gens ne comprennent pas la médiane, c'est sans parler du centile.
Pour les centiles, c'est peut-être un peu compliqué. Mais pour la médiane, c'est assez simple à présenter (la moitié de gens sont au-dessus, la moitié au-dessous). Alors que la moyenne, tout le monde en entend parler depuis son plus jeune âge, mais au fond peu de personnes savent ce qu'elle veut vraiment dire en statistiques (= n'importe quoi si elle n'est pas accompagnée d'une série d'informations complexes à expliquer)