La Fibre

Fournisseurs d'accès à Internet mobile et 5G/4G fixe => 4G 5G Mobile => mobile QoS mobile => Discussion démarrée par: vivien le 07 juillet 2016 à 11:03:26

Titre: Baromètre nPerf mobile
Posté par: vivien le 07 juillet 2016 à 11:03:26
Baromètre nPerf des connexions mobiles

(https://lafibre.info/images/logo/logo_nperf.png)

Trimestre T4 2015 sur le mobile : (Cliquez sur la synthèse pour télécharger le rapport complet au format PDF)
(https://lafibre.info/images/barometre/201601_barometre_nperf_mobile_t4-2015.png) (https://lafibre.info/images/barometre/201601_barometre_nperf_mobile_t4-2015.pdf)
Titre: Baromètre nPerf mobile T1 2016
Posté par: vivien le 07 juillet 2016 à 11:04:11
Trimestre T1 2016 sur le mobile : (Cliquez sur la synthèse pour télécharger le rapport complet au format PDF)
(https://lafibre.info/images/barometre/201604_barometre_nperf_mobile_t1-2016.png) (https://lafibre.info/images/barometre/201604_barometre_nperf_mobile_t1-2016.pdf)
Titre: Baromètre nPerf mobile T2 2016
Posté par: vivien le 07 juillet 2016 à 11:04:35
Trimestre T2 2016 sur le mobile : (Cliquez sur la synthèse pour télécharger le rapport complet au format PDF)
(https://lafibre.info/images/barometre/201607_barometre_nperf_mobile_t2-2016.png) (https://lafibre.info/images/barometre/201607_barometre_nperf_mobile_t2-2016.pdf)
Titre: Baromètre nPerf mobile T3 2016
Posté par: vivien le 06 octobre 2016 à 14:03:12
Trimestre T3 2016 sur le mobile : (Cliquez sur la synthèse pour télécharger le rapport complet au format PDF)
(https://lafibre.info/images/barometre/201610_barometre_nperf_mobile_t3-2016.png) (https://lafibre.info/images/barometre/201610_barometre_nperf_mobile_t3-2016.pdf)
Titre: Baromètre nPerf mobile
Posté par: butler_fr le 06 octobre 2016 à 16:18:30
très étonné par le résultat entre bouygues et free

 ???
Titre: Baromètre nPerf mobile
Posté par: Phach le 06 octobre 2016 à 16:25:02
Y a t-il un effet des vacances d'été ?
avec les grandes villes désertés et donc leur réseau moins chargés ?
Titre: Baromètre nPerf mobile
Posté par: chantoine le 06 octobre 2016 à 17:26:07
Citation de: butler_fr le 06 octobre 2016 à 16:18:30
très étonné par le résultat entre bouygues et free

 ???

Très étonné par l'ensemble des résultats.

J'aimerais connaître les pondérations / échantillons / les contre-mesures adoptées pour prévenir les "bourrages d'urnes"...
Titre: Baromètre nPerf mobile
Posté par: vivien le 06 octobre 2016 à 18:55:05
Comme tu le vois, le score nperf (exprimé en point) dépend :
- 60% pour les tests QoS (débit down / débit up / latence)
- 40% pour les tests usages (navigation / streaming)

Dans les tests QoS, le débit down semble prendre une place importante.
Titre: Baromètre nPerf mobile
Posté par: chantoine le 06 octobre 2016 à 19:25:11
Oui, j'avais déjà remarqué la très forte pondération sur le down.

Il y a quelques mois j'avais comparé un réseau avec un fort down, un up très faible, et des performances très moyennes sur les autres tests ("réels"), et un réseau avec un down moins brillant et tout le reste bien au dessus, et c'était le premier qui sortait avec le plus de points.

Mais ce n'est qu'un aspect du problème. Certains outils de tests semblent clairement faire l'objet de ce que j'appelle un "bourrage d'urnes". On le voit très bien au nombre de tests, et au fait qu'ils sont "bien placés" et multipliés...
Titre: Baromètre nPerf mobile
Posté par: alegui le 06 octobre 2016 à 22:44:39
Le plus gros problème méthodologique c'est plutôt l'utilisation de la moyenne. Ici, un nombre réduit de tests très très bons peuvent effacer beaucoup de tests moyens voire médiocres. Il faudrait utiliser la médiane, (+ éventuellement des quartiles) pour représenter effectivement le ressenti moyen des gens.

Ici, on pourrait, par ailleurs, aussi rajouter un mécanisme pour limiter le phénomène de : "il y a un super débit, faisons plein de tests pour remonter la moyenne", qui doit probablement être à l'avantage d'un des quatre opérateurs...
Titre: Baromètre nPerf mobile
Posté par: vivien le 07 octobre 2016 à 08:41:55
Je suis un partisant de la médiane + 90centile + 10 centile, c'est ce que faisait l'ARCEP et c'est le mieux pour analyser les données.

Malheureusement, c'est un peu élitiste et pas mal de gens ne comprennent pas la médiane, c'est sans parler du centile.

Sur le fixe, plus de la moitié des tests sont réalisés en WiFi et là médiane va donc donner un débit en WiFi.

SpeedTest.net (le principal concurrent de nPerf avec 4Gmark sur le mobile) s'est mis à publié des données (aux USA uniquement pour le moment) et ils utilisent le 90centile qu'ils appellent "Top10%" pour le rendre  plu compréhensible du grand public. Cf https://www.speedtest.net/awards/methodology
On a alors uniquement des tests en Ethernet, sur l'offre la plus performante.
Titre: Baromètre nPerf mobile
Posté par: alegui le 07 octobre 2016 à 10:46:03
Citation de: vivien le 07 octobre 2016 à 08:41:55
Malheureusement, c'est un peu élitiste et pas mal de gens ne comprennent pas la médiane, c'est sans parler du centile.
Pour les centiles, c'est peut-être un peu compliqué. Mais pour la médiane, c'est assez simple à présenter (la moitié de gens sont au-dessus, la moitié au-dessous). Alors que la moyenne, tout le monde en entend parler depuis son plus jeune âge, mais au fond peu de personnes savent ce qu'elle veut vraiment dire en statistiques (= n'importe quoi si elle n'est pas accompagnée d'une série d'informations complexes à expliquer)
Titre: Baromètre nPerf mobile
Posté par: MystR30 le 07 février 2018 à 17:10:21
Nouveau baromètre nPerf pour l'année 2017 (https://www.degroupnews.com/operateurs/barometre-nperf-meilleur-internet-mobile-chez-orange-2017)