Auteur Sujet: Étude nPerf sur l’autoroute A7 (Lu 13015 fois)

Boris de Bouygues Telecom · « **le:** 05 juillet 2016 à 11:18:34 »

Étude nPerf sur l’autoroute A7 : quel opérateur mobile propose la meilleure connexion entre Lyon et Marseille ?

À l’approche des grandes vacances, nPerf, l’outil spécialisé dans le test des connexions fixes et mobiles, a voulu mettre à l’épreuve les réseaux 2G, 3G et 4G des opérateurs sur l’autoroute A7 entre Lyon et Marseille.

L’équipe nPerf a donc mené une campagne de mesures et récolté plus de 600 tests via quatre smartphones Wiko Tommy équipés chacun de cartes SIM Orange, Bouygues Telecom, SFR et Free.

Débits descendant : près de 10 Mb/s pour Bouygues Telecom

Côté débit, c’est Bouygues Telecom qui offre les meilleures performances en approchant les 10 Mb/s en moyenne, suivi par Orange qui propose à ses abonnés un débit moyen de 8,65 Mb/s.

Streaming et navigation : Free est à la traîne

Notre application nPerf permet de tester le débit mais également les performances de streaming et de navigation. Sur ces points-là, Free est le mauvais élève. Son itinérance avec Orange lui permet certes de bénéficier de débits corrects, en revanche, la qualité de service fourni laisse à désirer.

Bouygues Telecom se démarque

Entre Lyon et Marseille, sur l’autoroute A7, ce sont Bouygues Telecom et Orange qui proposent les meilleures connexions. Tant au niveau du débit qu’en termes d’expérience utilisateur (navigation et streaming), les deux opérateurs distancent nettement SFR et Free. Mention spéciale à Bouygues Telecom qui se démarque sur le débit descendant.

Retrouvez l’ensemble de notre étude nPerf. (Méthodologie, graphiques et analyse.) sur la page dédiée.

Source : nPerf

cali · « **Réponse #1 le:** 05 juillet 2016 à 12:56:31 »

C'est complètement bidon. On sait même pas avec quel serveur ils font les tests, visiblement ils passent par l'Internet alors il n'y a pas que la qualité des antennes qui rentrent en compte.

Pour les tests de bande passante on sait pas si c'est du TCP/UDP ou autre, ni même combien de connexions parallèles sont lancées. La même chose pour la latence, on sait pas quelle machine ils pingent...

Pareil pour le terminal, un smartphone dont on ne connait pas le système d'exploitation ni les paramètres réseau.

Puis on ne parle pas de l'application non plus, certainement libre et open source.

kgersen · « **Réponse #2 le:** 05 juillet 2016 à 13:28:38 »

Citation de: cali le 05 juillet 2016 à 12:56:31

C'est complètement bidon. On sait même pas avec quel serveur ils font les tests, visiblement ils passent par l'Internet alors il n'y a pas que la qualité des antennes qui rentrent en compte.

Pour les tests de bande passante on sait pas si c'est du TCP/UDP ou autre, ni même combien de connexions parallèles sont lancées. La même chose pour la latence, on sait pas quelle machine ils pingent...

Pareil pour le terminal, un smartphone dont on ne connait pas le système d'exploitation ni les paramètres réseau.

Puis on ne parle pas de l'application non plus, certainement libre et open source.

En quoi c'est bidon si tout ces paramètres sont les memes pour les tests des 4 opérateurs ?

Après j’avoue que le code non open de l'application est le gros probleme des speedtest en général (surtout que nperf a un gros bug en mesure d'upload).

testing5555 · « **Réponse #3 le:** 05 juillet 2016 à 13:37:13 »

En même temps le taux d'échec ("c’est-à-dire le nombre de tests qui ont échoué faute de réseau mobile") est également plus grand chez Bouygues (14,91%) que chez Orange (9,21%).
De plus les tests ayant réussis sont à 62% fait en 4G pour Bouygues contre 28,3% chez Orange, on pourrait donc espérer un écart plus grand...

La conclusion "Bouygues Telecom propose la meilleure expérience connectée à ses utilisateurs" me paraît donc un peu orientée.
Car on pourrait très bien interpréter le résultat comme "Orange a la meilleur couverture et quasiment le meilleur débit moyen, Bouygues va un peu plus vite en moyenne mais couvre moins."

Surtout quand on voit le passage :

Citer

Suite à cette étude, Orange nous indique rencontrer un problème d’interférences sur ses antennes situées le long de l’autoroute A7, impactant la qualité de son réseau. L’opérateur a déposé plusieurs plaintes auprès de l’Agence Nationale des Fréquences (ANFR) pour faire cesser ces brouillages.

Les résultats me paraissent globalement similaires à ce qui se passe au niveau national : Orange 1er, Bouygues un peu derrière...

Phach · « **Réponse #4 le:** 05 juillet 2016 à 14:38:45 »

Citation de: kgersen le 05 juillet 2016 à 13:28:38

En quoi c'est bidon si tout ces paramètres sont les memes pour les tests des 4 opérateurs ?

pas mieux.

C'est de toute façon le genre de comparatif auxquels on va avoir de plus en plus droit avec la volonté de l'arcep de permettre aux consommateur de juger sur pièce avec des chiffres terrains.
Donc, sur le terrain, dans la vraie vie, à un instant t le résultat est tel que décrit plus haut.

alain_p · « **Réponse #5 le:** 05 juillet 2016 à 15:50:06 »

Citation de: Boris de Bouygues Telecom le 05 juillet 2016 à 11:18:34

Sur ces points-là, Free est le mauvais élève. Son itinérance avec Orange lui permet certes de bénéficier de débits corrects, en revanche, la qualité de service fourni laisse à désirer.

C'est simplement ce qui se passerait si freemobile ne bridait pas les tests de débits, mais tous les streaming, téléchargements de .avi etc... Donc s'il y avait du bridage par extension de fichier, ce qui avait été montré par ailleurs !

clean31 · « **Réponse #6 le:** 05 juillet 2016 à 16:28:08 »

Citer

En effet, si la connexion est mauvaise, le test peut échouer et ne sera donc pas pas comptabilisé comme test valide

Le fait de ne pas comptabiliser les tests en echec (débit 0) favorise par la méthode de calcul celui qui a un taux d'échecs plus important.
Au final l'écart est assez faible < 1 Mbit/s, ça aurait été intéressant de voir le résultat entre Orange et Bouygues si les échecs (plus nombreux pour bouygues) avaient été comptabilisés dans le calcul.

DM61 · « **Réponse #7 le:** 05 juillet 2016 à 21:54:28 »

C'est le lieu du test que je trouve contestable, le même test répété dans plusieurs ZND aurait été plus représentatifs pour mesurer les progrès apportés.
Bref, ce test n' apporte rien de nouveau.

Sn@ke · « **Réponse #8 le:** 07 juillet 2016 à 11:21:27 »

Citation de: clean31 le 05 juillet 2016 à 16:28:08

Le fait de ne pas comptabiliser les tests en echec (débit 0) favorise par la méthode de calcul celui qui a un taux d'échecs plus important.
Au final l'écart est assez faible < 1 Mbit/s, ça aurait été intéressant de voir le résultat entre Orange et Bouygues si les échecs (plus nombreux pour bouygues) avaient été comptabilisés dans le calcul.

Oui, mais quelle valeur apporter à un test en échec ? Si on met zéro, les débits ne veulent plus dire grand chose

Il est important d'avoir les deux indicateurs en vue : débit ET taux d’échec.

Sn@ke · « **Réponse #9 le:** 07 juillet 2016 à 11:23:29 »

Citation de: DM61 le 05 juillet 2016 à 21:54:28

C'est le lieu du test que je trouve contestable, le même test répété dans plusieurs ZND aurait été plus représentatifs pour mesurer les progrès apportés.
Bref, ce test n' apporte rien de nouveau.

C'est un drive test, comme pour le TGV Paris-Lyon. C'est un test ponctuel réalisé dans des conditions réelles. Ça intéressera principalement les personnes qui ont l'habitude de faire ces trajets bien entendu

clean31 · « **Réponse #10 le:** 07 juillet 2016 à 11:29:35 »

Citation de: Sn@ke le 07 juillet 2016 à 11:21:27

Oui, mais quelle valeur apporter à un test en échec ? Si on met zéro, les débits ne veulent plus dire grand chose
Il est important d'avoir les deux indicateurs en vue : débit ET taux d’échec.

On est d’accord

Les deux sont nécessaires pour garantir le sens du résultat.
Mais bien souvent il n'y a que le débit moyen qui est retenu ou mis en avant.

mccob · « **Réponse #11 le:** 11 juillet 2016 à 11:14:16 »

On notera que malgré les performances, selon nperf, Free avec ses fréquences 2600 (et un peu d'antennes 1800) aurait quasiment 10 points de couverture de plus qu'Orange sur l'autoroute A7.

On imagine qu'ils ont forcé la SIM de Free sur le réseau propre pour obtenir ce résultat.