Auteur Sujet: Étude nPerf sur l’autoroute A7  (Lu 10692 fois)

0 Membres et 1 Invité sur ce sujet

yapret

  • AS203382 Oxid Telecom
  • Expert
  • *
  • Messages: 135
  • Saint-Cyr (71)
Étude nPerf sur l’autoroute A7
« Réponse #24 le: 12 juillet 2016 à 13:31:53 »
Le problème que je vois, c'est qu'on se retrouve avec des écarts énormes avec les chiffres de l'ARCEP. Dans ces conditions, à qui se fier ? Lequel des deux peut prétendre mesurer avec exactitude la couverture/performance des opérateurs ?

Nico

  • Modérateur
  • *
  • Messages: 44 449
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Étude nPerf sur l’autoroute A7
« Réponse #25 le: 12 juillet 2016 à 14:01:53 »
Je viens d'ouvrir les rapports des 2 sociétés ayant travaillé pour l'ARCEP, on trouve :
- iPhone 5S / Samsung Galaxy S6 Edge (4G) chez Directique
- Samsung Galaxy S5 / iPhone 5s / Samsung Galaxy S6 (4G) / iPhone 6s (4G) chez QoSi (4GMark)

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
Étude nPerf sur l’autoroute A7
« Réponse #26 le: 12 juillet 2016 à 14:11:30 »
Le problème que je vois, c'est qu'on se retrouve avec des écarts énormes avec les chiffres de l'ARCEP. Dans ces conditions, à qui se fier ? Lequel des deux peut prétendre mesurer avec exactitude la couverture/performance des opérateurs ?

" L'exactitude " ca n'existe pas dans ce domaine qui est assez aléatoire. Ce sont des états des lieux réalisés à des instant T.
On le voit avec la remarque sur les perturbations autour des antennes Orange signalé dans le document.

Pour avoir des tests précis et à jour, il faudrait des sondes fixes sur tout le territoire qui mesure en permanence la qualité des réseaux.


Nico

  • Modérateur
  • *
  • Messages: 44 449
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Étude nPerf sur l’autoroute A7
« Réponse #27 le: 12 juillet 2016 à 14:14:36 »
Pour avoir des tests précis et à jour, il faudrait des sondes fixes sur tout le territoire qui mesure en permanence la qualité des réseaux.
Je pense qu'on s'oriente plus vers le crowdsourcing que la pose de sondes fixes.

yapret

  • AS203382 Oxid Telecom
  • Expert
  • *
  • Messages: 135
  • Saint-Cyr (71)
Étude nPerf sur l’autoroute A7
« Réponse #28 le: 12 juillet 2016 à 14:20:26 »
" L'exactitude " ca n'existe pas dans ce domaine qui est assez aléatoire. Ce sont des états des lieux réalisés à des instant T.

Eh bien justement, il faut que les états des lieux réalisés à des instants T reflètent la réalité à cet endroit en cet instant. Si les entreprises mandatées par l'ARCEP et nPerf refont leurs tests ensemble au même moment, il y a fort à parier que l'on constatera des écarts similaires (mais le résultat sera biaisé aussi, parce qu'on aura 3 smartphones au lieu d'un à faire des speedtests sur la même antenne).

+1 pour le crowdsourcing, les solutions comme Sensorly, 4GMark ou même la carte nPerf qui sont alimentées par des milliers/millions de mesures faites par les utilisateurs constituent pour moi des sources d'information plutôt fiables.

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
Étude nPerf sur l’autoroute A7
« Réponse #29 le: 12 juillet 2016 à 14:27:48 »
Les résultats sont pas biaisés puisque le matériel utilisé est identique lors des tests de chaque opérateur.
nperf utilise 4 mobiles identiques pour tester les 4 opérateurs au même instant. Rien n'est biaisé.

C'est l'homogénéité des tests d'un même organisme qui compte.

Qu'il y ait des différences de mesures entre deux protocoles de tests différents, c'est logique.
Mais au final on voit bien que les résultats restent cohérents dans l'ensemble des tests, Orange est premier, Free est dernier. La logique est respecté.

Sn@ke

  • Officiel nPerf.com
  • Professionnel des télécoms
  • *
  • Messages: 566
  • Lyon (69)
    • nPerf
Étude nPerf sur l’autoroute A7
« Réponse #30 le: 12 juillet 2016 à 14:45:28 »
Concernant Wiko, ils ont eu la gentillesse de nous prêter les terminaux, Samsung n'ayant pas donné suite à nos demandes (étonnant !). Et on a pas les moyens de l'ARCEP pour mener ce genre de campagnes :) (eux, c'est facile ils utilisent nos sous à tous hein)

Effectivement, les protocoles de tests ne sont pas les mêmes, les tests réalisés sont différents également. C'est très délicat de comparer les chiffres d'une étude à l'autre. Cependant la comparaison des opérateurs au sein d'une même étude reste valable. Il ne faut pas oublier également que les tests sont réalisés à un instant T, le lendemain, ça peut être légèrement différent.

Chez nPerf on a pas vocation à sillonner toute la France pour faire des tests, l'objectif étant plus de faire connaître l'application par des zooms sur des usages typiques qui intéressent les Français. Ensuite c'est le crowdsourcing qui nous intéresse, avec plus d'1M de tests par mois, on a encore beaucoup de choses à faire dans ce domaine ;)

yapret

  • AS203382 Oxid Telecom
  • Expert
  • *
  • Messages: 135
  • Saint-Cyr (71)
Étude nPerf sur l’autoroute A7
« Réponse #31 le: 12 juillet 2016 à 14:53:36 »
Phach : Non, justement, la logique n'est pas respectée. Sur le taux de 4G par exemple, là où l'étude nPerf donne 28,3 % de tests effectués en 4G sur le réseau Orange, l'ARCEP trouve 64 %. 35,7 points de différence, c'est énorme.

Les classements ne sont donc pas les mêmes sur ce critère :
Orange / SFR / Bouygues Télécom / Free pour l'ARCEP
Bouygues Télécom / Free / Orange / SFR pour nPerf

Côté taux d'échec, si le classement final se rejoint bien, c'est de peu : les 3 gros ont des résultats très similaires (entre 1 et 2 points de différence) dans les tests de l'ARCEP. Là encore, 35 points de différence entre les résultats des deux entités sur le réseau Free (cette différence est plus logique, puisque les protocoles de test ne sont pas les mêmes).

Sn@ke : Merci de tes précisions concernant la situation avec Wiko :)

Nico

  • Modérateur
  • *
  • Messages: 44 449
  • FTTH 1000/500 sur Paris 15ème (75)
    • @_GaLaK_
Étude nPerf sur l’autoroute A7
« Réponse #32 le: 12 juillet 2016 à 14:54:01 »
C'est très délicat de comparer les chiffres d'une étude à l'autre.
C'est vrai car la méthodologie diffère pas mal, après je trouve l'écart de "taux de 4G" vraiment élevé ! Et pour le coup ce chiffre là ne devrait pas être très dépendant de la méthodologie de chacun à mon sens.

Phach

  • Abonné Orange Fibre
  • *
  • Messages: 1 031
  • Hérault (34) - Occitanie
Étude nPerf sur l’autoroute A7
« Réponse #33 le: 12 juillet 2016 à 15:08:01 »
Phach : Non, justement, la logique n'est pas respectée. Sur le taux de 4G par exemple, là où l'étude nPerf donne 28,3 % de tests effectués en 4G sur le réseau Orange, l'ARCEP trouve 64 %. 35,7 points de différence, c'est énorme.

Je suis d'accord, c'est énorme et anormal, c'est pour ça qu'ils ont nuancé en expliquant que Orange avait constaté des perturbations sur leurs antennes durant la période du test de nperf :

Citer
Suite à cette étude, Orange nous indique rencontrer un problème d’interférences sur ses antennes situées le long de l’autoroute A7, impactant la qualité de son réseau. L’opérateur a déposé plusieurs plaintes auprès de l’Agence Nationale des Fréquences (ANFR) pour faire cesser ces brouillages.


Des chiffres qu'ils soient bons ou mauvais doivent être pris avec précautions quelque soit la source.
Rien de vaut l'expérience utilisateur. On n'a plus d'engagement sur les forfaits, si la qualité ne convient pas, on change. Le marché se régulera de lui même.

J'ai été chez FM, ca ne me convenait pas, j'ai changé de fournisseur.
Désormais, je suis chez Sosh depuis plusieurs mois, j'en suis extrêmement satisfait, j'ai pas de raison de changer.