La Fibre

Fournisseurs d'accès à Internet mobile et 5G/4G fixe => 5G/4G Orange / Sosh => Orange 5G/4G Orange => Discussion démarrée par: Optrolight le 06 juillet 2012 à 19:04:31

Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Optrolight le 06 juillet 2012 à 19:04:31
Bonjour, je lance le sujet ici puisque c'est la seule section mobile.

Depuis 15H10 le réseau mobile orange connait une panne nationale. Les appels ne passent plus ainsi que les sms. Le phénomène est inter-mitant et les équipes techniques d'orange n'arrivent toujours pas à comprendre le problème.
Dans les commentaires sur PCinpact, certains signal aussi des difficultés sur le fixe.
Fibre coupée?
Cela serait facile à résoudre non?

https://www.nextinpact.com/news/72269-indisponibilites-sur-reseau-mobidorange-au-niveau-national.htm (https://www.nextinpact.com/news/72269-indisponibilites-sur-reseau-mobidorange-au-niveau-national.htm)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 19:24:08
Je pense pas qu'un fibercut puisse faire autant de dégâts sur le réseau d'Orange. Les réseaux mobiles sont pour le coup très peu centralisés.

Là ça marche à moitié, je me demande pas si c'est pas pire que si ça ne marchait pas du tout. Au moins les ingés sauraient plus facilement pourquoi!
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 06 juillet 2012 à 19:39:18
Le HLR est quand même centralisé... Une panne du HLR (Home Location Register), cette base de données qui fait le lien entre les abonnés et leurs droits d’usage sur le réseau de l’opérateur peux tout couper...

Le 17 novembre 2004, Bouygues Telecom avait été victime d’une panne liée à la HLR interdisant toute communication entrante ou sortante au niveau national.
Le 6 octobre 2008 une panne HLR avait mis trois millions d’abonnés de SFR dans la panade.

Là pour Orange on est visiblement dans un autre type de panne (sinon cela n'impacterait pas Free mobile qui a son propre HLR)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 19:45:48
Bah ça commence à parler de HLR > clic (https://twitter.com/CiNaxX/status/221291494311591938).

Mais justement le mec parle de plusieurs HLR, une panne nationale si visible sur un seul HLR j'y crois pas trop. J'ai pas de chiffres précis mais y en a quelques uns pour chacun des opérateurs.

Pour SFR par exemple y a quoi, 20M d'abonnés mobile ? 3M c'est "que" 1/7...

Et pour FM impacté, ça peut être l'effet domino des pannes, avec d'autres trucs qui saturent.
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Optrolight le 06 juillet 2012 à 20:10:16
Sur free mobile soit les appels sont jetés soit il y a une sonnerie d'occupé.

Antwan sur pci rapport le ticket interne:

"Le ticket réseau interne à 20h03 :

Date de création : 06-07-2012 16:03
Date de début : 06-07-2012 15:15
Date de fin prévue :   06-07-2012 20:00

Les services mobile suivants sont perturbés pour tous les clients mobile :
- Appels voix : 40% des appels enrtrant échouent sans redirection vers la Messagerie Vocale.
- SMS / MMS : 40 % des SMS et des MMS sont retardés à l'envoi et à la réception.
- Messagerie Vocale 888 : 40% des notifications par SMS des clients de la messagerie vocale 888 sont retardées.
- Environ 50% de perturbation pour l'USSD (baisse de volumetrie, client rejeté directement lors de l'envoi de sa demande)
- Sur les SVI selfcare, les lignes vers le SVI 700 (appels en centre clients) sont saturés, plus du double du volume habituel.
- Certains clients dont le service nécessite une relocalisation (mobilité, demande d'authentification) n'ont plus accès à l'ensemble de leurs services mobile (voix, data, visio).

Un dysfonctionnement réseau est suspecté."



Antwan si tu passes par là peux tu nous en dire plus sur ce tiket interne !!
ps: j'adore la conclusion du ticket !!! Surement un génie l'auteur !!!


Edit: les tech d'orange n'ont toujours pas trouvé l'origine de la panne. Les JT en parle et la ministre suit le dossier !!!

Panne d'orange, qui a déployer Flame sur le réseau?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 06 juillet 2012 à 21:35:29
J'ai fait 3 appels via FM à l'instant :
1er appel : je peux laisser un message sur un répondeur, mais le message est parfaitement silencieux (oscillo plat)
2e appel : je peux faire sonner un tél, dès que je décroche le tél, ça coupe
3e appel : ça marche! j'entends ma propre voix dans le haut parleur!
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 06 juillet 2012 à 22:38:27
Certains parlent également d'une panne liée a Free Mobile...
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 22:41:14
Certains parlent également d'une panne liée a Free Mobile...
J'ai lu ça mais c'était de manière humoristique pour trouver une excuse à Orange.

Sinon ici j'ai récupéré voix/sms, mais toujours pas de data. A suivre.

Confirmation par qqn d'Orange qui est sur le pont :
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 06 juillet 2012 à 22:41:50
Un dysfonctionnement réseau est suspecté."
Pour moi ça ressemble plus à une panne collective simultanée de tous les terminaux.

Une épidémie, quoi.

J'ai lu ça mais c'était de manière humoristique pour trouver une excuse à Orange.
Tout est lié à FM, toujours.

Les pannes chez Orange (y compris en FTTH), la crise économique, l'averse de cette aprèm sur Paris.

Au fait, est-ce que ça peut être lié à cette averse?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 06 juillet 2012 à 22:46:30
Sur twitter, ‏@fuktop13 écrit "EXCLU #Orange => recours d'un syndicat au Conseil d'État et envoi d'huissier au siège social du groupe !"

C'est a propos de la panne ou c'est HS ?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 22:47:31
Euh, plutôt à propos de la plainte (ou un truc du genre) pour les suicides non ?

(ou une blague, on est trolldi quand même !)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 06 juillet 2012 à 22:50:08
Un recours contre une panne, je dis YES.

(Et après je déménage en Californie.)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 22:51:50
Un peu difficile de déceler le signal du bruit sur Twitter vu certains commentaires :)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 06 juillet 2012 à 22:52:58
J'y connais rien à ce machin.

Il y a un cleanfeed pour le petit oiseau?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 06 juillet 2012 à 22:53:07
Fleur PELLERIN est actuellement a la cellule de crise Orange 101, Boulevard Brune 75014 PARIS.

Pour ceux qui connaissent, c'est un bunker qui abrite aussi un NRA et le centre de supervision de la région "01" (La France est séparée en 5 régions telecom correspondants aux deux premiers chiffres des N° de fixe)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 06 juillet 2012 à 22:55:46
Il y a un cleanfeed pour le petit oiseau?
Une bonne sélection de following, je ne vois que ça.

@vivien : J'ai ri en lisant ça tout à l'heure...
Titre: bne75 rules!!!!
Posté par: corrector le 06 juillet 2012 à 23:32:38
Fleur PELLERIN est actuellement a la cellule de crise Orange 101, Boulevard Brune 75014 PARIS.

Pour ceux qui connaissent, c'est un bunker qui abrite aussi un NRA et le centre de supervision de la région "01" (La France est séparée en 5 régions telecom correspondants au deux premiers chiffres des N° de fixe)
Je ne savais bien que bne75 était un centre essentiel :
- supervision des 01
- supervision des mobiles
- et surtout mon NRA
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: butler_fr le 07 juillet 2012 à 02:38:19
panne réglé vers 0h30 d'après orange:

Services mobile
A 00h30, les services voix et SMS d'Orange sont revenus à la normale après ce grave incident. Les services de transmission de données reviennent progressivement à la normale. Cet incident rarissime a été provoqué par une panne logicielle sur un équipement essentiel du réseau. Plus de 200 ingénieurs et techniciens se sont mobilisés immédiatement pour mener les investigations techniques nécessaires et résoudre cet incident. Orange présente ses excuses à tous ses clients et partenaires pour les conséquences de ce grave incident et travaille à une indemnisation de ses clients.

source: Orange (http://assistance.orange.fr/infos-incidents-mobile)

une idée de ce qui a déconné?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 07 juillet 2012 à 02:41:23
Citer
Plus de 200 ingénieurs et techniciens se sont mobilisés immédiatement
et une Ministre!
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 07 juillet 2012 à 05:05:50
Les JT en parle et la ministre suit le dossier !!!
Parce qu'elle est abonnée chez Orange.
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: menet le 07 juillet 2012 à 07:04:27
Ce matin je confirme que c'est bon. :P
J'ai reçu un SMS de spam d'une certaine "Elodie" qui m'avait laissé un message à écouter en faisant le 0899.....  >:(
J'ai déjà eu ce type de SMS. je suppose que c'est sans rapport mais on ne sait jamais.

J'ai enfin pu écouter un message professionnel reçu avant 16H00 sur le répondeur que je ne pouvais pas aller écouter avant à cause de l'absence de réseau.  :(

Bon week-end.  ;)
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 07 juillet 2012 à 07:53:59
Mise a jour a 5h05 ce matin (7 juillet) :

Le réseau mobile d'Orange en France a été touché, vendredi 6 juillet par une panne logicielle sur un équipement essentiel du réseau entraînant de fortes perturbations pour ses clients. Les clients d'Orange, sur tout le territoire, ont rencontré de grandes difficultés pour passer des appels et envoyer des sms entre 15h00 et 00h30. Quant à l'internet mobile, les difficultés ont persisté jusqu’à 03h20, heure du retour à la normale. Les équipes techniques - plus de 200 ingénieurs et techniciens réseau – se sont mobilisées immédiatement pour mener les investigations techniques nécessaires et résoudre cet incident. Ils resteront en alerte toute la nuit et tout au long du week-end pour surveiller le réseau et surveiller l’évolution de la situation. Delphine Ernotte Cunci, Directrice Exécutive Orange France, Pierre Louette, Directeur Général Adjoint du Groupe et Thierry Bonhomme Directeur Exécutif en charge des Orange Labs ont rejoint le PC de crise du Centre de Supervision Réseau. Les investigations pour comprendre cet incident rarissime sont encore en cours. Orange présente ses excuses à tous ses clients pour les conséquences de ce grave incident et travaille à leur indemnisation.


Source : Orange (http://assistance.orange.fr/infos-incidents-mobile) le 07/07/2012 à 05h05
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: corrector le 07 juillet 2012 à 10:22:04
On ne sait toujours pas quel a été le rôle de la Ministre dans le solutionnement.

Surement essentiel.
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 07 juillet 2012 à 15:39:23
Sur la mailing-liste FRnOG, on ne vois que le HLR comme cause de la panne :

Dans un réseau mobile, il y a le réseau (BTS, MSC en 2G, NodeB, RNC en 3G, SGSN, GGSN, SMSC pour les deux) et puis il y a un instrument critique qui sait ou est l'utilisateur, ce qu'il a le droit de faire et comment l'authentifier : le HLR : Home Location Register. C'est une base de données accédée via les protocoles télécoms, avec comme clés d'index l'IMSI et le MSISDN de l'abonné.

Comme toute base de donnés, ben quand ça foire c'est la grosse M..., meme avec tous les mécanismes de réplication et de failover du monde. S'il faut remonter des backups, ben c'est long, dangereux, etc... Si les HLR sont en panne, plus d'authentification, plus d'appels, plus de SMS, plus de data parce que le SGSN ne peut plus vérifier le provisionning de l'abonné, plus rien.

Les mobiles enregistrés peuvent rester sur le réseau sans s'apercevoir de rien, mais dès qu'ils feront un appel, plouf.

Apres quand le HLR revient il y a un rush de demandes depuis les mobiles pour se réenregistrer, un rush de demandes depuis les SMSC pour délivrer ce qui est en file, etc... D'ou probablement une remise en route partielle, par morceaux, d'abord 2G, etc ...

Je ne travaille pas chez orange et je n'ai aucune idée de ce qui s'est passé, mais ils parlent d'un "incident logiciel majeur", et le HLR est le seul composant qu'on ne peut pas remplacer par un autre en quelques minutes.

A noter que Bouygues Telecom a eu une panne similaire en 2004 (octobre si je me rappelle bien) avec 10h de coupure aussi.

Dans le même registre, le plantage régulier des super-supernodes de Skype provoque exactement les mêmes effets : quand on ne sait plus localiser l'abonné, c'est mort.


Source : FRnOG (http://www.mail-archive.com/frnog@frnog.org/msg19357.html), le 7 juillet 2012 par Alain Thivillon
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 07 juillet 2012 à 18:11:35
Orange confirme la panne software sur le HLR.

Dédommagement des clients forfait: 1 journée gratuite + 1 place de ciné offerte en septembre

Ce serait donc des saturations sur la signalisation qui auraient impacté le réseau Free mobile ?
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: fab51 le 07 juillet 2012 à 23:25:20
hello,
pour ceux qui ne le savent pas le centre de Brune ne gère pas uniquement la zone 01 mais nationale...la supervision de trafic globale est centralisée et n'est pas découpée par région, après il existe des supervisions par zone pour chaque type d'équipement (commutateurs du réseau fixe, mobile, transmission, ADSL, Fibre, TV...) et des niveaux d'intervention par importance du problème à résoudre.
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Optrolight le 12 juillet 2012 à 20:58:05
Voici les explications de Stéphane Richard sur la panne de vendredi. Ceci est tiré de son audition devant la commission économique du parlement.

"D'où vient la panne ?

Tout d'abord, pour le patron d'Orange, « la réactivité technique de l'entreprise face au problème n'est pas critiquable ». L'opérateur, du fait du caractère nouveau et imprévisible de la panne et de la cause, ne pouvait résoudre plus rapidement l'incident a estimé Stéphane Richard.

La cause de la panne est bien d'origine logicielle a rapidement confirmé le PDG. Elle a affecté l'un des éléments principaux du réseau mobile, à savoir le coeur du réseau (le coeur du système), qui gère tous les abonnés, notamment leur localisation a t-il expliqué. Les autres opérateurs, dont Free Mobile, ne sont donc en rien responsables de la panne.
 
Techniquement, Orange dispose d'un HLR (Home Location Register) comprenant 27 machines. Plus précisèment, il y a deux types de machines : 6 machines dédiées à la base de données (back end), chacune d'entre elles étant triplée afin d'assurer le bon fonctionnement du réseau en cas de panne, soit 18 machines en tout. Enfin, il y a le "front end" comprenant 9 machines et qui n'est pas ici concerné par la panne.
 
Alcatel-Lucent est le fournisseur de ce HLR. Il s'agit d'un produit de dernière génération, mis en place en mai dernier a tenu à préciser Richard. Le matériel n'était donc pas obsolète. Néanmoins, une mise à jour du HLR a été réalisée 48h avant la panne. Il est ainsi fort probable que cette mise à jour soit la cause de ladite panne estime Stéphane Richard.
 
Et selon ce dernier, l'anomalie qui a été créée par cette mise à jour n'a créé aucune alerte. Peut-être s'agit-il d'un défaut de conception ou d'une défaillance humaine, le patron d'Orange n'en a aucune idée pour le moment. Le triplement des machines du back-end n'a donc pas servi puisque l'alerte automatique n'a pas été donnée."


Source: www.pcinpact.com (https://www.nextinpact.com/news/72366-panne-nationa-pdg-dorange-confirme-panne-logicielhlr.htm)


Enfin voici une vidéo explicative d'Orange :

https://lafibre.info/videos/orange/201207_orange_details_panne_hlr_6_juillet_2012.mp4
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: vivien le 12 juillet 2012 à 21:47:21
Très belle vidéo qui montre qu'il est possible de vulgariser pour que Mme michu comprenne.

L’architecture mobile est quand même assez complexe et cela fait drôle de voir le HLR juste derrière les antennes dans la vidéo d'Orange.

J'aime bien également la fin "La cause de ce dysfonctionnement logicielle est a présent parfaitement identifié. Tout est fait aujourd'hui pour prévenir ce type d'incident."
Titre: Panne national réseau mobile orange: free mobile impacté
Posté par: Nico le 12 juillet 2012 à 21:49:13
Tu penses qu'ils ont filé des conseils à O2 hier ?

Et oui c'est simplifié à fond mais franchement l'initiative est top. Hormis sur le dédommagement (et encore ça s'est pas trop vu) la com' a été très maitrisée et très bonne. Surtout vu l'ampleur de l'incident.