Je n'arrive pas à joindre 91.121.109.1 dans :

inetnum:        91.121.64.0 - 91.121.127.255
netname:        OVH
descr:          OVH SAS
descr:          Dedicated Servers

Voilà ce que j'ai :

  9    21 ms    20 ms    48 ms  th2-6k-2-1-po1.intf.nra.proxad.net [78.254.255.1]
 10    20 ms    21 ms    21 ms  th2-crs16-1-be1000.intf.routers.proxad.net [212.27.57.202]
 11     *        *        *     Délai d'attente de la demande dépassé.
 12     *        *        *     Délai d'attente de la demande dépassé.

TraceRoute from Network-Tools.com to 91.121.109.1 :

1      29      0      0         8.9.232.73     xe-5-3-0.edge3.dallas1.level3.net 
2      Timed out      0      1         4.69.145.14     ae-1-60.edge5.dallas3.level3.net 
3      Timed out      Timed out      0         178.32.135.25     dal-1-6k.tx.us 
4      Timed out      Timed out      Timed out              - 

Pas mieux en IPv6 :

inet6num:       2001:41d0::/40
netname:        OVH
descr:          OVH hosting infrastructures
descr:          https://www.ovh.com
country:        FR
admin-c:        OK217-RIPE
tech-c:         OTC2-RIPE
status:         ALLOCATED-BY-LIR
mnt-by:         OVH-MNT
mnt-lower:      OVH-MNT
source:         RIPE # Filtered

  2     *        *        *     Délai d'attente de la demande dépassé.
  3    21 ms    21 ms    21 ms  2a01:e00:1:13::1
  4     *        *        *     Délai d'attente de la demande dépassé.

Oui, c'est bien ça.

Gros plantage réseau chez OVH. Une maintenance majeure en pleine heure de pointe qui n'est pas maitrisée du tout. Sans doute une grosse partie RBX-1, voire tout RBX-1 est HS!

Et dire que c'est directement Octave Klaba qui est le responsable du réseau.

http://travaux.ovh.net/?do=details&id=9224

Commentaire de OVH - jeudi, 29 août 2013, 20:13
on a fini les routeurs du 1er vlan (70 routeurs)
mais il n'y a rien qui va.

les process OSPF ne veulent plus remonter. on
est en train de simplifier la configuration pour
eviter d'annocer tous les LSA puis redemarrer
les routeurs qui ont planté. on a déjà quelques
routeurs UP. mais il reste beaucoup à faire.


Commentaire de OVH - jeudi, 29 août 2013, 21:38
pendant qu'on essaie de remonter l'OSPF routeur
par routeur, on ajoute la configuration BGP pour
virer l'OSPF de ces petits routeurs.

Leon

je confirme ovh HS depuis chez moi entre 21h25 et 21h35
quelques autres pertes avant 22h

graph vers un kimsufi sur rbx1

Ah ouais, ça c'est vu !

Bonsoir Badmax,
L'on Dirais du Smokeping mais je ne connais pas cette probe,
pourrais tu m'en dire plus ?

Cordialement

Bensay

Compte rendu d'incident d'OVH.
J'en retiens : OVH planifie une grosse intervention dont il sait qu'elle aura des impacts clients en fin d'après-midi, au pic de consommation. De plus, OVH ne préviens pas ses clients, alors que certains pourraient prendre leur dispositions (ceux qui ont des serveurs chez plusieurs hébergeurs). Pour finir, ils ne parlent pas de l'indemnisation dans le post.
Bref, ça n'est pas professionnel du tout comme attitude.

Sur RBX1 nous avons une configuration de reseau
très particuliere qui se base sur 2 routeurs de RBX1
rbx-1-6k et rbx-2-6k. Ces 2 routeurs gere l'interco
d'environ 120-130 petits routeurs. C'est une archi
qui date de 2006 que nous n'avons qu'à RBX1 et la
particularité de cette configuration rendait toutes
les mise en place de nouveaux services complexes
(le VAC, le vrack etc). Il fallait qu'on simplifie
cette configuration en attendant de remplacer tous
ces routeurs par 4 gros, comme dans tous les autres
DC (les 4 routeurs sont arrivés il y a 2 semaines
et on pense faire la migration de RBX1 fin septembre).

On savait la simplification de cette configuration
allait avoir l'impact sur la disponibilité sur DC RBX1
et on savat qu'on allait devoir changer quelques
routeurs par les spares. On a donc preferé faire
l'inter dans la journée où nous avons le maximum
des staffs pour intervenir rapidement sur le hard.
et ça n'a pas loupé. Nous avons finalement dû virer
l'OSPF completement et mettre que le BGP.

88 routeurs ont été reconfigurés et il en reste encore 42.
On pourra pousser la configuration definitive sur
ces 42 derniers routeurs sans generer de pannes
nouvelles puis apres retirer l'ancienne conf. Après
le coup on se dit qu'on aurait dû faire ça dés le depart ..

Le probleme de RBX1 a impacté 2 autre routeurs qui
s'occupent du vrack 1.0 et qui n'ont pas été mis à jour
il y a 2-3 mois. Avec un uptime de plusieurs années
et les problemes d'aujourd'hui, nous avons eu la
fragmentation de la RAM et nous avons dû les redemarrer.

Les autres DC n'ont pas été impactés. Le probleme
concernait le DC RBX1 rt une partie de la soirée
le vrack 1.0 / IP LB. Le VAC1 ne fonctionnait pas
correctement durant une periode.

Nous sommes désolés pour la panne generées et sa durée.

Le coup de "on l'a fait en heure de pointe parce qu'on savait que ça risquait de foirer", il fallait oser...