Auteur Sujet: Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet  (Lu 34726 fois)

0 Membres et 1 Invité sur ce sujet

BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #72 le: 04 octobre 2021 à 22:01:00 »
Coté cause, je note que ces 2 serveurs mettent plusieurs secondes avant de répondre avec leur message d'erreur:
- 2a03:2880:f130:83:face:b00c:0:25de
- 2a03:2880:f030:f:face:b00c:0:2

Sous-entendu, ils essayent de joindre le backend avant de tomber en timeout et d'afficher la page d'erreur.

On n'est donc pas sur une erreur BGP en bordure de réseau mais d'une partie du coeur de réseau, contenant aussi probablement le SI interne.
Ca explique pourquoi on n'a vu seulement 10 prefixes disparaitre mais ces 10-là tiennent quasi tout facebook.

vivien

  • Administrateur
  • *
  • Messages: 47 183
    • Twitter LaFibre.info
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #73 le: 04 octobre 2021 à 22:01:26 »
Les serveur SpeedTest de Massy voit effectivement plus de trafic que d'habitude :


BadMax

  • Client Free adsl
  • Expert
  • *
  • Messages: 3 481
  • Malissard (26)
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #74 le: 04 octobre 2021 à 22:03:30 »
J'ai des comportement incompréhensible sur des serveurs.

https://bouygues.testdebit.info/ reçois énormément de requêtes Apache sur le port 80 :

(ce serveur n'héberge que https://bouygues.testdebit.info/ )


Voici le contenu des log, c'est de l'Android en non strop a une vitesse fulgurante :

2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
37.165.80.205 35391 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; SM-N986B Build/RP1A.200720.012)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 38604 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 420 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:25 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
37.165.80.205 35391 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; SM-N986B Build/RP1A.200720.012)"
37.164.118.157 29605 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 10; YAL-L41 Build/HUAWEIYAL-L41)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 457 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb19:8b3d:c500:69ed:9e27:8f06:bb60 52658 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-N960F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
37.165.80.205 35391 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; SM-N986B Build/RP1A.200720.012)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 455 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:cb0c:83ec:cd00:7094:77ba:9eff:9229 49994 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 420 "-" "Dalvik/2.1.0 (Linux; U; Android 10; SM-G973F Build/QP1A.190711.020)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)"
2a01:e0a:9bf:e260:848d:426a:af4b:e662 39322 80 [04/Oct/2021:21:52:26 +0200] "GET /speedtest/random4000x4000.jpg HTTP/1.1" 302 456 "-" "Dalvik/2.1.0 (Linux; U; Android 11; Mi 9T Pro Build/RKQ1.200826.002)

C'est incompréhensible, le nom de domaine n'a jamais hébergé de serveur SpeedTest.

Pourquoi ton serveur répond des 302 ?
Il devrait répondre des 404.

butler_fr

  • Client Bbox adsl
  • Modérateur
  • *
  • Messages: 3 607
  • FTTH orange
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #75 le: 04 octobre 2021 à 22:04:30 »
Les experts ici disent que la propagation d’une mauvaise configuration est plausible, donc pour l’instant c’est la théorie retenue

totalement possible :)
visiblement il se passe ce que j'avais indiqué en page 1 et que j'ai déjà vécu.
dans mon cas une simple stack de switch qui se casse la figure et le secours qui ne bascule pas et on avait perdu l'accès à tout notre système d'information (les plans de câblage / emplacement des baies dans le DC / mails / messagerie interne /...).
à la suite de ça en plus de fixer le soucis de bascule et de créer un site de pra on a sorti le plan du datacenter en version papier (un bon gros catalogue ^^)

thedark

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 5 665
  • Réseau Covage
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #76 le: 04 octobre 2021 à 22:08:23 »

https://twitter.com/schrep/status/1445114730151043073

Citer
*Sincere* apologies to everyone impacted by outages of Facebook powered services right now.  We are experiencing networking issues and teams are working as fast as possible to debug and restore as fast as possible

vivien

  • Administrateur
  • *
  • Messages: 47 183
    • Twitter LaFibre.info
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #77 le: 04 octobre 2021 à 22:08:48 »
Pourquoi ton serveur répond des 302 ?
Il devrait répondre des 404.
J'ai mis un ErrorDocument 404 "https://bouygues.testdebit.info/" quand l'URL est en erreur.

C'est pas la bonne pratique ?

<VirtualHost *:80>
        ServerName "bouygues.testdebit.info"
        ServerAlias "ipv4.bouygues.testdebit.info"
        ServerAlias "ipv6.bouygues.testdebit.info"

        DocumentRoot "/home/net-test/tmpfs"
        <Directory "/home/net-test/tmpfs">
                DirectoryIndex index.html
                Options Indexes FollowSymLinks
                IndexOptions +SuppressDescription
                AllowOverride None
                #php_admin_flag engine off
                Require all granted
        </Directory>

        ErrorDocument 404 "https://bouygues.testdebit.info/"
        ErrorLog "${APACHE_LOG_DIR}/apache2-net-test-error.log"
        CustomLog "${APACHE_LOG_DIR}/apache2-net-test-http80-bouygues.log" combiport
</VirtualHost>

noabeuh

  • Abonné Orange adsl
  • *
  • Messages: 3
  • MARSILLARGUES 34
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #78 le: 04 octobre 2021 à 22:09:31 »
totalement possible :)
visiblement il se passe ce que j'avais indiqué en page 1 et que j'ai déjà vécu.
dans mon cas une simple stack de switch qui se casse la figure et le secours qui ne bascule pas et on avait perdu l'accès à tout notre système d'information (les plans de câblage / emplacement des baies dans le DC / mails / messagerie interne /...).
à la suite de ça en plus de fixer le soucis de bascule et de créer un site de pra on a sorti le plan du datacenter en version papier (un bon gros catalogue ^^)

Ok mais toute l'infra du groupe facebook ne peut pas tomber (?). On a là, le plus beau spof du siècle. GG le cto

mirtouf

  • Abonné Bbox fibre
  • *
  • Messages: 1 304
  • Chelles (77)
    • L'antre de la bête
PB DNS Facebook
« Réponse #79 le: 04 octobre 2021 à 22:10:51 »
J'espère que ça fera réfléchir tous les sites qui ont des scripts Facebook en arrière plan et qui rament comme pas possible.  ;D
oui, le cancer du web ce genre de trucs.

thedark

  • Abonné RED by SFR fibre FttH
  • *
  • Messages: 5 665
  • Réseau Covage
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #80 le: 04 octobre 2021 à 22:15:47 »
La bourse.


Johann

  • AS8218/AS6461 Zayo Europe
  • Professionnel des télécoms
  • *
  • Messages: 22
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #81 le: 04 octobre 2021 à 22:16:37 »
On n'est donc pas sur une erreur BGP en bordure de réseau mais d'une partie du coeur de réseau, contenant aussi probablement le SI interne.
Ca explique pourquoi on n'a vu seulement 10 prefixes disparaitre mais ces 10-là tiennent quasi tout facebook.

De mon côté, je m'aperçois que le nombre de préfixe que j'ai perdu dépend grandement de la localisation géographique.
Je ne reçois plus qu'un prefixe sur Zurich par exemple, deux sur Bruxelles, alors que je n'ai perdu que 6-7 préfixes sur Marseille, Amsterdam et Viennes.
Sur Paris, Londres ou Francfort on j'ai plus de préfixes (5-10 de plus) et j'en ai perdu environ 8-10.

Hors EU, j'en ai perdu 8-9 sur Washington, Singapour. Environ 7 sur Hong Kong, Sydney et Tokyo
Une douzaine sur Miami. J'ai pas les stats pour ailleurs sous la main.

JCLB

  • Abonné Orange Fibre
  • *
  • Messages: 53
  • Orléans (45)
Facebook / WhatApp HS suite à une suppression des routes BGP de l'internet
« Réponse #82 le: 04 octobre 2021 à 22:17:04 »
On parle des probables causes techniques, erreur de configuration BGP, mauvaise annonce RTBH comme c'est arrivé chez Cogent ou je ne sais plus qui l'année dernière,...
On lit ça et là que des ingés vont sur place en jet car il n'y a pas d'accès distant.
On voit ce fameux compte reddit cité partout et effacé depuis.

Je ne crois pas que FB n'ait pas d'Out of Band avec le listing minimal de survie au vu des têtes qu'ils emploient. On parle quand même d'une boite avec des gens qui écrivent des RFC.

Hier CBS diffusait un reportage avec une ancienne salariée faisant état du rollback sur les mécanismes anti fake news mis en place pendant la campagne US, au motif que ça diminué les revenus.
Bah oui, moins de sensationnel, moins de trafic, moins de fric.

Possiblement, en ultime protection, la société aurait pris la décision de lancer un vaste ménage, une mise à l'abime des éléments concernés et un redéploiement complet de ses algos dans leur état de janvier avec les ajustements nécessaires à l'évolution depuis.
On parle quand même du risque de l'enquête de trop du sénat US à venir.
Tout ça corroborant les efforts de FB d'empêcher les chercheurs de comprendre leur impact sur la société, et les récentes propositions de pairs de les aider à contourner cette forme de censure.

Je ne penche pas spécialement plus pour cette explication que les autres, mais je pense qu'elle doit être évoquée.

cmer

  • Abonné Free fibre
  • *
  • Messages: 51
  • Sainte-Radegonde 12