Auteur Sujet: Des petits malins usurpent le robot d'indexation de Google, Googlebot  (Lu 4340 fois)

0 Membres et 3 Invités sur ce sujet

vivien

  • Administrateur
  • *
  • Messages: 53 022
    • Bluesky LaFibre.info
Des petits malins usurpent le robot d'indexation de Google, Googlebot
« Réponse #36 le: Aujourd'hui à 07:48:30 »
J'ai bloqué ce matin SleepBot. Cela va soulager le CPU.

Hier, il y a eu 782 457 requêtes, un record, donc la hausse n'était pas terminée...

Le robot a bien chargé robot.txt hier soir :

IPv4         Port src TLS        Date               Heure                       URL                                 code taille   referrer url                                 User Agent
34.66.8.7 44084 TLSv1.3 [04/Jul/2026:19:09:38 +0200] "GET /robots.txt HTTP/1.1" 200 584 "http://lafibre.info/robots.txt" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; SleepBot/1.0; +http://sleepbot.com/) Chrome/131.0.0.0 Safari/537.36"


Toutefois, il n'en a pas tenu compte. Cela a continué, même aujourd'hui avec l'IP qui a visité robots.txt

vivien

  • Administrateur
  • *
  • Messages: 53 022
    • Bluesky LaFibre.info
Des petits malins usurpent le robot d'indexation de Google, Googlebot
« Réponse #37 le: Aujourd'hui à 22:03:34 »
J'ai bloqué.

Voici l'impact du seul blocage de SleepBot/1.0 (j'ai mis une ligne rouge pour bien visualiser quand j'ai bloqué)







timpera

  • Abonné FAI autre
  • *
  • Messages: 411
  • Paris
Des petits malins usurpent le robot d'indexation de Google, Googlebot
« Réponse #38 le: Aujourd'hui à 22:13:12 »
C'est lunaire d'arriver à faire 780 000 requêtes par jour, ce robot est sacrément mal fait.

J'ai regardé par curiosité sur mon site internet personnel et il y a bien Sleepbot dans les logs, mais il se comporte bien, avec seulement ~50 requêtes par jour, soit infiniment moins que celles des autres robots d'IA (~10000/jour de la part d'OpenAI par exemple, principalement "ChatGPT-User").
Ça pique ma curiosité
Pareil, je suis également curieux d'avoir la réponse si jamais tu finis par trouver qui est derrière ça  ;D

timpera

  • Abonné FAI autre
  • *
  • Messages: 411
  • Paris
Des petits malins usurpent le robot d'indexation de Google, Googlebot
« Réponse #39 le: Aujourd'hui à 22:19:50 »
J'ai regardé les log et j'ai pris quelques IP suspectes qui viennent de faire du trafic il y a quelques secondes :
D'ailleurs, je vois que pas mal de ces IP sont enrôlées dans le service de proxy résidentiel NetNut (on peut le voir via le site ipinfo.io), qui a été victime d'une action conjointe du FBI et de Google il y a 3 jours : https://cloud.google.com/blog/topics/threat-intelligence/google-continued-disruption-residential-proxy-networks?hl=en
Citer
Nous estimons que nos actions coordonnées ont entraîné une dégradation significative du réseau de proxys de NetNut et de ses activités commerciales, réduisant de plusieurs millions le parc d’appareils disponibles pour l’opérateur de proxys. Outre la vente d’accès au réseau sous la marque NetNut, NetNut dispose d’un programme de revendeurs solide qui permet la commercialisation en marque blanche de son réseau. Google est convaincu que de nombreuses marques populaires de proxys résidentiels proposent en réalité le botnet de NetNut en marque blanche. Bien que nous nous attendions à ce que cette perturbation ait un effet d'entraînement plus important sur l'ensemble de l'écosystème des proxys résidentiels, les observations réalisées après la perturbation d'IPIDEA ont démontré que certains réseaux peuvent se montrer résilients. Nous avons constaté que, confrontés à la dégradation de leur propre botnet, les opérateurs de proxys commencent à acheter de la capacité auprès de leurs concurrents, devenant ainsi, de fait, des revendeurs.