Messages récents

Pages: 1 2 3 4 5 6 [7] 8 9 10

Tutoriels pour Ubuntu server / Script pour analyser le top 100 des IP des logs Apache

« Dernier message par vivien le Hier à 15:45:03 »

Pour lancer le script, il suffit de mettre en argument le fichier de log à analyser.

Par exemple : ./top100-ip.sh /var/log/apache2/access.log

Voici ce que cela donne sur ce forum, sur les logs du 3 juillet 2026 :

(cliquer sur l'image pour zoomer)

Uniquement des IPv4, pourtant le site écoute bien en IPv6, mais les IP qui sollicitent le plus Apache sont dans mon cas toutes des IPv4.

La première IP, c'est clairement du déni de service, qui est depuis bloquée.
Les deux IP suivantes sont les robots pour faire fonctionner les IA ChatGPT et Claude.
On a ensuite plusieurs IP d'un prétendu user-agent SleepBot qui va être bloqué.

Attention à bien vérifier que l'IP est cohérent avec le user agent affiché : il est possible qu'une personne mal intentionnée affiche un user-agent qui n'est pas le bon.

Tutoriels pour Ubuntu server / Script pour analyser le top 100 des IP des logs Apache

« Dernier message par vivien le Hier à 15:36:16 »

Script pour analyser le top 100 des IP des logs Apache

Cela fait partie de la base : Analyser les logs.

Le script ci-dessous permet d'identifier les 100 adresses qui font le plus de requêtes et d'afficher le user-agent associé.

C'est un script particulièrement optimisé pour sa vitesse d'exécution : tout est fait en une seule passe. Le corollaire, c'est qu'il faut stocker des informations en RAM.
Toutefois, on ne dépasse pas 500 Mo de RAM utilisé pour l'analyse d'un fichier de 4 Go, soit 20 millions de requêtes.

Éditer le fichier top100-ip.sh :

nano top100-ip.sh

Code: [Sélectionner]

#!/bin/bash
# 1. Vérification qu'un argument a bien été passé
if [ -z "$1" ]; then
    echo "Usage: $0 <fichier de log Apache à analyser>"
    echo "Exemple: $0 /var/log/apache2/access.log""
    exit 1
fi

# 2. Vérification de l'existence du fichier
if [ ! -f "$1" ]; then
    echo "Erreur : Le fichier '$LOG_FILE' est introuvable."
    echo "Usage : $0 [chemin_vers_le_fichier_log]"
    exit 1
fi

LOG_FILE=$1

echo "Analyse des 100 IP les plus actives dans : $LOG_FILE"
echo "---------------------------------------------------------------------------------------------------"
printf "%-10s | %-15s | %s\n" "Requêtes" "Adresse IP" "Premier User-Agent"
echo "---------------------------------------------------------------------------------------------------"

# 3. Analyse en une seule passe avec awk
awk -F'"' '
{
    # Dans awk avec -F"\"" , $1 contient toute la ligne jusqu au premier guillemet
    # On découpe ce $1 avec des espaces pour récupérer le premier mot (l adresse IP)
    split($1, parts, " ")
    ip = parts[1]

    # Si la ligne n est pas vide et qu une IP est trouvée
    if (ip != "") {
        # On incrémente le compteur pour cette IP
        count[ip]++

        # Si cest la première occurrence chronologique de cette IP, on mémorise le 6ème champ (User-Agent)
        if (count[ip] == 1) {
            ua[ip] = $6
        }
    }
}
END {
    # À la fin de la lecture, on affiche les résultats sous la forme : "compte IP user-agent"
    for (i in count) {
        printf "%d %s %s\n", count[i], i, ua[i]
    }
}' "$LOG_FILE" | sort -rn | head -n 100 | while read c ip agent; do
    # Formatage propre en colonnes (read assigne le reste de la ligne à la variable "agent")
    printf "%-10s | %-15s | %s\n" "$c" "$ip" "$agent"
done

Rendre le script exécutable : chmod +x top100-ip.sh

Mon script fonctionne avec les logs par défaut, mais également ceux avec le port source et la version de TLS que je recommande ci-dessous :

Citation de: vivien le 14 octobre 2021 à 09:18:57

4/ Recommandation BCP-162 / RFC6302 : Rajouter le port source dans les log d'Apache2

cf BCP-162: logs, CGNat et cybercriminalité
nano /etc/apache2/conf-available/log-personnalise.conf : Création d'une configuration de log qui inclue le port source, appelé "combiport"
Copier / coller le texte ci-dessous dans le fichier :
Code: [Sélectionner]
# Customized log with display of TCP source port (%{remote}p) and the SSL protocol version (TLSv1.2, TLSv1.3) for https or "-" for http (%{SSL_PROTOCOL}x) LogFormat "%h %{remote}p %{SSL_PROTOCOL}x %t \"%r\" %>s %O \"%{Referer}i\" \"%{User-Agent}i\"" combiport
a2enconf log-personnalise : Activation du fichier mis en place (il faut touefois appeler "combiport" lors du log)
sed -i -e "s/CustomLog \${APACHE_LOG_DIR}\/other_vhosts_access.log vhost_combined/CustomLog \${APACHE_LOG_DIR}\/other_vhosts_access.log vhost_combined/g" /etc/apache2/conf-available/other-vhosts-access-log.conf : configuration "combiport" pour ce fichier de log.

Exemple de log générés :
Code: [Sélectionner]
192.168.2.2 51020 - [10/May/2022:10:31:15 +0000] "GET /250Mi.iso HTTP/1.1" 200 262144279 "-" "curl/7.81.0" 192.168.2.2 40994 TLSv1.3 [10/May/2022:10:31:19 +0000] "GET /250Mi.iso HTTP/1.1" 200 262870026 "-" "curl/7.81.0" 192.168.2.2 40996 TLSv1.3 [10/May/2022:10:31:22 +0000] "GET /250Mi.iso HTTP/2.0" 200 262144209 "-" "curl/7.81.0" 192.168.1.3 50514 TLSv1.3 [10/May/2022:10:46:52 +0000] "GET / HTTP/2.0" 200 2078 "-" "Mozilla/5.0 (X11; Linux x86_64; rv:100.0) Gecko/20100101 Firefox/100.0"Le port destination n'est pas présent dans les logs, mais on le récupère avec la version du protocole SSL. 3 cas sont possibles :
- : c'est du http (donc le port 80)
TLSv1.2 : c'est du https (donc le port 443)
TLSv1.3 : c'est du https (donc le port 443)
La version du protocole SSL peut aider à séparer les requêtes inhabituelles de celles émanent de navigateurs web, tous avec TLS1.3 aujourd'hui.

Actu Free Mobile / Téléphones compatibles 4G VOLTE sur le réseau free mobile

« Dernier message par Sylvain_S le Hier à 14:38:49 »

Merci de vos réponses.

En ce qui concerne le TCL 4043 seulement compatible à l'étranger, j'ai regardé toute la liste donnée par free, c'est le seul dans ce cas. Donc je suppose (ou j'espère) que c'est une erreur.

A propos de cette liste, je pensais que c'était une liste de téléphones validés par free. Mais, c'est pas du tout le cas, c'est écrit que les données sont fournis par les constructeurs.

Il est un peu gros, un peu cher et j'aime pas trop les clapets, mais je pense partir sur le 4043. J'aurais préféré le 5041, mais j'ai trouvé pas mal de témoignages d'utilisateurs rapportant un problème d'écho pour le correspondant. Le haut parleur serait trop proche du micro. Je m'en sers que pour téléphoner, alors si cette fonction est défectueuse...

Et acheter un téléphone qui n'est pas vendu par free ou pas dans leur liste de compatibilité, c'est un peu comme jouer à la roulette russe, non ?
Le HMD 105 4G m'intéressait par exemple, mais comment savoir si il est compatible, à part l'essayer ou trouver quelqu'un qui l'utilise ? Si je demande au fabricant, ils vont me renvoyer vers free, et inversement.

Autre question: ma carte sim est une micro. Si je dois commander une nano pour le nouveau téléphone, est-ce que la nouvelle fonctionnera en parallèle de l'ancienne ou est-ce que l'ancienne sera automatiquement désactivée au moment où la nouvelle sera insérée dans le nouveau téléphone ?

Merci.

5G/4G Orange / Orange active la bande 2,1 GHz sur son réseau 5G SA

« Dernier message par ifranz67 le Hier à 14:31:12 »

Citation de: elroncubain le Hier à 14:04:48

Je ne pense que ça soit un problème lié a IOS, j'ai fais le test hier avec NetMonster qui ne m'affiche qu'une fréquence la plus haute des 2 a savoir la 3500 ... je doute aussi qu'il n'y ait pas d'agrégation sur IOS comme Android en 5G+

La nouvelle norme est bien prise en compte en agrégation ailleurs qu'en France

Oui ça marche bien chez Free mobile Bouygues et Sfr. J’ai testé avec free normalement j’ai bien du dual carrier. Chez orange y a bien un soucis avec ça sous iOS. Confirmé par le SAV technique de Orange D’ailleurs

Évolution de LaFibre.info, bugs et critiques / Des petits malins usurpent le robot d'indexation de Google, Googlebot

« Dernier message par acut3 le Hier à 14:17:13 »

Sur HackerNews quelqu'un a remarqué que la personne derrière le site abandonné https://sleepbot.com/ semble avoir travaillé pour la boite de "media intelligence" Zignal Labs (Wikipedia), ce qui implique du scrapping... Leur description sur LinkedIn dit "Agentic Intelligence for National Security".

Ce qui est étonnant c'est que le useragent "SleepBot" semble n'être apparu pour la 1ère fois qu'autour de mars de cette année, et il ne bosse plus chez Zignal Labs depuis 2019.

5G/4G Orange / Orange active la bande 2,1 GHz sur son réseau 5G SA

« Dernier message par elroncubain le Hier à 14:04:48 »

Citation de: ifranz67 le Hier à 11:08:40

Oui encore une fois c’est en bande mono. Tu ne peux pas faire 700 + 3500 !

Uniquement 700 en SA est rare mais ça arrive !

Je ne pense que ça soit un problème lié a IOS, j'ai fais le test hier avec NetMonster qui ne m'affiche qu'une fréquence la plus haute des 2 a savoir la 3500 ... je doute aussi qu'il n'y ait pas d'agrégation sur IOS comme Android en 5G+

La nouvelle norme est bien prise en compte en agrégation ailleurs qu'en France

MVNO / Cdiscount Mobile: Forfait 1 Go à 1,99€ /mois (pas seulement la première année)

« Dernier message par lgom le Hier à 13:25:12 »

Citation de: vivien le Hier à 07:44:05

20 Go de 5G pour 2€99, c'est imbattable comme prix !

Ils ont déjà fait (bien) plus intéressant.

Starlink / Passer par une agence spécialisée PrestaShop pour intégrer Starlink

« Dernier message par Leon le Hier à 13:16:51 »

Même avis que Buddy,
Si ton PrestaShop c'est pour une boutique en ligne, et que ton serveur est actuellement dans ton entrepôt en zone blanche, alors le meilleur conseil qu'on puisse te donner, c'est d'héberger ton serveur chez un hébergeur ou dans le Cloud, mais pas derrière une connexion Starlink.
Sinon, désolé, mais on ne comprends pas de quoi tu parles. Entre l’entrepôt et le serveur, il n'y a pas de "paiements" normalement...

Leon.

TV et codecs / Quel avenir pour la TNT ?

« Dernier message par jerome34 le Hier à 13:11:03 »

Citation de: Optix le 03 juillet 2026 à 18:55:14

Tout à fait.

Et c'est déjà un peu le cas cas en Allemagne d'ailleurs : la TNT ne transporte QUE les chaines publiques en clair, tout le reste est crypté/payant.

Peut être aussi parce que la TNT par voie terrestre en Allemagne, c’est 5% de l’audience… Et que le satellite te donne tout sans décodeur ni contrôle d’accès …

Starlink / Passer par une agence spécialisée PrestaShop pour intégrer Starlink

« Dernier message par buddy le Hier à 12:59:54 »

Bonjour,

la principale question est surtout, comment est ton architecture.
Ok tu as une boutique Prestashop et ton entrepot est en zone blanche, mais où est ton serveur qui fait tourner PRestashop ?
Dans l'entrepôt ?
Ne serait il pas plus logique d'avoir le serveur chez un hébergeur (OVH, Ionos, Scaleway,...), ainsi plus de soucis de latence et de transmettre les commandes finalisées / à expédier à ton entrepôt. (la latence serait donc moins critique).

Pages: 1 2 3 4 5 6 [7] 8 9 10