Un script Python qui lit les logs d’accès de votre serveur web et en tire un rapport clair des pages et des erreurs

Exemple de résultat

python merge_sales.py --month 2026-10

2026-11-02 09:14:03 INFO  Dossier : sales/2026-10, 9 fichiers trouvés
2026-11-02 09:14:03 INFO  shop-01.csv : 1 284 lignes
2026-11-02 09:14:04 INFO  shop-02.xlsx : 967 lignes
2026-11-02 09:14:04 WARN  shop-07.csv : 3 lignes sans prix ignorées (lignes 88, 412, 913)
2026-11-02 09:14:05 INFO  Terminé : 10 412 lignes -> report-2026-10.xlsx (feuilles « Ventes » et « Totaux »)

[columns]
date = Date, Date de vente, Jour
product = Produit, Article, Désignation
quantity = Qté, Quantité, Pièces
price = Prix, Prix unitaire

def read_shop_file(path: Path, columns: dict[str, list[str]]) -> pd.DataFrame:
    """Lit le fichier d’une boutique et lui donne les noms de colonnes du rapport."""
    table = pd.read_excel(path) if path.suffix == ".xlsx" else pd.read_csv(path, encoding="utf-8-sig")
    renamed = {}
    for name, variants in columns.items():
        found = next((c for c in table.columns if c.strip() in variants), None)
        if found is None:
            raise ReportError(f"{path.name} : aucune colonne pour '{name}' (recherché : {', '.join(variants)})")
        renamed[found] = name
    table = table.rename(columns=renamed)[list(columns)]
    table["shop"] = path.stem
    return table

À propos de ce service

Votre serveur web note chaque requête dans son log d’accès, mais un fichier de millions de lignes ne dit pas grand-chose tant qu’il n’est pas compté. Ce script Python lit les logs d’accès Nginx ou Apache, y compris les anciens compressés, et produit un rapport : requêtes par jour et par heure, pages les plus visitées, codes de statut, pages qui renvoient 404 ou 500 et provenance des visiteurs. Premium compte à part les passages des moteurs de recherche et enregistre un classeur Excel avec un onglet par section. Les adresses IP des visiteurs restent hors du rapport par défaut, ou sont tronquées si vous en avez besoin. Envoyez-nous la ligne de format de log de la configuration de votre serveur et 20 à 30 lignes avec les adresses modifiées. Vous le lancez sur votre serveur ou votre ordinateur ; il lit les logs et ne modifie aucun réglage.

Ce qui est inclus

• Ce que vous recevezUne archive ZIP avec le script Python, un README avec des instructions pas à pas et, dès Standard, un fichier de paramètres avec les chemins des logs et les options du rapport ; le code est aussi affiché sur la page de la commande.
• Nginx et ApacheLes formats de log courants, ou le vôtre s’il diffère
• Erreurs avec les pagesQuelles adresses renvoient 404 ou 500, et à quelle fréquence
• Les anciens logs aussiDès Standard, fichiers .gz compressés lus tels quels
• Aucune donnée personnelleAdresses IP exclues ou tronquées
• Code lisibleAvec des commentaires, pour ajouter facilement une section plus tard

Comment ça marche

1. 1
   TâcheVous envoyez le format de log et quelques lignes avec les adresses modifiées
2. 2
   CodeNous écrivons le script et le guide pour le lancer
3. 3
   Testez-leVous le lancez sur une copie du log d’une journée et regardez le rapport
4. 4
   RetouchesVous demandez des retouches selon votre formule et envoyez les éventuels messages d’erreur

Ce dont nous avons besoin

Votre serveur web (Nginx ou Apache), la ligne log_format ou LogFormat de sa configuration si elle a été modifiée, et 20 à 30 lignes du log d’accès avec les adresses IP remplacées par des adresses fictives. L’emplacement des logs et leur rotation, la taille d’un log journalier, ce que le rapport doit montrer et sous quelle forme (CSV ou Excel), et l’endroit où il tournera : le serveur lui-même (avec son système) ou votre ordinateur.

Nous vous demanderons :

• Quel serveur web et quel format de log ?
• Que doit montrer le rapport ?
• À quelle fréquence vous le faut-il ?
• Où va-t-il tourner ?

Comparer les formules

Questions et réponses

Vous n’avez pas trouvé la réponse ? Posez-nous la question