Web sunucunuzun erişim log'larını okuyan ve onları sayfalar ve hatalarla ilgili net bir rapora dönüştüren bir Python betiği

Örnek sonuç

python merge_sales.py --month 2026-10

2026-11-02 09:14:03 INFO  Folder: sales/2026-10, 9 files found
2026-11-02 09:14:03 INFO  shop-01.csv: 1,284 rows
2026-11-02 09:14:04 INFO  shop-02.xlsx: 967 rows
2026-11-02 09:14:04 WARN  shop-07.csv: 3 rows without a price skipped (lines 88, 412, 913)
2026-11-02 09:14:05 INFO  Done: 10,412 rows -> report-2026-10.xlsx (sheets "Sales" and "Totals")

[columns]
date = Date, Sale date, Day
product = Product, Item, Name
quantity = Qty, Quantity, Pcs
price = Price, Unit price

def read_shop_file(path: Path, columns: dict[str, list[str]]) -> pd.DataFrame:
    """Reads one shop's file and gives it the report's column names."""
    table = pd.read_excel(path) if path.suffix == ".xlsx" else pd.read_csv(path, encoding="utf-8-sig")
    renamed = {}
    for name, variants in columns.items():
        found = next((c for c in table.columns if c.strip() in variants), None)
        if found is None:
            raise ReportError(f"{path.name}: no column for '{name}' (looked for {', '.join(variants)})")
        renamed[found] = name
    table = table.rename(columns=renamed)[list(columns)]
    table["shop"] = path.stem
    return table

Bu hizmet hakkında

Web sunucunuz her isteği erişim log'una yazar, ama milyonlarca satırlık bir dosya sayılana kadar size pek bir şey söylemez. Bu Python betiği, sıkıştırılmış eskiler dahil Nginx ya da Apache erişim log'larını okur ve bir rapor hazırlar: güne ve saate göre istekler, en çok ziyaret edilen sayfalar, durum kodları, 404 ya da 500 döndüren sayfalar ve ziyaretçilerin nereden geldiği. Premium arama motoru tarayıcılarını insanlardan ayrı sayar ve her bölüm için bir sekmeli Excel çalışma kitabı kaydeder. Ziyaretçilerin IP adresleri varsayılan olarak rapora girmez ya da ihtiyacınız varsa kısaltılır. Bize sunucunuzun ayarlarındaki log formatı satırını ve adresleri değiştirilmiş 20-30 satırı gönderin. Sunucunuzda ya da bilgisayarınızda çalıştırırsınız; log'ları okur ve hiçbir ayarı değiştirmez.

Neler dahil

• Neler alırsınızPython betiğini, adım adım talimatlar içeren bir README dosyasını ve Standart paketten itibaren log yollarını ve rapor seçeneklerini içeren bir ayar dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Nginx ve ApacheYaygın log formatları ya da farklıysa sizinki
• Sayfalarıyla hatalarHangi adreslerin 404 ya da 500 verdiği ve ne sıklıkla
• Eski log'lar daStandart paketten itibaren sıkıştırılmış .gz dosyaları olduğu gibi okunur
• Kişisel veri yokIP adresleri dışarıda bırakılır ya da kısaltılır
• Okunabilir kodYorumlarla; sonradan bölüm eklemek kolay

Nasıl çalışır

1. 1
   GörevLog formatını ve adresleri değiştirilmiş birkaç satırı gönderirsiniz
2. 2
   KodBetiği ve çalıştırma kılavuzunu yazarız
3. 3
   DeneyinBir günlük log'un kopyasında çalıştırır ve rapora bakarsınız
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Web sunucunuz (Nginx ya da Apache), değiştirildiyse ayarlarındaki log_format ya da LogFormat satırı ve IP adresleri uydurma olanlarla değiştirilmiş 20-30 erişim log'u satırı. Log'ların nerede tutulduğu ve nasıl döndürüldüğü, bir günlük log'un ne kadar büyük olduğu, raporun neyi ve hangi biçimde (CSV ya da Excel) göstermesi gerektiği ve nerede çalışacağı: sunucunun kendisi (sistemiyle birlikte) ya da bilgisayarınız.

Size soracaklarımız:

• Hangi web sunucusu ve log formatı?
• Rapor neyi göstermeli?
• Ne sıklıkla ihtiyacınız var?
• Nerede çalışacak?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun