Aynı ürünlerin 3 açık online mağazadaki fiyatlarını tek bir tabloda karşılaştıran Python parser'ı

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Bu parser aynı ürünlerin en fazla üç açık online mağazadaki fiyatlarını yan yana koyar: her ürün için bir satır; her mağazanın fiyatı, eski fiyatı, stoğu ve bağlantısı ile kontrol tarihi. Üç mağaza Premium ile gelir; Temel ve Standart, başlangıç ya da deneme olarak tek bir mağazayı okur. Ürünler, mağazaların gösterdiği barkod ya da üretici parça numarası gibi bir koda göre veya her ürün için listelediğiniz bağlantılara göre eşleştirilir: adlar tek başına güvenle eşleştirilemeyecek kadar farklıdır. Siteleri, tarayıcınızdan kaydedilmiş her birinden bir ürün sayfasını ve ürün listenizi gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz ve Amazon'u ya da Google'ı okumaz. Mağazaların koşullarının buna izin verip vermediğine siz karar verirsiniz; sonradan bir düzen değişikliği olursa güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Her ürün için bir satırHer mağazanın fiyatı, stoğu ve bağlantısı yan yana
• Koda ya da bağlantılarınıza göre eşleştirilirBarkod, üretici parça numarası ya da listelediğiniz bağlantılar
• Kontrol tarihiHer satırda; böylece çalıştırmalar karşılaştırılabilir
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   MağazalarMağazaları, kaydedilmiş ürün sayfalarını ve ürün listenizi verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve her mağazada birkaç satırı kontrol edersiniz
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Üç mağaza (Temel ve Standart için bir mağaza) ve her birinden tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bir ürün sayfası. Mağazaların gösterdiği barkod gibi bir kodla ürün listeniz ya da her ürünün her mağazadaki bağlantısını içeren bir tablo. Mağaza başına ihtiyacınız olan alanlar, ör. fiyat, eski fiyat, stok durumu, bağlantı. Yaklaşık kaç ürün olduğu. CSV, Excel ya da JSON.

Size soracaklarımız:

• Hangi mağazalar?
• Ürünler nasıl eşleştirilecek
• Mağaza başına alanlar
• Yaklaşık kaç ürün?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun