Açık sayfalardaki ürün özelliklerini yan yana karşılaştırma için sütunlara toplayan Python parser'ı

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Kendi ürün kartlarını dolduran mağazalar ve ürünler arasında seçim yapan alıcılar bu parser ile açık ürün sayfalarındaki özellik tablolarını sütunlara dönüştürür: ad, kod, fiyat ve boyut, ağırlık, güç, malzeme ya da garanti gibi her özellik kendi sütununda, birimi ayrı. Ürünler farklı özellikler listeler; bu yüzden ihtiyacınız olanları paketinizin alan sınırına kadar siz belirtirsiniz, eksik olanlar boş hücre olarak kalır. Siteyi, bir kategoriyi, tarayıcınızdan kaydedilmiş iki ürün sayfasını ve özellik listenizi gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Özellikler sayfada yazıldığı gibi kopyalanır; onları kontrol etmeyiz ya da tamamlamayız. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sonradan bir düzen değişikliği olursa güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Bir özellik, bir sütunÜrünleri yan yana koymaya hazır
• Birimler ayrıör. 1200 ve W ayrı sütunlarda
• Özellik listenizYalnızca belirttiğiniz özellikler, sizin sıranızla
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   SayfalarSiteyi, kaydedilmiş iki ürün sayfasını ve özellik listenizi verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve iki ürünün özelliklerini kontrol edersiniz
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Site ve tam sayfalar: bir kategoriye ve farklı özelliklere sahip iki ürün sayfasına bağlantı ve yaklaşık kaç ürün olduğu. Tablonuzdaki sırayla, sitede yazıldığı şekliyle özellik listeniz ve birimlerin ayrı sütunlara girip girmeyeceği. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) iki sayfa veya ekran görüntüleri. CSV ya da Excel.

Size soracaklarımız:

• Hangi site ve sayfalar?
• Özellik listeniz
• Yaklaşık kaç ürün?
• Birimler

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun