Açık bir katalogdaki görselleri ürün koduna göre adlandırarak bir klasöre ve bir tabloya kaydeden Python parser'ı

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Kendi kataloğunuzu yeni bir mağazaya taşıdığınızda ya da bir tedarikçi ürün fotoğraflarını kullanmanıza izin verdiğinde bu parser açık katalog sayfalarındaki görselleri bir klasöre kaydeder ve her dosyayı ürün koduna göre adlandırır; kodu, ürün adını, görsel bağlantısını ve dosya adını birbirine bağlayan bir tablo da hazırlar. Siteyi, bir kategori ve bir ürün sayfasını, tarayıcınızdan kaydedilmiş bir ya da iki sayfayı ve dosyaların nasıl adlandırılacağını gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız; böylece dosyalar doğrudan size gelir. Yalnızca kullanmanıza izin verilen görselleri kaydedin: kendinizinkileri ya da sahibinin izin verdiklerini. Dosyalar sitenin verdiği hâliyle kaydedilir. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sonradan bir düzen değişikliği olursa güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Dosyalar sizin istediğiniz gibi adlandırılırÜrün koduna göre, ek fotoğraflar için _1, _2, _3 ile
• Yanında bir tabloKod, ürün adı, görsel bağlantısı ve dosya adı
• En büyük sürümSayfa daha büyük bir görsele bağlantı veriyorsa onu alır
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   SayfalarKataloğu, kaydedilmiş bir ürün sayfasını ve dosya adlarını verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve ilk görsel klasörüne göz atarsınız
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Site ve tam sayfalar: bir kategori ve bir ürün sayfası bağlantısı ve yaklaşık kaç ürün ve görsel olduğu. Dosyaların nasıl adlandırılacağı, ör. ürün koduna göre _1, _2 ile. Dosya adı dışında ihtiyacınız olan tablo alanları. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bu sayfalardan bir ya da ikisi. Ve görsellerin size ait olduğuna ya da sahibinin kullanmanıza izin verdiğine dair onayınız.

Size soracaklarımız:

• Hangi site ve sayfalar?
• Dosyalar nasıl adlandırılacak
• Yaklaşık kaç görsel?
• Görseller kime ait?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun