Açık araç ilanları için Python parser'ı: marka, yıl, kilometre, fiyat ve şehir bir tabloda, satıcı iletişim bilgisi olmadan

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Galericiler ve araç alıcıları bu parser ile piyasayı tek bir tabloda görür: açık araç ilanlarından marka, yıl, kilometre, motor, vites, kasa tipi, yakıt, renk, fiyat, şehir, ilan tarihi, bağlantı ve fotoğraf bağlantıları. Sitede aramayı kurun (marka, yıllar, fiyat aralığı) ve o bağlantıyı, bir ilanı ve tarayıcınızdan kaydedilmiş bir ya da iki sayfayı gönderin. Kodu Python'da bu sayfalara göre yazarız; onu bir ayar dosyası ve README ile alır, ihtiyacınız olduğu sıklıkta kendiniz çalıştırırsınız. Satıcı verileri dışarıda kalır: ad, e-posta ya da telefon numarası yok, plaka ya da şasi numarası (VIN) da yok. Parser açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediği sizin kararınızdır; sitenin düzeni sonradan değişirse güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Piyasa tek bir tablodaExcel'de yıla, kilometreye ya da fiyata göre sıralayın
• Arama bağlantınızMarka, yıllar ve fiyat aralığı sitede ayarlanır
• Satıcı verisi yokAd, telefon, plaka ya da VIN yok
• Sayı olarak kilometreFiltrelere ve ortalamalara hazır
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   AramaBir arama bağlantısı ve kaydedilmiş bir ilan gönderirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve birkaç aracı siteyle karşılaştırırsınız
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Araç sitesi ve filtrelerinizi içeren bir arama bağlantısı, bir ilan sayfası ve aramanın yaklaşık kaç araç gösterdiği. Tablonuzdaki sırayla ihtiyacınız olan alanlar, ör. marka, yıl, kilometre, motor, vites, fiyat, şehir, bağlantı. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bu sayfalardan bir ya da ikisi veya ekran görüntüleri. CSV mi Excel mi olacağı ve ne sıklıkla çalıştıracağınız.

Size soracaklarımız:

• Hangi site ve arama?
• İhtiyacınız olan alanlar
• Yaklaşık kaç araç?
• Yapması gereken başka bir şey

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun