Açık emlak ilanları için Python parser'ı: fiyat, alan, oda, semt ve bağlantı bir tabloda, iletişim bilgisi olmadan

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Bir emlak ofisi, yatırımcı ya da alıcı için bu parser açık emlak ilanlarını tek bir tabloda toplar: tür, fiyat, gösteriliyorsa metrekare fiyatı, alan, oda sayısı, kat, şehir ve semt, ilanda verildiği şekliyle sokak, ilan tarihi, bağlantı ve fotoğraf bağlantıları. Sitede filtrelerinizle aramayı kurun ve bize o bağlantıyı, bir ilanı ve tarayıcınızdan kaydedilmiş bir ya da iki sayfayı gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Kişisel veriler dışarıda kalır: mal sahiplerinin ya da emlakçıların adları, e-postaları veya telefon numaraları yok, yalnızca ilanın bağlantısı. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sitenin düzeni sonradan değişirse güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Sizin aramanız, sizin filtrelerinizSitede kurduğunuz bir arama bağlantısından başlar
• Sıralayabileceğiniz sayılarFiyat, alan ve kat ayrı sütunlarda
• İletişim bilgisi yokSatıcıların ve emlakçıların adları ve telefonları dışarıda bırakılır
• Fotoğraf bağlantılarıDosyaların kendisi değil, ilan fotoğraflarının bağlantıları
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi

Nasıl çalışır

1. 1
   AramaAramayı kurar, bağlantısını ve kaydedilmiş bir ilanı gönderirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve ilk satırları siteyle karşılaştırırsınız
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Emlak sitesi ve filtrelerinizi (şehir, tür, fiyat aralığı) içeren bir arama bağlantısı, bir ilan sayfası ve aramanın yaklaşık kaç ilan gösterdiği. Tablonuzdaki sırayla ihtiyacınız olan alanlar, ör. tür, fiyat, alan, oda, kat, semt, ilan tarihi, bağlantı. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bu sayfalardan bir ya da ikisi veya ekran görüntüleri. CSV ya da Excel.

Size soracaklarımız:

• Hangi site ve arama?
• İhtiyacınız olan alanlar
• Yaklaşık kaç ilan?
• Yapması gereken başka bir şey

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun