Açık tarifleri bir tabloya toplayan Python parser'ı: ad, kategori, süre, porsiyon, malzemeler ve bağlantı

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Kendi tariflerini taşıyan yemek blogcuları, yemek uygulamaları ve menü planlama hizmetleri bu parser ile açık sayfalardan bir tarif tablosu oluşturur: ad, kategori, mutfak, pişirme süresi, porsiyon, malzemeler, adımlar, sayfa gösteriyorsa kalori, görsel bağlantısı ve bağlantı. Birçok tarif sayfası bu bilgileri gizli bir yapılandırılmış veri bloğunda da tutar; parser bu blok varsa onu okur. Siteyi, bir kategori ve bir tarif sayfasını ve tarayıcınızdan kaydedilmiş bir ya da iki sayfayı gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Tarif metinleri ve fotoğrafları yazarlarına aittir: yalnızca izniniz olanı kullanın. Yazar adları dışarıda bırakılır. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sonradan bir düzen değişikliği olursa güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Liste olarak malzemelerBir hücrede her satıra bir malzeme ya da ayrı bir sayfa
• Süre ve porsiyonFiltreleyebileceğiniz sayılar olarak
• Görsel bağlantılarıYalnızca bağlantılar; izniniz olan fotoğrafları kullanın
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   SayfalarSiteyi, bir kategoriyi ve kaydedilmiş bir tarifi verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve iki tarifi siteyle karşılaştırırsınız
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Tarif sitesi ve tam sayfalar: bir kategori ve bir tarif bağlantısı ve yaklaşık kaç tarif olduğu. İhtiyacınız olan alanlar, ör. ad, kategori, mutfak, süre, porsiyon, malzemeler, adımlar, kalori, görsel bağlantısı. Malzemelerin nasıl görüneceği: tek bir hücre ya da ayrı bir sayfa. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bu sayfalardan bir ya da ikisi. Ve bunların sizin kendi tarifleriniz mi yoksa başka bir sitenin tarifleri mi olduğu.

Size soracaklarımız:

• Hangi site ve sayfalar?
• İhtiyacınız olan alanlar
• Yaklaşık kaç tarif?
• Malzemeler nasıl görünmeli?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun