Parser Python yang mengumpulkan resep terbuka ke dalam tabel: judul, kategori, waktu, porsi, bahan, dan tautan

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Food blogger yang memindahkan resep mereka sendiri, aplikasi memasak, dan layanan perencanaan menu memakai parser ini untuk menyusun tabel resep dari halaman terbuka: judul, kategori, masakan, waktu memasak, porsi, bahan, langkah, kalori jika halaman menampilkannya, tautan gambar, dan tautan. Banyak halaman resep juga menyimpan fakta ini dalam blok terstruktur tersembunyi, dan parser membacanya jika ada. Kirimkan situsnya, satu kategori dan satu halaman resep, serta satu atau dua halaman yang disimpan dari browser Anda. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda. Teks dan foto resep milik pembuatnya: gunakan hanya yang Anda boleh gunakan. Nama penulis tidak disertakan. Parser membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login atau mengakali captcha maupun perlindungan. Anda yang memutuskan apakah ketentuan situs mengizinkannya; perubahan tata letak di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Bahan sebagai daftarSatu bahan per baris dalam satu sel, atau di sheet terpisah
• Waktu dan porsiSebagai angka yang bisa difilter
• Tautan gambarHanya tautan; gunakan foto yang Anda boleh gunakan
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   HalamanAnda mengirim situs, satu kategori, dan satu resep yang disimpan
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan mencocokkan dua resep dengan situsnya
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs resep dan halaman persisnya: tautan ke satu kategori dan ke satu resep, serta kira-kira berapa banyak resepnya. Field yang Anda butuhkan, mis. judul, kategori, masakan, waktu, porsi, bahan, langkah, kalori, tautan gambar. Bagaimana bahan harus ditampilkan: satu sel atau sheet terpisah. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as). Dan apakah ini resep Anda sendiri atau resep dari situs lain.

Kami akan menanyakan:

• Situs dan halaman mana?
• Field yang Anda butuhkan
• Kira-kira berapa banyak resep?
• Bagaimana bahan harus ditampilkan?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami