Parser Python yang mengumpulkan harga buku terbuka ke dalam tabel: judul, penulis, ISBN, format, harga, dan stok

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Toko buku dan penjual buku bekas memakai parser ini untuk melihat harga di toko online terbuka: judul, penulis seperti tercetak di buku, ISBN, penerbit, tahun, format (hardcover, paperback, e-book), harga, harga lama, ketersediaan stok, dan tautan. Dengan ISBN di setiap baris, Anda bisa mencocokkan buku dengan daftar Anda sendiri di Excel. Kirimkan situs toko, satu halaman bagian atau pencarian, satu halaman buku, dan satu atau dua halaman yang disimpan dari browser Anda. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda setiap kali Anda menyesuaikan harga. Parser tidak mengumpulkan data tentang pembaca atau penjual perorangan. Parser hanya membaca halaman terbuka dengan kecepatan sopan, tidak pernah login atau mengakali captcha maupun perlindungan, dan tidak membaca Amazon atau Google. Anda yang memutuskan apakah ketentuan situs mengizinkannya; perubahan tata letak situs di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• ISBN untuk pencocokanDi kolomnya sendiri, siap untuk pencarian di Excel
• Harga dan harga lamaSebagai angka, dengan stok di sebelahnya
• Format terpisahHardcover, paperback, dan e-book sebagai baris terpisah
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   HalamanAnda mengirim toko, satu bagian, dan satu halaman buku yang disimpan
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan mencocokkan beberapa harga dengan tokonya
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs toko buku dan halaman persisnya: tautan ke satu bagian atau pencarian dan ke satu halaman buku, serta kira-kira berapa banyak bukunya. Field sesuai urutan tabel Anda, mis. judul, penulis, ISBN, penerbit, tahun, format, harga, harga lama, stok, tautan. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as) atau screenshot. Daftar ISBN Anda sendiri, jika Anda hanya ingin membaca buku-buku itu.

Kami akan menanyakan:

• Toko dan halaman mana?
• Field yang Anda butuhkan
• Kira-kira berapa banyak buku?
• Hal lain yang perlu dilakukan

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami