Parser Python yang mengumpulkan spesifikasi produk dari halaman terbuka ke dalam kolom untuk perbandingan berdampingan

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Toko yang mengisi kartu produknya sendiri dan pembeli yang memilih di antara beberapa produk memakai parser ini untuk mengubah tabel spesifikasi di halaman produk terbuka menjadi kolom: nama, kode, harga, dan setiap spesifikasi, seperti ukuran, berat, daya, bahan, atau garansi, di kolomnya sendiri dengan satuan terpisah. Produk mencantumkan spesifikasi yang berbeda-beda, jadi Anda menyebutkan yang Anda butuhkan, hingga batas field paket Anda; yang tidak ada tetap menjadi sel kosong. Kirimkan situsnya, satu kategori, dua halaman produk yang disimpan dari browser Anda, dan daftar spesifikasi Anda. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda. Spesifikasi disalin seperti yang ditulis halaman; kami tidak memeriksa atau melengkapinya. Parser membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login atau mengakali captcha maupun perlindungan. Anda yang memutuskan apakah ketentuan situs mengizinkannya; perubahan tata letak di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Satu spesifikasi, satu kolomSiap untuk menyandingkan produk
• Satuan terpisahmis. 1200 dan W di kolom terpisah
• Daftar spesifikasi AndaHanya spesifikasi yang Anda sebutkan, sesuai urutan Anda
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   HalamanAnda mengirim situs, dua halaman produk yang disimpan, dan daftar spesifikasi Anda
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan memeriksa spesifikasi dua produk
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs dan halaman persisnya: tautan ke satu kategori dan ke dua halaman produk dengan spesifikasi berbeda, serta kira-kira berapa banyak produknya. Daftar spesifikasi Anda sesuai urutan tabel Anda, ditulis seperti yang ditulis situs, dan apakah satuan masuk ke kolom terpisah. Dua halaman yang disimpan dari browser Anda (File > Save page as) atau screenshot. CSV atau Excel.

Kami akan menanyakan:

• Situs dan halaman mana?
• Daftar spesifikasi Anda
• Kira-kira berapa banyak produk?
• Satuan

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami