Parser Python yang membandingkan harga produk yang sama di 3 toko online terbuka dalam satu tabel

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Parser ini menyandingkan harga produk yang sama dari hingga tiga toko online terbuka: satu baris per produk, dengan harga, harga lama, stok, dan tautan dari setiap toko, serta tanggal pemeriksaan. Tiga toko tersedia di paket Premium; Dasar dan Standar membaca satu toko, sebagai awal atau uji coba. Produk dicocokkan berdasarkan kode yang ditampilkan toko, seperti barcode atau nomor part produsen, atau berdasarkan tautan yang Anda berikan untuk setiap produk: nama saja terlalu berbeda untuk dicocokkan dengan aman. Kirimkan situs-situsnya, satu halaman produk dari masing-masing yang disimpan dari browser Anda, dan daftar produk Anda. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda. Parser membaca halaman terbuka dengan kecepatan sopan, tidak pernah login atau mengakali captcha maupun perlindungan, dan tidak membaca Amazon atau Google. Anda yang memutuskan apakah ketentuan toko mengizinkannya; perubahan tata letak di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Satu baris per produkHarga, stok, dan tautan setiap toko berdampingan
• Dicocokkan berdasarkan kode atau tautan AndaBarcode, nomor part produsen, atau tautan yang Anda berikan
• Tanggal pemeriksaanDi setiap baris, sehingga hasil tiap kali dijalankan bisa dibandingkan
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   TokoAnda mengirim toko, halaman produk yang disimpan, dan daftar produk Anda
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan memeriksa beberapa baris di setiap toko
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Tiga toko (atau satu, untuk Dasar dan Standar) dan satu halaman produk dari masing-masing, yang disimpan dari browser Anda (File > Save page as). Daftar produk Anda dengan kode yang ditampilkan toko, seperti barcode, atau tabel berisi tautan setiap produk di setiap toko. Field yang Anda butuhkan per toko, mis. harga, harga lama, stok, tautan. Kira-kira berapa banyak produknya. CSV, Excel, atau JSON.

Kami akan menanyakan:

• Toko mana?
• Cara mencocokkan produk
• Field per toko
• Kira-kira berapa banyak produk?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami