Parser Python yang mengumpulkan harga publik kompetitor ke dalam tabel: harga, harga lama, stok, dan tautan

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Parser ini membaca halaman produk publik kompetitor dan memasukkan harganya ke tabel yang bisa Anda bandingkan dengan harga Anda: nama produk, kode produk, harga, harga lama, diskon, ketersediaan stok, dan tautan, beserta tanggal pengecekan. Berikan situsnya, tautan ke kategori dan ke halaman produk, field sesuai urutan tabel Anda, serta satu atau dua halaman tersebut yang disimpan dari browser Anda. Kami menulis kodenya dalam Python sesuai struktur aslinya, dengan file pengaturan dan README. Anda menjalankannya di komputer Anda kapan pun ingin harga terbaru, dan tabelnya langsung sampai kepada Anda. Parser hanya membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login, mengakali captcha atau perlindungan, atau mengumpulkan data pribadi. Anda yang memutuskan apakah ketentuan situs mengizinkannya, dan perubahan tata letak situs di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Kolom hargaHarga, harga lama, dan diskon sebagai angka terpisah
• Kode untuk pencocokanKode atau barcode kompetitor, jika halaman menampilkannya
• Tanggal setiap pengecekanSetiap baris memuat tanggal pengumpulannya
• Kecepatan sopanJeda antarhalaman yang Anda tetapkan
• Berjalan di komputer AndaWindows, macOS, atau Linux; jalankan lagi untuk harga terbaru

Cara kerja

1. 1
   HalamanAnda memberikan situs kompetitor, kategori, dan halaman produk yang disimpan
2. 2
   ParserKami menulis kode sesuai halaman tersebut dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan membandingkan baris pertama dengan situsnya
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs kompetitor dan halaman persisnya: tautan ke kategori dan ke halaman produk, serta kira-kira berapa banyak produknya. Field yang Anda butuhkan sesuai urutan tabel Anda, mis. nama, kode, harga, harga lama, stok, tautan. Satu atau dua halaman tersebut yang disimpan dari browser sebagai HTML (File > Save page as) atau screenshot. CSV atau Excel, dan di mana Anda akan menjalankannya.

Kami akan menanyakan:

• Situs dan halaman kompetitor mana?
• Field yang Anda butuhkan
• Kira-kira berapa banyak produk?
• Seberapa sering Anda akan menjalankannya?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami