Parser listing mobilPengembangan & Kustomisasi

Parser Python untuk listing mobil terbuka: merek, tahun, jarak tempuh, harga, dan kota dalam tabel, tanpa kontak penjual

Biasanya selesai dalam 15 menitTermasuk revisiPemeriksaan kualitas
Paket
Perlindungan pembayaranSelengkapnya
  • Revisi dalam batas paket tidak dikenai biaya.
  • Jika Anda tidak merespons dalam 3 hari setelah penyerahan hasil, hasil kerja diterima secara otomatis.

Uang ditahan saat Anda membayar dan diteruskan hanya setelah Anda menerima hasil kerja.

Parser Python untuk listing mobil terbuka: merek, tahun, jarak tempuh, harga, dan kota dalam tabel, tanpa kontak penjual

Contoh hasil

Contoh untuk paket Standar

Parser katalog pemasok alat berkebun ke Excel

Seperti apa hasilnya

ArtikelNamaHargaTersediaBeratFoto
GT-1042Gunting dahan, 20 mm18,90Ya0,24 kg…/gt-1042.jpg
GT-1187Gergaji lipat, 210 mm24,50Ya0,31 kg…/gt-1187.jpg
GT-2210Gunting pagar tanaman, mata bergelombang39,00Tidak1,10 kg…/gt-2210.jpg
GT-3305Sekop tangan, baja tahan karat9,80Ya0,18 kg…/gt-3305.jpg
GT-4120Selang taman 25 m, 1/2"42,00Ya2,90 kg…/gt-4120.jpg

File dalam contoh ini berisi 1.236 produk dari 52 halaman daftar.

Sebagian kode

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

File: arsip ZIP berisi scraper.py, settings.ini (halaman awal, jeda antarpermintaan, nama file), requirements.txt, dan README tentang cara memasang dan menjalankannya. Parser hanya membaca halaman terbuka, satu halaman setiap 2 detik, dan lebih dulu memeriksa robots.txt situs. Klien menjalankannya di komputernya sendiri.

Klien: toko online perlengkapan kebun yang menjual kembali alat dari seorang pemasok; pemasok punya katalog terbuka di situsnya, tetapi tidak punya file daftar harga. Tugas: menelusuri halaman-halaman daftar katalog, membuka setiap halaman produk, dan menyimpan nomor artikel, nama, harga, stok, berat, serta tautan foto utama ke Excel, untuk membandingkan harga seminggu sekali.

Klien dan semua datanya fiktif.

Tentang layanan ini

Dealer dan pembeli mobil memakai parser ini untuk melihat pasar dalam satu tabel: merek, tahun, jarak tempuh, mesin, transmisi, bodi, bahan bakar, warna, harga, kota, tanggal tayang, tautan, dan tautan foto dari listing mobil terbuka. Atur pencarian di situs (merek, tahun, rentang harga) dan kirimkan tautannya, satu listing, dan satu atau dua halaman yang disimpan dari browser Anda. Kami menulis kode dalam Python sesuai halaman tersebut; Anda menerimanya dengan file pengaturan dan README, lalu menjalankannya sendiri sesering yang Anda butuhkan. Data penjual tidak diambil: tidak ada nama, email, atau nomor telepon, dan tidak ada pelat nomor atau VIN. Parser membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login atau mengakali captcha maupun perlindungan. Apakah ketentuan situs mengizinkannya adalah keputusan Anda, dan perubahan tata letak situs di kemudian hari membutuhkan pembaruan.

Yang termasuk

  • Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
  • Pasar dalam satu tabelUrutkan berdasarkan tahun, jarak tempuh, atau harga di Excel
  • Tautan pencarian AndaMerek, tahun, dan rentang harga diatur di situs
  • Tanpa data penjualTanpa nama, telepon, pelat nomor, atau VIN
  • Jarak tempuh sebagai angkaSiap untuk filter dan rata-rata
  • Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

  1. 1
    PencarianAnda mengirim tautan pencarian dan satu listing yang disimpan
  2. 2
    ParserKami menulis kode dan panduan menjalankannya
  3. 3
    JalankanAnda menjalankannya dan mencocokkan beberapa mobil dengan situsnya
  4. 4
    RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs mobil dan tautan ke pencarian dengan filter Anda, satu halaman listing, dan kira-kira berapa mobil yang ditampilkan pencarian itu. Field yang Anda butuhkan sesuai urutan tabel Anda, mis. merek, tahun, jarak tempuh, mesin, transmisi, harga, kota, tautan. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as) atau screenshot. CSV atau Excel, dan seberapa sering Anda akan menjalankannya.

Kami akan menanyakan:

  • Situs dan pencarian mana?
  • Field yang Anda butuhkan
  • Kira-kira berapa banyak mobil?
  • Hal lain yang perlu dilakukan

Bandingkan paket

PaketDasarListing dari tautan AndaRp 357.000StandarPencarian Anda, setiap mobilRp 714.000PremiumHingga 3 situs mobilRp 1.275.000
Tenggat1 hari2 hari3 hari
Revisi123
Situs11hingga 3
Jenis halaman12 (hasil pencarian dan listing)hingga 3
Fieldhingga 10hingga 25hingga 25 di masing-masing
Menelusuri halaman-halaman daftarTidakYaYa
File hasilCSVExcel atau CSVExcel, CSV, atau JSON
Duplikat dihapus, melanjutkan dari titik berhentiTidakTidakYa
Pesan DasarPesan StandarPesan Premium

Perlindungan pembayaran

Anda membayar saat memesan, tetapi uangnya diteruskan hanya untuk hasil kerja yang diterima.

  • Harga pastiHarga paket tidak berubah setelah Anda membayar.
  • Uang ditahanSaat Anda membayar, jumlahnya hanya ditahan. Dana diteruskan ke Dleex setelah Anda menerima hasil kerja.
  • Diperiksa sebelum penyerahanSetiap hasil melewati pemeriksaan kualitas sebelum sampai kepada Anda, dan Anda dapat melihatnya di halaman pesanan sebelum menerimanya.
  • Revisi gratisMinta revisi sesuai brief Anda sebanyak yang diizinkan paket.
  • Diterima setelah 3 hariJika dalam 3 hari setelah penyerahan hasil Anda tidak menerima hasil kerja maupun meminta revisi, hasil kerja diterima secara otomatis. Jika Anda menulis di chat pesanan setelah penyerahan hasil, pesanan akan menunggu; setelah kami menjawab, kami dapat memulai ulang hitungan 3 hari dan akan memberitahukannya di chat.
  • Dikerjakan ulang atau pengembalian dana penuhJika hasilnya tidak sesuai brief Anda dan revisi tidak memperbaikinya, atau pengerjaan memakan waktu lebih dari dua kali tenggatnya, tulis di chat pesanan: kami akan mengerjakan ulang atau mengembalikan pembayaran secara penuh.
Cara kerjanya →

Tanya jawab

Apakah parser akan memberi tahu berapa nilai sebuah mobil?

Tidak. Parser mengumpulkan harga yang diminta seperti tertera di listing. Kami tidak menaksir harga mobil atau memberi saran pembelian; tabelnya untuk perbandingan Anda sendiri.

Bisakah saya mendapat nomor telepon penjual?

Tidak. Parser tidak mengumpulkan nama, email, atau nomor telepon orang. Setiap baris memuat tautan listing, tempat Anda bisa menghubungi penjual dengan cara yang disediakan situs.

Bisakah parser membaca iklan mobil di media sosial atau di Google?

Tidak. Parser tidak membaca media sosial, LinkedIn, Google, atau Amazon: ketentuan mereka melarangnya dan banyak halaman membutuhkan login. Situs mobil terbuka lainnya tidak masalah jika ketentuannya mengizinkan, yang Anda putuskan.

Bagaimana jika situs menyembunyikan listing di balik captcha?

Maka parser tidak bisa membacanya: parser tidak pernah mengakali captcha atau perlindungan lain. Jika situs mengubah tata letaknya nanti, parser perlu diperbarui, dan itu menjadi pesanan baru.

Tidak menemukan jawabannya?

Paket