Parser Python yang mengumpulkan daftar acara dan konser terbuka ke dalam tabel: tanggal, tempat, kota, harga, dan tautan

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Panduan kota, pengelola tempat acara, dan promotor memakai parser ini untuk mengumpulkan daftar acara terbuka ke dalam satu tabel: judul acara, kategori, tanggal dan jam mulai, tempat, kota, harga mulai, batas usia, tautan tiket, dan tautan gambar. Kirimkan halaman daftar acara dari situsnya, seperti situs tempat acara, panduan kota, atau situs tiket, satu halaman acara, dan satu atau dua halaman yang disimpan dari browser Anda. Kami menulis kodenya dalam Python; Anda menerimanya dengan file pengaturan dan README, lalu menjalankannya di komputer Anda sebelum memperbarui kalender Anda sendiri. Parser tidak membeli tiket, tidak memeriksa kursi kosong, dan tidak mengumpulkan data pribadi penyelenggara atau pengunjung. Parser membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login atau mengakali captcha maupun perlindungan. Anda yang memutuskan apakah ketentuan situs mengizinkannya, dan perubahan tata letak situs di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Tanggal yang bisa diurutkanTanggal dan jam dalam satu format, sehingga tabel bisa diurutkan per hari
• Tautan tiketTautan ke halaman acara itu sendiri atau halaman tiketnya
• Tautan gambarPoster sebagai tautan; gunakan hanya jika Anda diizinkan
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   Daftar acaraAnda mengirim halaman daftar acara dan satu halaman acara yang disimpan
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan memeriksa tanggal acara-acara pertama
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs dan halaman persisnya: tautan ke daftar acara dan ke satu halaman acara, serta kira-kira berapa banyak acaranya. Field yang Anda butuhkan sesuai urutan tabel Anda, mis. judul, kategori, tanggal, jam, tempat, kota, harga mulai, tautan. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as) atau screenshot. Format tanggal yang Anda inginkan, dan CSV atau Excel.

Kami akan menanyakan:

• Situs dan halaman mana?
• Field yang Anda butuhkan
• Kira-kira berapa banyak acara?
• Hanya sebagian acara?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami