Parser Python untuk pengumuman tender dan pengadaan terbuka: pembeli, objek, harga, dan tenggat dalam tabel

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Pemasok yang mengikuti tender memakai parser ini untuk melihat pengumuman terbuka dalam satu tabel: nomor pengumuman, objek pengadaan, organisasi pembeli, wilayah, jenis prosedur, harga awal dan mata uang, tanggal terbit, tenggat, status, dan tautan. Lakukan pencarian di portal pengadaan dengan kata kunci atau kode Anda, lalu kirimkan tautan itu, satu halaman pengumuman, dan satu atau dua halaman yang disimpan dari browser Anda. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda setiap pagi atau sesuai kebutuhan. Narahubung tidak disertakan: tidak ada nama, email, atau nomor telepon. Parser tidak login, tidak mengunduh dokumen di balik akun, tidak mengakali captcha maupun perlindungan, dan tidak mengajukan penawaran, serta menjaga kecepatan sopan. Anda yang memutuskan apakah ketentuan portal mengizinkannya; perubahan tata letaknya di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Tenggat yang bisa diurutkanTanggal dalam satu format, siap diurutkan berdasarkan tenggat
• Harga awal sebagai angkaDengan mata uang di kolomnya sendiri
• Kata kunci AndaDimulai dari pencarian yang Anda atur di portal
• Tanpa narahubungHanya organisasi pembeli, tanpa nama atau telepon
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan

Cara kerja

1. 1
   PencarianAnda mengatur pencarian dan mengirim tautannya serta satu pengumuman yang disimpan
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan mencocokkan pengumuman hari ini dengan portalnya
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Portal pengadaan dan tautan ke pencarian dengan kata kunci, kode, atau wilayah Anda, satu halaman pengumuman, dan kira-kira berapa banyak pengumuman yang ditampilkan pencarian itu. Field sesuai urutan tabel Anda, mis. nomor, objek, pembeli, wilayah, harga awal, mata uang, terbit, tenggat, tautan. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as) atau screenshot. CSV atau Excel.

Kami akan menanyakan:

• Portal dan pencarian mana?
• Kata kunci, kode, atau wilayah
• Field yang Anda butuhkan
• Seberapa sering Anda akan menjalankannya?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami