Parser Python yang menyimpan gambar dari katalog terbuka ke folder, dinamai sesuai kode produk, beserta tabel

Contoh hasil

def product_links(list_url: str) -> Iterator[str]:
    """Tautan halaman produk dari setiap halaman daftar, mengikuti tombol 'Berikutnya'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Satu halaman terbuka, dengan kecepatan sopan: jeda antarpermintaan dan beberapa kali coba saat error."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s menjawab %s, percobaan %d dari 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} tidak terbuka setelah 3 percobaan")

Tentang layanan ini

Saat Anda memindahkan katalog Anda sendiri ke toko baru, atau pemasok mengizinkan Anda memakai foto produknya, parser ini menyimpan gambar dari halaman katalog terbuka ke dalam folder dan menamai setiap file sesuai kode produk, dengan tabel yang menghubungkan kode, nama produk, tautan gambar, dan nama file. Kirimkan situsnya, satu kategori dan satu halaman produk, satu atau dua halaman yang disimpan dari browser Anda, dan cara penamaan file. Anda menerima kode Python, file pengaturan, dan README, lalu menjalankannya di komputer Anda, sehingga file langsung sampai ke Anda. Simpan hanya gambar yang boleh Anda pakai: milik Anda sendiri, atau yang diizinkan pemiliknya. File disimpan sebagaimana diberikan situs. Parser membaca halaman terbuka dengan kecepatan sopan dan tidak pernah login atau mengakali captcha maupun perlindungan. Anda yang memutuskan apakah ketentuan situs mengizinkannya; perubahan tata letak di kemudian hari membutuhkan pembaruan.

Yang termasuk

• Yang Anda dapatkanArsip ZIP berisi kode Python, file pengaturan, dan README dengan petunjuk langkah demi langkah; kodenya juga ditampilkan di halaman pesanan.
• Nama file sesuai keinginan AndaSesuai kode produk, dengan _1, _2, _3 untuk foto tambahan
• Tabel pendampingKode, nama produk, tautan gambar, dan nama file
• Versi terbesarJika halaman menautkan ke gambar yang lebih besar, gambar itulah yang diambil
• Kecepatan sopanJeda antarhalaman, diatur di pengaturan
• Berjalan di komputer AndaWindows, macOS, atau Linux, dengan Python

Cara kerja

1. 1
   HalamanAnda mengirim katalog, satu halaman produk yang disimpan, dan nama file
2. 2
   ParserKami menulis kode dan panduan menjalankannya
3. 3
   JalankanAnda menjalankannya dan melihat-lihat folder gambar pertama
4. 4
   RevisiAnda meminta revisi sesuai paket dan mengirim pesan error jika ada

Yang kami butuhkan dari Anda

Situs dan halaman persisnya: tautan ke satu kategori dan ke satu halaman produk, serta kira-kira berapa banyak produk dan gambarnya. Cara penamaan file, mis. sesuai kode produk dengan _1, _2. Field tabel yang Anda butuhkan selain nama file. Satu atau dua halaman tersebut yang disimpan dari browser Anda (File > Save page as). Dan konfirmasi Anda bahwa gambar itu milik Anda atau pemiliknya mengizinkan Anda memakainya.

Kami akan menanyakan:

• Situs dan halaman mana?
• Cara penamaan file
• Kira-kira berapa banyak gambar?
• Milik siapa gambar-gambar itu?

Bandingkan paket

Tanya jawab

Tidak menemukan jawabannya? Tanyakan kepada kami