Một parser Python lưu ảnh từ một danh mục hàng công khai vào thư mục, đặt tên theo mã sản phẩm, kèm một bảng

Ví dụ kết quả

def product_links(list_url: str) -> Iterator[str]:
    """Liên kết trang sản phẩm từ mọi trang của danh sách, theo nút “Tiếp”."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Một trang mở công khai, với tốc độ vừa phải: nghỉ giữa các lần truy cập và thử lại vài lần khi lỗi."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s trả về %s, lần thử %d trên 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} không mở được sau 3 lần thử")

Về dịch vụ này

Khi bạn chuyển danh mục hàng của chính mình sang cửa hàng mới, hoặc nhà cung cấp cho phép bạn dùng ảnh sản phẩm của họ, parser này lưu ảnh từ các trang danh mục công khai vào một thư mục và đặt tên từng file theo mã sản phẩm, kèm một bảng nối mã, tên sản phẩm, liên kết ảnh và tên file. Hãy gửi website, một danh mục và một trang sản phẩm, một hai trang đã lưu từ trình duyệt và cách đặt tên file. Bạn nhận code Python, file cài đặt và README, và chạy trên máy tính của mình, nên file về thẳng tay bạn. Chỉ lưu những hình ảnh bạn được phép dùng: ảnh của bạn, hoặc ảnh chủ sở hữu cho phép. File được lưu đúng như website cung cấp. Parser đọc các trang mở công khai với tốc độ vừa phải và không bao giờ đăng nhập hay vượt captcha hoặc cơ chế bảo vệ. Bạn tự quyết định điều khoản của website có cho phép hay không; nếu sau này đổi bố cục thì parser cần được cập nhật.

Bao gồm những gì

• Bạn nhận được gìFile ZIP gồm code Python, file cài đặt và README hướng dẫn từng bước; code cũng được hiển thị trên trang đơn hàng.
• Tên file theo ý bạnTheo mã sản phẩm, thêm _1, _2, _3 cho ảnh phụ
• Kèm một bảngMã, tên sản phẩm, liên kết ảnh và tên file
• Phiên bản lớn nhấtKhi trang có liên kết tới ảnh lớn hơn, parser lấy ảnh đó
• Tốc độ vừa phảiNghỉ giữa các trang, chỉnh trong file cài đặt
• Chạy trên máy tính của bạnWindows, macOS hoặc Linux, có Python

Cách hoạt động

1. 1
   Số trangBạn gửi danh mục hàng, một trang sản phẩm đã lưu và cách đặt tên file
2. 2
   ParserChúng tôi viết code và hướng dẫn chạy
3. 3
   ChạyBạn chạy parser và xem qua thư mục ảnh đầu tiên
4. 4
   Chỉnh sửaBạn yêu cầu chỉnh sửa trong phạm vi gói và gửi thông báo lỗi nếu có

Chúng tôi cần gì từ bạn

Website và chính xác các trang cần lấy: liên kết tới một danh mục và một trang sản phẩm, và ước chừng có bao nhiêu sản phẩm và ảnh. Cách đặt tên file, VD: theo mã sản phẩm kèm _1, _2. Các trường trong bảng bạn cần ngoài tên file. Một hai trang đó lưu từ trình duyệt (File > Lưu trang thành). Và xác nhận của bạn rằng ảnh là của bạn hoặc chủ sở hữu cho phép bạn dùng.

Chúng tôi sẽ hỏi bạn:

• Website và các trang nào?
• Cách đặt tên file
• Khoảng bao nhiêu ảnh?
• Ảnh là của ai?

So sánh các gói

Hỏi đáp

Chưa tìm thấy câu trả lời? Hỏi chúng tôi