Một parser Python thu thập giá sách công khai vào bảng: tên sách, tác giả, ISBN, định dạng, giá và tồn kho

Ví dụ kết quả

def product_links(list_url: str) -> Iterator[str]:
    """Liên kết trang sản phẩm từ mọi trang của danh sách, theo nút “Tiếp”."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Một trang mở công khai, với tốc độ vừa phải: nghỉ giữa các lần truy cập và thử lại vài lần khi lỗi."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s trả về %s, lần thử %d trên 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} không mở được sau 3 lần thử")

Về dịch vụ này

Hiệu sách và người bán sách cũ dùng parser này để xem các cửa hàng trực tuyến mở bán với giá bao nhiêu: tên sách, tác giả như in trên sách, ISBN, nhà xuất bản, năm, định dạng (bìa cứng, bìa mềm, sách điện tử), giá, giá cũ, còn hàng và liên kết. Có ISBN trên từng dòng, bạn có thể ghép sách với danh sách của mình trong Excel. Hãy gửi website của cửa hàng, một trang chuyên mục hoặc trang tìm kiếm, một trang sách và một hai trang đã lưu từ trình duyệt. Bạn nhận code Python, file cài đặt và README, và chạy trên máy tính của mình mỗi khi điều chỉnh giá. Parser không thu thập dữ liệu về người đọc hay người bán cá nhân. Parser chỉ đọc các trang mở công khai với tốc độ vừa phải, không bao giờ đăng nhập hay vượt captcha hoặc cơ chế bảo vệ, và không đọc Amazon hay Google. Bạn tự quyết định điều khoản của website có cho phép hay không; nếu sau này website đổi bố cục thì parser cần được cập nhật.

Bao gồm những gì

• Bạn nhận được gìFile ZIP gồm code Python, file cài đặt và README hướng dẫn từng bước; code cũng được hiển thị trên trang đơn hàng.
• ISBN để đối chiếuỞ cột riêng, sẵn sàng để tra cứu trong Excel
• Giá và giá cũDạng số, kèm tồn kho ngay bên cạnh
• Các định dạng tách riêngBìa cứng, bìa mềm và sách điện tử ở các dòng riêng
• Tốc độ vừa phảiNghỉ giữa các trang, chỉnh trong file cài đặt
• Chạy trên máy tính của bạnWindows, macOS hoặc Linux, có Python

Cách hoạt động

1. 1
   Số trangBạn gửi cửa hàng, một chuyên mục và một trang sách đã lưu
2. 2
   ParserChúng tôi viết code và hướng dẫn chạy
3. 3
   ChạyBạn chạy parser và so vài mức giá với cửa hàng
4. 4
   Chỉnh sửaBạn yêu cầu chỉnh sửa trong phạm vi gói và gửi thông báo lỗi nếu có

Chúng tôi cần gì từ bạn

Website của hiệu sách và chính xác các trang cần lấy: liên kết tới một chuyên mục hoặc một tìm kiếm và một trang sách, và ước chừng có bao nhiêu cuốn. Các trường theo thứ tự trong bảng, VD: tên sách, tác giả, ISBN, nhà xuất bản, năm, định dạng, giá, giá cũ, còn hàng, liên kết. Một hai trang đó lưu từ trình duyệt (File > Lưu trang thành) hoặc ảnh chụp màn hình. Danh sách ISBN của bạn, nếu bạn chỉ muốn đọc những cuốn đó.

Chúng tôi sẽ hỏi bạn:

• Cửa hàng và các trang nào?
• Các trường bạn cần
• Khoảng bao nhiêu cuốn?
• Parser còn cần làm gì khác

So sánh các gói

Hỏi đáp

Chưa tìm thấy câu trả lời? Hỏi chúng tôi