Một parser Python thu thập giá công khai của đối thủ vào bảng: giá, giá cũ, tồn kho và liên kết

Ví dụ kết quả

def product_links(list_url: str) -> Iterator[str]:
    """Liên kết trang sản phẩm từ mọi trang của danh sách, theo nút “Tiếp”."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Một trang mở công khai, với tốc độ vừa phải: nghỉ giữa các lần truy cập và thử lại vài lần khi lỗi."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s trả về %s, lần thử %d trên 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} không mở được sau 3 lần thử")

Về dịch vụ này

Parser này đọc các trang sản phẩm công khai của đối thủ và đưa giá của họ vào một bảng để bạn so với giá của mình: tên sản phẩm, mã sản phẩm, giá, giá cũ, mức giảm, còn hàng và liên kết, kèm ngày kiểm tra. Hãy gửi cho chúng tôi website, liên kết tới một danh mục và một trang sản phẩm, các trường theo thứ tự trong bảng của bạn và một hai trang đó đã lưu từ trình duyệt. Chúng tôi viết code bằng Python theo đúng cấu trúc thật của các trang, kèm file cài đặt và README. Bạn chạy parser trên máy tính của mình bất cứ khi nào cần giá mới, và bảng về thẳng tay bạn. Parser chỉ đọc các trang mở công khai với tốc độ vừa phải và không bao giờ đăng nhập, vượt captcha hay cơ chế bảo vệ, hoặc thu thập dữ liệu cá nhân. Bạn tự quyết định điều khoản của website có cho phép hay không, và nếu sau này website đổi bố cục thì parser cần được cập nhật.

Bao gồm những gì

• Bạn nhận được gìFile ZIP gồm code Python, file cài đặt và README hướng dẫn từng bước; code cũng được hiển thị trên trang đơn hàng.
• Các cột giáGiá, giá cũ và mức giảm là các số riêng biệt
• Mã để đối chiếuMã hoặc mã vạch của đối thủ, khi trang có hiển thị
• Ngày của mỗi lần kiểm traMỗi dòng đều ghi ngày thu thập
• Tốc độ vừa phảiThời gian nghỉ giữa các trang do bạn đặt
• Chạy trên máy tính của bạnWindows, macOS hoặc Linux; chạy lại để có giá mới

Cách hoạt động

1. 1
   Số trangBạn gửi website của đối thủ, một danh mục và một trang sản phẩm đã lưu
2. 2
   ParserChúng tôi viết code theo các trang đó, kèm hướng dẫn chạy
3. 3
   ChạyBạn chạy parser và so các dòng đầu tiên với website
4. 4
   Chỉnh sửaBạn yêu cầu chỉnh sửa trong phạm vi gói và gửi thông báo lỗi nếu có

Chúng tôi cần gì từ bạn

Website của đối thủ và chính xác các trang cần lấy: liên kết tới một danh mục và một trang sản phẩm, và ước chừng có bao nhiêu sản phẩm. Các trường bạn cần theo thứ tự trong bảng, VD: tên, mã, giá, giá cũ, còn hàng, liên kết. Một hai trang đó lưu từ trình duyệt dạng HTML (File > Lưu trang thành) hoặc ảnh chụp màn hình. CSV hay Excel, và nơi bạn sẽ chạy parser.

Chúng tôi sẽ hỏi bạn:

• Website và các trang nào của đối thủ?
• Các trường bạn cần
• Khoảng bao nhiêu sản phẩm?
• Bạn sẽ chạy bao lâu một lần?

So sánh các gói

Hỏi đáp

Chưa tìm thấy câu trả lời? Hỏi chúng tôi