Một parser Python cho tin đăng ô tô công khai: hãng xe, năm, số km, giá và thành phố trong một bảng, không có thông tin liên hệ của người bán

Ví dụ kết quả

def product_links(list_url: str) -> Iterator[str]:
    """Liên kết trang sản phẩm từ mọi trang của danh sách, theo nút “Tiếp”."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Một trang mở công khai, với tốc độ vừa phải: nghỉ giữa các lần truy cập và thử lại vài lần khi lỗi."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s trả về %s, lần thử %d trên 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} không mở được sau 3 lần thử")

Về dịch vụ này

Đại lý và người mua xe dùng parser này để nhìn thị trường trong một bảng: hãng xe, năm, số km đã đi, động cơ, hộp số, kiểu thân xe, nhiên liệu, màu, giá, thành phố, ngày đăng, liên kết và liên kết ảnh từ các tin đăng ô tô công khai. Hãy thiết lập tìm kiếm trên website (hãng xe, năm, khoảng giá) rồi gửi liên kết đó, một tin đăng và một hai trang đã lưu từ trình duyệt. Chúng tôi viết code bằng Python theo các trang đó; bạn nhận code kèm file cài đặt và README và tự chạy thường xuyên tùy nhu cầu. Dữ liệu người bán được để ngoài: không có tên, email hay số điện thoại, không có biển số hay số VIN. Parser đọc các trang mở công khai với tốc độ vừa phải và không bao giờ đăng nhập hay vượt captcha hoặc cơ chế bảo vệ. Điều khoản của website có cho phép hay không là quyết định của bạn, và nếu sau này website đổi bố cục thì parser cần được cập nhật.

Bao gồm những gì

• Bạn nhận được gìFile ZIP gồm code Python, file cài đặt và README hướng dẫn từng bước; code cũng được hiển thị trên trang đơn hàng.
• Thị trường trong một bảngSắp xếp theo năm, số km hoặc giá trong Excel
• Liên kết tìm kiếm của bạnHãng xe, năm và khoảng giá thiết lập trên website
• Không có dữ liệu người bánKhông có tên, số điện thoại, biển số hay VIN
• Số km là một con sốSẵn sàng để lọc và tính trung bình
• Chạy trên máy tính của bạnWindows, macOS hoặc Linux, có Python

Cách hoạt động

1. 1
   Tìm kiếmBạn gửi một liên kết tìm kiếm và một tin đăng đã lưu
2. 2
   ParserChúng tôi viết code và hướng dẫn chạy
3. 3
   ChạyBạn chạy parser và so vài chiếc xe với website
4. 4
   Chỉnh sửaBạn yêu cầu chỉnh sửa trong phạm vi gói và gửi thông báo lỗi nếu có

Chúng tôi cần gì từ bạn

Website ô tô và liên kết tới một tìm kiếm với các bộ lọc của bạn, một trang tin đăng và ước chừng tìm kiếm cho ra bao nhiêu xe. Các trường bạn cần theo thứ tự trong bảng, VD: hãng xe, năm, số km, động cơ, hộp số, giá, thành phố, liên kết. Một hai trang đó lưu từ trình duyệt (File > Lưu trang thành) hoặc ảnh chụp màn hình. CSV hay Excel, và bạn sẽ chạy bao lâu một lần.

Chúng tôi sẽ hỏi bạn:

• Website và tìm kiếm nào?
• Các trường bạn cần
• Khoảng bao nhiêu xe?
• Parser còn cần làm gì khác

So sánh các gói

Hỏi đáp

Chưa tìm thấy câu trả lời? Hỏi chúng tôi