Parser thông số sản phẩmPhát triển & tùy chỉnh

Một parser Python thu thập thông số sản phẩm từ các trang công khai thành các cột để so sánh cạnh nhau

Thường xong trong 15 phútBao gồm chỉnh sửaKiểm tra chất lượng
Các gói
Bảo vệ thanh toánChi tiết
  • Chỉnh sửa trong phạm vi gói là miễn phí.
  • Nếu bạn không phản hồi trong vòng 3 ngày sau khi bàn giao, kết quả sẽ được tự động chấp nhận.

Số tiền được tạm giữ khi bạn thanh toán và chỉ được chuyển khi bạn chấp nhận kết quả.

Một parser Python thu thập thông số sản phẩm từ các trang công khai thành các cột để so sánh cạnh nhau

Ví dụ kết quả

Ví dụ cho gói Tiêu chuẩn

Parser danh mục hàng của nhà cung cấp dụng cụ làm vườn ra Excel

Kết quả trông thế nào

Mã hàngTênGiáCòn hàngTrọng lượngẢnh
GT-1042Kéo cắt cành, 20 mm18,90Có0,24 kg…/gt-1042.jpg
GT-1187Cưa gấp, 210 mm24,50Có0,31 kg…/gt-1187.jpg
GT-2210Kéo tỉa hàng rào, lưỡi lượn sóng39,00Không1,10 kg…/gt-2210.jpg
GT-3305Bay xúc đất cầm tay, thép không gỉ9,80Có0,18 kg…/gt-3305.jpg
GT-4120Ống tưới vườn 25 m, 1/2"42,00Có2,90 kg…/gt-4120.jpg

File trong ví dụ có 1.236 sản phẩm từ 52 trang danh sách.

Một phần code

def product_links(list_url: str) -> Iterator[str]:
    """Liên kết trang sản phẩm từ mọi trang của danh sách, theo nút “Tiếp”."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Một trang mở công khai, với tốc độ vừa phải: nghỉ giữa các lần truy cập và thử lại vài lần khi lỗi."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s trả về %s, lần thử %d trên 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} không mở được sau 3 lần thử")

File bàn giao: file ZIP gồm scraper.py, settings.ini (trang bắt đầu, thời gian nghỉ giữa các lần truy cập, tên file), requirements.txt và README hướng dẫn cài đặt và chạy. Parser chỉ đọc các trang mở công khai, mỗi 2 giây một trang, và kiểm tra robots.txt của website trước. Khách hàng tự chạy parser trên máy tính của mình.

Khách hàng: một cửa hàng làm vườn trực tuyến bán lại dụng cụ của một nhà cung cấp; nhà cung cấp có danh mục hàng mở công khai trên website nhưng không có file bảng giá. Yêu cầu: đi qua các trang danh sách của danh mục, mở từng trang sản phẩm và lưu mã hàng, tên, giá, tồn kho, trọng lượng và liên kết ảnh chính vào Excel, để mỗi tuần so sánh giá một lần.

Khách hàng và mọi thông tin đều là giả định.

Về dịch vụ này

Cửa hàng đang điền thông tin sản phẩm của mình và người mua đang chọn giữa các sản phẩm dùng parser này để chuyển bảng thông số trên các trang sản phẩm công khai thành cột: tên, mã, giá, và mỗi thông số, như kích thước, trọng lượng, công suất, chất liệu hay bảo hành, nằm ở cột riêng với đơn vị tách ra. Mỗi sản phẩm liệt kê thông số khác nhau, nên bạn nêu tên những thông số mình cần, trong giới hạn số trường của gói; thông số nào thiếu sẽ để ô trống. Hãy gửi website, một danh mục, hai trang sản phẩm đã lưu từ trình duyệt và danh sách thông số của bạn. Bạn nhận code Python, file cài đặt và README, và chạy trên máy tính của mình. Thông số được chép đúng như trang ghi; chúng tôi không kiểm tra hay bổ sung. Parser đọc các trang mở công khai với tốc độ vừa phải và không bao giờ đăng nhập hay vượt captcha hoặc cơ chế bảo vệ. Bạn tự quyết định điều khoản của website có cho phép hay không; nếu sau này đổi bố cục thì parser cần được cập nhật.

Bao gồm những gì

  • Bạn nhận được gìFile ZIP gồm code Python, file cài đặt và README hướng dẫn từng bước; code cũng được hiển thị trên trang đơn hàng.
  • Mỗi thông số một cộtSẵn sàng đặt các sản phẩm cạnh nhau
  • Đơn vị tách riêngVD: 1200 và W ở các cột riêng
  • Danh sách thông số của bạnChỉ các thông số bạn nêu, theo thứ tự của bạn
  • Tốc độ vừa phảiNghỉ giữa các trang, chỉnh trong file cài đặt
  • Chạy trên máy tính của bạnWindows, macOS hoặc Linux, có Python

Cách hoạt động

  1. 1
    Số trangBạn gửi website, hai trang sản phẩm đã lưu và danh sách thông số
  2. 2
    ParserChúng tôi viết code và hướng dẫn chạy
  3. 3
    ChạyBạn chạy parser và kiểm tra thông số của hai sản phẩm
  4. 4
    Chỉnh sửaBạn yêu cầu chỉnh sửa trong phạm vi gói và gửi thông báo lỗi nếu có

Chúng tôi cần gì từ bạn

Website và chính xác các trang cần lấy: liên kết tới một danh mục và hai trang sản phẩm có thông số khác nhau, và ước chừng có bao nhiêu sản phẩm. Danh sách thông số theo thứ tự trong bảng, viết đúng như website viết, và đơn vị có tách sang cột riêng hay không. Hai trang lưu từ trình duyệt (File > Lưu trang thành) hoặc ảnh chụp màn hình. CSV hay Excel.

Chúng tôi sẽ hỏi bạn:

  • Website và các trang nào?
  • Danh sách thông số của bạn
  • Khoảng bao nhiêu sản phẩm?
  • Đơn vị

So sánh các gói

Các góiCơ bảnThông số từ liên kết sản phẩm của bạn596.000 ₫Tiêu chuẩnMột danh mục, tối đa 25 thông số1.165.000 ₫Cao cấpTối đa 3 website2.032.000 ₫
Thời hạn1 ngày2 ngày3 ngày
Số lần chỉnh sửa123
Số website11tối đa 3
Loại trang12 (danh mục và sản phẩm)tối đa 3
Số trườngtối đa 10tối đa 25tối đa 25 mỗi loại
Đi qua các trang của danh sáchKhôngCóCó
File kết quảCSVExcel hoặc CSVExcel, CSV hoặc JSON
Bỏ dòng trùng, chạy tiếp từ chỗ đã dừngKhôngKhôngCó
Đặt hàng Cơ bảnĐặt hàng Tiêu chuẩnĐặt hàng Cao cấp

Bảo vệ thanh toán

Bạn thanh toán khi đặt hàng, nhưng tiền chỉ được chuyển cho kết quả đã được chấp nhận.

  • Giá cố địnhGiá gói không thay đổi sau khi bạn thanh toán.
  • Số tiền được tạm giữKhi bạn thanh toán, số tiền chỉ được tạm giữ. Tiền được chuyển cho dịch vụ khi bạn chấp nhận kết quả.
  • Kiểm tra trước khi bàn giaoMọi kết quả đều được kiểm tra chất lượng trước khi đến tay bạn, và bạn xem được kết quả trên trang đơn hàng trước khi chấp nhận.
  • Chỉnh sửa miễn phíYêu cầu chỉnh sửa trong phạm vi bản yêu cầu của bạn, với số lần mà gói cho phép.
  • Tự động chấp nhận sau 3 ngàyNếu trong vòng 3 ngày sau khi bàn giao, bạn không chấp nhận kết quả cũng không yêu cầu chỉnh sửa, kết quả sẽ được tự động chấp nhận. Nếu bạn nhắn tin trong chat đơn hàng sau khi bàn giao, đơn hàng sẽ chờ; sau khi trả lời, chúng tôi có thể tính lại 3 ngày từ đầu và sẽ thông báo trong chat.
  • Làm lại hoặc hoàn tiền toàn bộNếu kết quả không đúng với yêu cầu của bạn và các lần chỉnh sửa không khắc phục được, hoặc công việc kéo dài quá gấp đôi thời hạn, hãy nhắn tin trong chat đơn hàng: chúng tôi sẽ làm lại hoặc hoàn tiền toàn bộ.
Cách hoạt động →

Hỏi đáp

Nếu các sản phẩm có thông số khác nhau thì sao?

Bạn liệt kê các thông số cần, và mỗi thông số có một cột; sản phẩm nào thiếu thông số đó sẽ để ô trống. Thông số bạn không liệt kê sẽ được bỏ ra.

Parser có xếp thẳng hàng thông số từ các website khác nhau không?

Ở gói Cao cấp, tối đa 3 website. Các website gọi tên thông số khác nhau, nên bạn cho chúng tôi biết tên nào có cùng nghĩa, VD: «Trọng lượng» và «Trọng lượng tịnh».

Tôi có được dùng thông số thu thập được trong cửa hàng của mình không?

Hãy kiểm tra những gì bạn được dùng: mô tả và ảnh thuộc về chủ sở hữu, và bạn tự quyết định theo điều khoản của website. Parser chỉ lưu những hình ảnh bạn được phép dùng.

Parser có đọc được Amazon, Google hay mạng xã hội không?

Không. Amazon, Google, LinkedIn và mạng xã hội nằm ngoài phạm vi: điều khoản của họ cấm việc này. Sau khi website đổi bố cục, parser cần được cập nhật.

Chưa tìm thấy câu trả lời?

Các gói