공급업체의 공개 카탈로그를 사진 링크와 함께 쇼핑몰 가져오기 파일로 바꾸는 Python 파서

결과물 예시

def product_links(list_url: str) -> Iterator[str]:
    """목록의 모든 페이지에서 상품 페이지 링크를 모읍니다. '다음'을 따라갑니다."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """공개 페이지 하나를 서버에 무리를 주지 않는 속도로 엽니다. 요청 사이에 쉬고, 오류가 나면 몇 번 다시 시도합니다."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s 응답 %s, %d/3번째 시도", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} 페이지가 3번 시도해도 열리지 않았습니다")

서비스 소개

공급업체가 공개 사이트에 상품을 보여 주기만 하고 파일은 보내 주지 않을 때, 이 파서는 카탈로그를 쇼핑몰에서 가져올 수 있는 표로 옮깁니다. 상품명, 코드, 가격, 설명, 사양, 카테고리, 사진 링크가 들어가며 사진은 폴더에 저장합니다. 공급업체 사이트, 카테고리와 상품 페이지 링크, 브라우저에서 저장한 페이지 한두 개, 그리고 열을 맞출 수 있도록 쇼핑몰의 가져오기 템플릿(예: Shopify나 WooCommerce CSV)을 보내 주세요. 설정 파일과 README가 포함된 Python 코드를 받아 고객님의 컴퓨터에서 실행하시면 됩니다. 공급업체가 사용을 허락한 사진과 텍스트만 사용하세요. 공개된 페이지를 서버에 무리를 주지 않는 속도로 읽으며, 로그인하거나 캡차나 보호 장치를 우회하거나 개인 정보를 수집하지 않습니다. 사이트 이용 약관이 이를 허용하는지는 고객님이 판단하시며, 나중에 사이트 구조가 바뀌면 업데이트가 필요합니다.

포함 사항

• 받으시는 결과물Python 코드, 설정 파일, 단계별 안내가 담긴 README가 들어 있는 ZIP 압축 파일. 코드는 주문 페이지에서도 볼 수 있습니다.
• 가져오기에 맞춘 열쇼핑몰 가져오기 파일의 순서와 이름 그대로
• 바로 올릴 수 있는 사진열에 담긴 사진 링크와 상품 코드로 이름 붙인 파일
• 표시된 그대로의 가격공급업체 가격 그대로. 마진은 표에서 직접 추가
• 적당한 속도페이지 사이 대기 시간을 설정에서 지정
• 쉬운 안내서무엇을 설치하고 어떻게 실행하는지 단계별로

진행 방식

1. 1
   카탈로그공급업체 페이지와 가져오기 템플릿을 보내 주세요
2. 2
   파서코드와 실행 안내서를 작성합니다
3. 3
   테스트 가져오기실행한 뒤 처음 몇 행을 쇼핑몰에 가져와 보세요
4. 4
   수정패키지 범위 안에서 수정을 요청하고 오류 메시지가 있으면 보내 주세요

준비해 주실 내용

공급업체 사이트: 카테고리 링크와 상품 페이지 링크, 대략적인 상품 수. 열을 맞출 수 있도록 쇼핑몰의 가져오기 템플릿이나 상품 몇 개를 내보낸 샘플. 필요한 필드(상품명, 코드, 가격, 설명, 사양, 카테고리, 사진 등). 브라우저에서 저장한(파일 > 다른 이름으로 페이지 저장) 공급업체 페이지 한두 개. 사진 파일 이름 짓는 방식. 그리고 공급업체가 사진과 텍스트 사용을 허락했다는 확인.

다음 내용을 여쭤봅니다:

• 어떤 공급업체 사이트와 페이지인가요?
• 쇼핑몰과 가져오기 파일
• 상품은 대략 몇 개인가요?
• 사진

패키지 비교

질문과 답변

답을 찾지 못하셨나요? 질문하기