공개된 도서 가격을 표로 모으는 Python 파서: 제목, 저자, ISBN, 형태, 가격, 재고

결과물 예시

def product_links(list_url: str) -> Iterator[str]:
    """목록의 모든 페이지에서 상품 페이지 링크를 모읍니다. '다음'을 따라갑니다."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """공개 페이지 하나를 서버에 무리를 주지 않는 속도로 엽니다. 요청 사이에 쉬고, 오류가 나면 몇 번 다시 시도합니다."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s 응답 %s, %d/3번째 시도", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} 페이지가 3번 시도해도 열리지 않았습니다")

서비스 소개

서점과 중고 판매자는 이 파서로 공개 온라인 서점의 가격을 확인합니다. 제목, 책에 인쇄된 그대로의 저자, ISBN, 출판사, 출간 연도, 형태(양장본, 무선 제본, 전자책), 가격, 이전 가격, 재고 여부, 링크가 들어갑니다. 행마다 ISBN이 있어 Excel에서 고객님의 목록과 대조할 수 있습니다. 서점 사이트, 분야나 검색 페이지, 도서 페이지 하나, 브라우저에서 저장한 페이지 한두 개를 보내 주세요. Python 코드, 설정 파일, README를 받아 가격을 조정할 때마다 고객님의 컴퓨터에서 실행하시면 됩니다. 독자나 개인 판매자에 관한 데이터는 수집하지 않습니다. 공개된 페이지만 서버에 무리를 주지 않는 속도로 읽고, 로그인하거나 캡차나 보호 장치를 우회하지 않으며, Amazon이나 Google은 읽지 않습니다. 사이트 이용 약관이 이를 허용하는지는 고객님이 판단하시며, 나중에 사이트 구조가 바뀌면 업데이트가 필요합니다.

포함 사항

• 받으시는 결과물Python 코드, 설정 파일, 단계별 안내가 담긴 README가 들어 있는 ZIP 압축 파일. 코드는 주문 페이지에서도 볼 수 있습니다.
• 대조용 ISBN별도 열에 담아 Excel에서 바로 조회
• 가격과 이전 가격숫자로, 옆에 재고 여부와 함께
• 형태별로 따로양장본, 무선 제본, 전자책을 각각 별도 행으로
• 적당한 속도페이지 사이 대기 시간을 설정에서 지정
• 고객님의 컴퓨터에서 실행Python이 설치된 Windows, macOS 또는 Linux

진행 방식

1. 1
   페이지 수서점, 분야, 저장한 도서 페이지 하나를 보내 주세요
2. 2
   파서코드와 실행 안내서를 작성합니다
3. 3
   실행실행한 뒤 몇몇 가격을 서점과 대조해 보세요
4. 4
   수정패키지 범위 안에서 수정을 요청하고 오류 메시지가 있으면 보내 주세요

준비해 주실 내용

서점 사이트와 정확한 페이지: 분야나 검색 링크와 도서 페이지 하나의 링크, 대략적인 도서 수. 표에 넣을 순서대로 필드(예: 제목, 저자, ISBN, 출판사, 출간 연도, 형태, 가격, 이전 가격, 재고 여부, 링크). 브라우저에서 저장한(파일 > 다른 이름으로 페이지 저장) 해당 페이지 한두 개 또는 스크린샷. 특정 도서만 읽으려면 고객님의 ISBN 목록.

다음 내용을 여쭤봅니다:

• 어떤 서점과 페이지인가요?
• 필요한 항목
• 도서는 대략 몇 권인가요?
• 그 밖에 필요한 기능

패키지 비교

질문과 답변

답을 찾지 못하셨나요? 질문하기