Een Python-parser die de openbare catalogus van een leverancier omzet in een importbestand voor je webshop, met links naar foto's

Voorbeeldresultaat

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Over deze dienst

Toont een leverancier zijn assortiment op een openbare site maar stuurt hij geen bestand, dan kopieert deze parser de catalogus naar een tabel die je webshop kan importeren: naam, code, prijs, beschrijving, specificaties, categorie en links naar foto's, en hij slaat de foto's op in een map. Stuur de site van de leverancier, links naar een categorie en een productpagina, een of twee pagina's opgeslagen vanuit je browser en het importsjabloon van je webshop, bijvoorbeeld een CSV voor Shopify of WooCommerce, zodat de kolommen dat volgen. Je krijgt Python-code met een instellingenbestand en een README en draait hem op je computer. Gebruik alleen foto's en teksten die de leverancier je laat gebruiken. Hij leest openbare pagina's in een rustig tempo en logt nooit in, omzeilt geen captcha's of beveiliging en verzamelt geen persoonsgegevens. Jij bepaalt of de voorwaarden van de site het toestaan; een latere wijziging van de opmaak vraagt om een update.

Wat is inbegrepen

• Wat je krijgtEen ZIP-archief met de Python-code, een instellingenbestand en een README met stapsgewijze instructies; de code staat ook op de bestelpagina.
• Kolommen voor je importIn de volgorde en met de namen van het importbestand van je webshop
• Foto's klaar om te ladenLinks naar foto's in een kolom en bestanden genoemd naar de productcode
• Prijzen zoals getoondDe prijs van de leverancier; je eigen opslag voeg je toe in de tabel
• Rustig tempoEen pauze tussen pagina's, in te stellen in de instellingen
• Een heldere handleidingWat je installeert en hoe je het uitvoert, stap voor stap

Hoe het werkt

1. 1
   CatalogusJe geeft de pagina's van de leverancier en je importsjabloon
2. 2
   ParserWij schrijven de code en de handleiding om hem uit te voeren
3. 3
   TestimportJe start hem en importeert de eerste rijen in je webshop
4. 4
   WijzigingenJe vraagt binnen je pakket om wijzigingen en stuurt een eventuele foutmelding mee

Wat we van je nodig hebben

De site van de leverancier: een link naar een categorie en naar een productpagina, en ongeveer hoeveel producten het zijn. Het importsjabloon van je webshop of een voorbeeldexport van een paar van je producten, zodat de kolommen overeenkomen. De velden die je nodig hebt, zoals naam, code, prijs, beschrijving, specificaties, categorie, foto's. Een of twee pagina's van de leverancier, opgeslagen vanuit je browser (Bestand > Pagina opslaan als). Hoe fotobestanden moeten heten. En je bevestiging dat de leverancier je zijn foto's en teksten laat gebruiken.

We vragen je:

• Welke site van de leverancier en welke pagina's?
• Je webshop en het importbestand
• Ongeveer hoeveel producten?
• Foto's

Pakketten vergelijken

Vragen en antwoorden

Staat je antwoord er niet bij? Vraag het ons