Un parseur Python qui vérifie si des produits sont en stock sur un site public et enregistre chaque statut avec la date

Exemple de résultat

def product_links(list_url: str) -> Iterator[str]:
    """Liens des fiches produits de chaque page de la liste, en suivant « Suivant »."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Une page publique, à un rythme raisonnable : une pause entre les requêtes et quelques essais en cas d’erreur."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s a répondu %s, essai %d sur 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ne s’est pas ouverte après 3 essais")

À propos de ce service

À chaque lancement, ce parseur vérifie quels produits sont en stock sur un site public, comme celui de votre fournisseur ou d’une boutique dont vous revendez les articles, et enregistre un tableau : nom, référence, statut tel que la page l’écrit, quantité restante quand elle est affichée, délai de livraison, prix, lien, et date et heure du relevé. Gardez le fichier de chaque lancement et vous verrez ce qui est revenu et ce qui est épuisé. Envoyez le site, des liens vers une catégorie et une fiche produit, les statuts utilisés par le site et une ou deux pages enregistrées depuis votre navigateur. Vous recevez un code Python, un fichier de paramètres et un README et le lancez sur votre ordinateur. Il ne lit que des pages publiques, à un rythme raisonnable, et ne se connecte jamais, ne contourne ni captcha ni protection et ne collecte aucune donnée personnelle. C’est à vous de juger si les conditions du site le permettent ; un changement ultérieur de sa mise en page demande une mise à jour.

Ce qui est inclus

• Ce que vous recevezUne archive ZIP avec le code Python, un fichier de paramètres et un README avec des instructions pas à pas ; le code est aussi affiché sur la page de la commande.
• Statut en colonneLes termes du site, ou vos propres libellés comme oui / non / sur commande
• Quantité quand elle est affichéeQuand la page indique combien il en reste
• Lignes datéesDate et heure du relevé dans chaque ligne
• Rythme raisonnableUne pause entre les pages, réglée dans les paramètres
• Tourne sur votre ordinateurWindows, macOS ou Linux, avec Python

Comment ça marche

1. 1
   PagesVous donnez le site, les produits et les statuts qu’il utilise
2. 2
   ParseurNous écrivons le code et le guide pour le lancer
3. 3
   Premier relevéVous le lancez et comparez quelques statuts avec le site
4. 4
   RetouchesVous demandez des retouches selon votre formule et envoyez les éventuels messages d’erreur

Ce dont nous avons besoin

Le site et les pages précises : un lien vers une catégorie et vers une fiche produit, ou votre liste de liens produits, et le nombre approximatif de produits. Les statuts de stock affichés par le site, écrits tels qu’ils apparaissent. Les champs voulus en plus du statut, ex. : référence, prix, délai de livraison. Une ou deux pages enregistrées depuis votre navigateur (Fichier > Enregistrer la page sous) ou des captures, idéalement une en stock et une en rupture. La fréquence de lancement prévue.

Nous vous demanderons :

• Quel site et quels produits ?
• Les statuts de stock
• Autres champs
• À quelle fréquence allez-vous vérifier ?

Comparer les formules

Questions et réponses

Vous n’avez pas trouvé la réponse ? Posez-nous la question