Un parseur Python pour les offres d’emploi publiques : intitulé, entreprise, ville, salaire, date et lien dans un tableau, sans coordonnées

Exemple de résultat

def product_links(list_url: str) -> Iterator[str]:
    """Liens des fiches produits de chaque page de la liste, en suivant « Suivant »."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Une page publique, à un rythme raisonnable : une pause entre les requêtes et quelques essais en cas d’erreur."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s a répondu %s, essai %d sur 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ne s’est pas ouverte après 3 essais")

À propos de ce service

Cabinets de recrutement, sites carrières et candidats utilisent ce parseur pour réunir les offres d’emploi publiques dans un seul tableau : intitulé du poste, entreprise, ville, télétravail ou sur site, type de contrat, salaire minimum et maximum tel que l’offre l’indique, date de publication, courte description et lien. Lancez une recherche sur un site d’emploi ou ouvrez la page carrières d’une entreprise, puis envoyez ce lien, une offre et une ou deux pages enregistrées depuis votre navigateur. Vous recevez un code Python, un fichier de paramètres et un README et le lancez sur votre ordinateur. Les données personnelles restent à l’écart : ni noms, ni e-mails, ni téléphones des recruteurs ou des salariés. Il lit les pages publiques à un rythme raisonnable, ne se connecte jamais, ne contourne ni captcha ni protection, et ne lit pas LinkedIn. C’est à vous de juger si les conditions du site le permettent ; un changement ultérieur de sa mise en page demande une mise à jour.

Ce qui est inclus

• Ce que vous recevezUne archive ZIP avec le code Python, un fichier de paramètres et un README avec des instructions pas à pas ; le code est aussi affiché sur la page de la commande.
• Salaire en colonnesMinimum et maximum en nombres quand l’offre les donne
• Votre recherchePart d’un lien de recherche avec vos filtres
• Sans coordonnéesNi noms, ni e-mails, ni téléphones de recruteurs
• Rythme raisonnableUne pause entre les pages, réglée dans les paramètres
• Un guide simpleQuoi installer et comment le lancer, pas à pas

Comment ça marche

1. 1
   RechercheVous envoyez une recherche ou une page carrières et une offre enregistrée
2. 2
   ParseurNous écrivons le code et le guide pour le lancer
3. 3
   LancementVous le lancez et comparez les premières offres avec le site
4. 4
   RetouchesVous demandez des retouches selon votre formule et envoyez les éventuels messages d’erreur

Ce dont nous avons besoin

Le site d’emploi ou la page carrières et un lien vers une recherche avec vos filtres (poste, ville, télétravail), une offre et le nombre approximatif d’offres. Les champs voulus dans l’ordre de votre tableau, ex. : intitulé, entreprise, ville, salaire minimum, salaire maximum, type de contrat, date, lien. Une ou deux de ces pages enregistrées depuis votre navigateur (Fichier > Enregistrer la page sous) ou des captures d’écran. CSV ou Excel.

Nous vous demanderons :

• Quel site et quelle recherche ?
• Les champs voulus
• Combien d’offres environ ?
• Autre chose à faire

Comparer les formules

Questions et réponses

Vous n’avez pas trouvé la réponse ? Posez-nous la question