Un parseur Python qui enregistre des taux de change et de cryptomonnaies publics dans un tableau, avec l’heure de chaque relevé

Exemple de résultat

def product_links(list_url: str) -> Iterator[str]:
    """Liens des fiches produits de chaque page de la liste, en suivant « Suivant »."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Une page publique, à un rythme raisonnable : une pause entre les requêtes et quelques essais en cas d’erreur."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s a répondu %s, essai %d sur 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ne s’est pas ouverte après 3 essais")

À propos de ce service

Bureaux de change, boutiques qui affichent leurs prix en plusieurs devises et comptables utilisent ce parseur pour enregistrer les taux de pages publiques dans un tableau : devise ou cryptomonnaie, taux d’achat et de vente, taux officiel, variation du jour quand elle est affichée, la source et l’heure du relevé. Envoyez les pages où vous prenez les taux, comme le tableau public des taux d’une banque, et une ou deux d’entre elles enregistrées depuis votre navigateur. Vous recevez un code Python, un fichier de paramètres et un README et le lancez sur votre ordinateur quand vous avez besoin d’un relevé. Les taux sont copiés tels que la page les affiche à ce moment-là : ce n’est pas un flux en direct, et il ne donne ni conseils financiers ni prévisions. Quand une source propose un flux officiel de données ouvertes, nous vous le signalons. Il lit les pages publiques à un rythme raisonnable et ne se connecte jamais, ne contourne ni captcha ni protection. C’est à vous de juger si les conditions du site le permettent ; un changement ultérieur de la mise en page demande une mise à jour.

Ce qui est inclus

• Ce que vous recevezUne archive ZIP avec le code Python, un fichier de paramètres et un README avec des instructions pas à pas ; le code est aussi affiché sur la page de la commande.
• Achat et vente séparésColonnes séparées, en nombres
• Heure de chaque relevéDate et heure sur chaque ligne
• Source dans une colonnePour que les taux de pages différentes restent distincts
• Rythme raisonnablePas chaque seconde : une pause que vous fixez
• Tourne sur votre ordinateurWindows, macOS ou Linux, avec Python

Comment ça marche

1. 1
   SourcesVous donnez les pages de taux et les devises ou cryptomonnaies
2. 2
   ParseurNous écrivons le code et le guide pour le lancer
3. 3
   LancementVous le lancez et comparez le premier relevé avec le site
4. 4
   RetouchesVous demandez des retouches selon votre formule et envoyez les éventuels messages d’erreur

Ce dont nous avons besoin

Les pages où vous prenez les taux, avec les liens, et les devises ou cryptomonnaies voulues. Les champs dans l’ordre de votre tableau, ex. : devise, achat, vente, taux officiel, variation, source, heure. Une ou deux de ces pages enregistrées depuis votre navigateur (Fichier > Enregistrer la page sous) ou des captures d’écran. La fréquence des relevés, le format des nombres (point ou virgule), et CSV ou Excel.

Nous vous demanderons :

• Quelles pages ?
• Devises ou cryptomonnaies
• Les champs voulus
• À quelle fréquence allez-vous le lancer ?

Comparer les formules

Questions et réponses

Vous n’avez pas trouvé la réponse ? Posez-nous la question