Ein Python-Parser, der öffentliche Wechsel- und Kryptokurse mit dem Zeitpunkt jeder Abfrage in einer Tabelle speichert

Beispielergebnis

def product_links(list_url: str) -> Iterator[str]:
    """Links zu den Produktseiten von jeder Seite der Liste, dem Link „Weiter“ folgend."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Eine öffentliche Seite in höflichem Tempo: eine Pause zwischen Anfragen und einige Versuche bei Fehlern."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s antwortete mit %s, Versuch %d von 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ließ sich nach 3 Versuchen nicht öffnen")

Über diese Leistung

Wechselstuben, Shops mit Preisen in mehreren Währungen und Buchhalter nutzen diesen Parser, um Kurse von öffentlichen Seiten in einer Tabelle zu speichern: Währung oder Coin, An- und Verkaufskurs, amtlicher Kurs, Tagesveränderung, sofern angezeigt, die Quelle und der Zeitpunkt der Abfrage. Schicken Sie die Seiten, von denen Sie Kurse übernehmen, etwa die öffentliche Kurstabelle einer Bank, und ein oder zwei davon, aus Ihrem Browser gespeichert. Sie erhalten Python-Code mit einer Einstellungsdatei und einer README und starten ihn auf Ihrem Computer, wenn Sie eine Abfrage brauchen. Die Kurse werden so übernommen, wie die Seite sie in diesem Moment zeigt: Er ist kein Live-Feed und gibt keine Finanzberatung oder Prognosen. Wo eine Quelle einen offiziellen offenen Datenfeed hat, sagen wir es Ihnen. Er liest öffentlich zugängliche Seiten in höflichem Tempo, meldet sich nie an und umgeht keine Captchas oder Schutzmaßnahmen. Ob die Nutzungsbedingungen der Website das erlauben, entscheiden Sie; eine spätere Änderung des Aufbaus erfordert eine Aktualisierung.

Was enthalten ist

• Das erhalten SieEin ZIP-Archiv mit dem Python-Code, einer Einstellungsdatei und einer README mit Schritt-für-Schritt-Anleitung; der Code wird auch auf der Bestellseite angezeigt.
• An- und Verkauf getrenntEigene Spalten, als Zahlen
• Zeitpunkt jeder AbfrageDatum und Uhrzeit in jeder Zeile
• Quelle in einer SpalteDamit Kurse von verschiedenen Seiten getrennt bleiben
• Höfliches TempoNicht jede Sekunde: eine Pause, die Sie festlegen
• Läuft auf Ihrem ComputerWindows, macOS oder Linux, mit Python

So funktioniert es

1. 1
   QuellenSie nennen die Kursseiten und die Währungen oder Coins
2. 2
   ParserWir schreiben den Code und die Anleitung zum Ausführen
3. 3
   StartSie starten ihn und vergleichen die erste Abfrage mit der Website
4. 4
   ÜberarbeitungenSie wünschen Überarbeitungen im Rahmen Ihres Pakets und schicken etwaige Fehlermeldungen

Was wir von Ihnen brauchen

Die Seiten, von denen Sie Kurse übernehmen, mit Links, und die benötigten Währungen oder Coins. Die Felder in der Reihenfolge Ihrer Tabelle, z. B. Währung, Ankauf, Verkauf, amtlicher Kurs, Veränderung, Quelle, Uhrzeit. Ein oder zwei dieser Seiten, aus Ihrem Browser gespeichert (Datei > Seite speichern unter), oder Screenshots. Wie oft Sie eine Abfrage brauchen, das Zahlenformat (Punkt oder Komma) und CSV oder Excel.

Wir fragen Sie:

• Welche Seiten?
• Währungen oder Coins
• Die benötigten Felder
• Wie oft werden Sie ihn starten?

Pakete vergleichen

Fragen und Antworten

Keine Antwort gefunden? Fragen Sie uns