Ein Python-Parser, der öffentliche Sportergebnisse in einer Tabelle sammelt: Datum, Wettbewerb, Heim- und Gastmannschaft, Ergebnis

Beispielergebnis

def product_links(list_url: str) -> Iterator[str]:
    """Links zu den Produktseiten von jeder Seite der Liste, dem Link „Weiter“ folgend."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Eine öffentliche Seite in höflichem Tempo: eine Pause zwischen Anfragen und einige Versuche bei Fehlern."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s antwortete mit %s, Versuch %d von 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ließ sich nach 3 Versuchen nicht öffnen")

Über diese Leistung

Sportmedien, Fanseiten und Analysten nutzen diesen Parser, um öffentliche Ergebnisse in einer Tabelle zu sammeln: Datum, Wettbewerb, Spieltag, Heimmannschaft, Gastmannschaft und Ergebnis, dazu Zahlen von einer Spielseite wie Torschüsse, Ecken oder Ballbesitz, sofern die Seite sie zeigt; oder eine Tabelle mit Platz, Spielen, Siegen, Unentschieden, Niederlagen und Punkten. Schicken Sie die Website, eine Ergebnisseite, eine Spielseite und ein oder zwei aus Ihrem Browser gespeicherte Seiten. Sie erhalten Python-Code mit einer Einstellungsdatei und einer README und starten ihn nach jedem Spieltag auf Ihrem Computer. Er sammelt Zahlen zu Vereinen und Spielen, keine Profile von Personen, und gibt keine Wetttipps oder Prognosen. Er liest öffentlich zugängliche Seiten in höflichem Tempo, meldet sich nie an und umgeht keine Captchas oder Schutzmaßnahmen. Ob die Nutzungsbedingungen der Website das erlauben, entscheiden Sie; eine spätere Änderung ihres Aufbaus erfordert eine Aktualisierung.

Was enthalten ist

• Das erhalten SieEin ZIP-Archiv mit dem Python-Code, einer Einstellungsdatei und einer README mit Schritt-für-Schritt-Anleitung; der Code wird auch auf der Bestellseite angezeigt.
• Ergebnis in SpaltenHeim- und Auswärtstore getrennt, bereit für Formeln
• TabellenstandPlatz, Spiele, Siege, Unentschieden, Niederlagen, Punkte
• SpielstatistikTorschüsse, Ecken oder Ballbesitz, sofern die Seite sie zeigt
• Höfliches TempoEine Pause zwischen den Seiten, in den Einstellungen festgelegt
• Läuft auf Ihrem ComputerWindows, macOS oder Linux, mit Python

So funktioniert es

1. 1
   SeitenSie nennen die Website, eine Ergebnisseite und eine gespeicherte Spielseite
2. 2
   ParserWir schreiben den Code und die Anleitung zum Ausführen
3. 3
   StartSie starten ihn und prüfen den letzten Spieltag anhand der Website
4. 4
   ÜberarbeitungenSie wünschen Überarbeitungen im Rahmen Ihres Pakets und schicken etwaige Fehlermeldungen

Was wir von Ihnen brauchen

Die Website und die genauen Seiten: ein Link zu den Ergebnissen oder zur Tabelle und zu einer Spielseite, die benötigten Wettbewerbe und Saisons und ungefähr wie viele Spiele. Die Felder in der Reihenfolge Ihrer Tabelle, z. B. Datum, Wettbewerb, Spieltag, Heimmannschaft, Gastmannschaft, Heimtore, Auswärtstore. Ein oder zwei dieser Seiten, aus Ihrem Browser gespeichert (Datei > Seite speichern unter), oder Screenshots. CSV oder Excel.

Wir fragen Sie:

• Welche Website und welche Seiten?
• Wettbewerbe und Saisons
• Die benötigten Felder
• Wie oft werden Sie ihn starten?

Pakete vergleichen

Fragen und Antworten

Keine Antwort gefunden? Fragen Sie uns