Ein Python-Parser, der öffentliche Veranstaltungs- und Konzertkalender in einer Tabelle sammelt: Datum, Veranstaltungsort, Stadt, Preis und Link

Beispielergebnis

def product_links(list_url: str) -> Iterator[str]:
    """Links zu den Produktseiten von jeder Seite der Liste, dem Link „Weiter“ folgend."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Eine öffentliche Seite in höflichem Tempo: eine Pause zwischen Anfragen und einige Versuche bei Fehlern."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s antwortete mit %s, Versuch %d von 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} ließ sich nach 3 Versuchen nicht öffnen")

Über diese Leistung

Stadtführer, Veranstaltungsorte und Veranstalter nutzen diesen Parser, um öffentliche Veranstaltungskalender in einer Tabelle zu sammeln: Titel der Veranstaltung, Kategorie, Datum und Beginn, Veranstaltungsort, Stadt, Preis ab, Altersgrenze, Ticketlink und Bildlink. Schicken Sie die Kalenderseite der Website, etwa eines Veranstaltungsorts, eines Stadtführers oder einer Ticketseite, eine Veranstaltungsseite und ein oder zwei aus Ihrem Browser gespeicherte Seiten. Wir schreiben den Code in Python; Sie erhalten ihn mit einer Einstellungsdatei und einer README und starten ihn auf Ihrem Computer, bevor Sie Ihren eigenen Kalender aktualisieren. Er kauft keine Tickets, prüft keine freien Plätze und sammelt keine personenbezogenen Daten von Veranstaltern oder Besuchern. Er liest öffentlich zugängliche Seiten in höflichem Tempo, meldet sich nie an und umgeht keine Captchas oder Schutzmaßnahmen. Ob die Nutzungsbedingungen der Website das erlauben, entscheiden Sie, und eine spätere Änderung ihres Aufbaus erfordert eine Aktualisierung.

Was enthalten ist

• Das erhalten SieEin ZIP-Archiv mit dem Python-Code, einer Einstellungsdatei und einer README mit Schritt-für-Schritt-Anleitung; der Code wird auch auf der Bestellseite angezeigt.
• Sortierbare TermineDatum und Uhrzeit in einem Format, damit sich die Tabelle nach Tag sortieren lässt
• TicketlinksEin Link zur eigenen Seite oder Ticketseite der Veranstaltung
• BildlinksPlakate als Links; verwenden Sie sie nur, wenn Sie dürfen
• Höfliches TempoEine Pause zwischen den Seiten, in den Einstellungen festgelegt
• Läuft auf Ihrem ComputerWindows, macOS oder Linux, mit Python

So funktioniert es

1. 1
   KalenderSie nennen die Kalenderseite und eine gespeicherte Veranstaltungsseite
2. 2
   ParserWir schreiben den Code und die Anleitung zum Ausführen
3. 3
   StartSie starten ihn und prüfen die Termine der ersten Veranstaltungen
4. 4
   ÜberarbeitungenSie wünschen Überarbeitungen im Rahmen Ihres Pakets und schicken etwaige Fehlermeldungen

Was wir von Ihnen brauchen

Die Website und die genauen Seiten: ein Link zum Kalender und zu einer Veranstaltungsseite und ungefähr wie viele Veranstaltungen es gibt. Die benötigten Felder in der Reihenfolge Ihrer Tabelle, z. B. Titel, Kategorie, Datum, Uhrzeit, Veranstaltungsort, Stadt, Preis ab, Link. Ein oder zwei dieser Seiten, aus Ihrem Browser gespeichert (Datei > Seite speichern unter), oder Screenshots. Das gewünschte Datumsformat und CSV oder Excel.

Wir fragen Sie:

• Welche Website und welche Seiten?
• Die benötigten Felder
• Ungefähr wie viele Veranstaltungen?
• Nur bestimmte Veranstaltungen?

Pakete vergleichen

Fragen und Antworten

Keine Antwort gefunden? Fragen Sie uns