Spor sonuçları parser'ıGeliştirme ve Özelleştirme

Açık spor sonuçlarını bir tabloya toplayan Python parser'ı: tarih, turnuva, ev sahibi ve deplasman takımı, skor

Genellikle 15 dakika içinde hazırRevizyonlar dahilKalite kontrolü
Paketler
Ödeme korumasıAyrıntılar
  • Paket kapsamındaki revizyonlar ücretsizdir.
  • Teslimattan sonraki 3 gün içinde yanıt vermezseniz iş otomatik olarak onaylanır.

Para, ödeme yaptığınızda bloke edilir ve yalnızca işi onayladığınızda aktarılır.

Açık spor sonuçlarını bir tabloya toplayan Python parser'ı: tarih, turnuva, ev sahibi ve deplasman takımı, skor

Örnek sonuç

Standart paket için örnek

Parser of a garden tools supplier's catalog into Excel

What the result looks like

ArticleNamePriceIn stockWeightPhoto
GT-1042Pruning shears, 20 mm18.90Yes0.24 kg…/gt-1042.jpg
GT-1187Folding saw, 210 mm24.50Yes0.31 kg…/gt-1187.jpg
GT-2210Hedge shears, wavy blade39.00No1.10 kg…/gt-2210.jpg
GT-3305Hand trowel, stainless9.80Yes0.18 kg…/gt-3305.jpg
GT-4120Garden hose 25 m, 1/2"42.00Yes2.90 kg…/gt-4120.jpg

The file in the example has 1,236 products from 52 list pages.

A part of the code

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Files: a ZIP archive with scraper.py, settings.ini (the start page, the pause between requests, the file name), requirements.txt and a README on installing and running it. It reads only open pages, one every 2 seconds, and checks the site's robots.txt first. The client runs it on their own computer.

Client: an online garden shop that resells a supplier's tools; the supplier has an open catalog on its website but no price list file. Task: go through the catalog's list pages, open every product page and save the article number, name, price, stock, weight and main photo link to Excel, to compare prices once a week.

Müşteri ve tüm ayrıntılar kurgusaldır.

Bu hizmet hakkında

Spor medyası, taraftar siteleri ve analistler bu parser ile açık sonuçları tek bir tabloda toplar: tarih, turnuva, hafta, ev sahibi, deplasman takımı ve skor; ayrıca maç sayfası gösteriyorsa şut, korner ya da topla oynama gibi istatistikler; ya da sıra, oynanan, galibiyet, beraberlik, mağlubiyet ve puan içeren bir puan durumu tablosu. Siteyi, bir sonuçlar sayfasını, bir maç sayfasını ve tarayıcınızdan kaydedilmiş bir ya da iki sayfayı gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve her haftadan sonra onu bilgisayarınızda çalıştırırsınız. Kişilerin profillerini değil, kulüplerin ve maçların istatistiklerini toplar; bahis tüyosu ya da tahmin vermez. Açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sitenin düzeni sonradan değişirse güncelleme gerekir.

Neler dahil

  • Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
  • Sütunlarda skorEv sahibi ve deplasman golleri ayrı, formüllere hazır
  • Puan durumuSıra, oynanan, galibiyet, beraberlik, mağlubiyet, puan
  • Maç istatistikleriSayfa gösteriyorsa şut, korner ya da topla oynama
  • Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
  • Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

  1. 1
    SayfalarSiteyi, bir sonuçlar sayfasını ve kaydedilmiş bir maç sayfasını verirsiniz
  2. 2
    ParserKodu ve çalıştırma kılavuzunu yazarız
  3. 3
    ÇalıştırmaÇalıştırır ve son haftayı siteyle karşılaştırırsınız
  4. 4
    DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Site ve tam sayfalar: sonuçlara ya da puan durumuna ve bir maç sayfasına bağlantı, ihtiyacınız olan turnuvalar ve sezonlar ve yaklaşık kaç maç olduğu. Tablonuzdaki sırayla alanlar, ör. tarih, turnuva, hafta, ev sahibi, deplasman, ev sahibi golleri, deplasman golleri. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) bu sayfalardan bir ya da ikisi veya ekran görüntüleri. CSV ya da Excel.

Size soracaklarımız:

  • Hangi site ve sayfalar?
  • Turnuvalar ve sezonlar
  • İhtiyacınız olan alanlar
  • Ne sıklıkla çalıştıracaksınız?

Paketleri karşılaştırın

PaketlerTemelTek bir sayfadan sonuçlar$21StandartSonuçlar ve maç sayfaları$42PremiumEn fazla 3 site ya da turnuva$75
Teslim süresi1 gün2 gün3 gün
Revizyonlar123
Siteler11en fazla 3
Sayfa türleri12 (sonuç listesi ve maç sayfası)en fazla 3
Alanlaren fazla 10en fazla 25her birinde en fazla 25
Bir listenin sayfalarında gezinirHayırEvetEvet
Sonuç dosyasıCSVExcel ya da CSVExcel, CSV ya da JSON
Tekrarlar temizlenir, kaldığı yerden devam ederHayırHayırEvet
Sipariş ver TemelSipariş ver StandartSipariş ver Premium

Ödeme koruması

Sipariş verirken ödersiniz, ancak para yalnızca onaylanan iş için aktarılır.

  • Sabit fiyatPaket fiyatı, ödeme yaptıktan sonra değişmez.
  • Para bloke edilirÖdeme yaptığınızda tutar yalnızca bloke edilir. İşi onayladığınızda hizmete aktarılır.
  • Teslimattan önce kontrolHer sonuç size ulaşmadan önce kalite kontrolünden geçer ve onaylamadan önce sipariş sayfasında görürsünüz.
  • Ücretsiz revizyonlarBrifiniz kapsamında, paketin izin verdiği sayıda değişiklik isteyin.
  • 3 gün sonra onayTeslimattan sonraki 3 gün içinde işi onaylamaz veya değişiklik istemezseniz iş otomatik olarak onaylanır. Teslimattan sonra sipariş sohbetine yazarsanız sipariş bekletilir; yanıt verdikten sonra 3 günlük süreyi yeniden başlatabiliriz ve bunu sohbette bildiririz.
  • Yeniden yapım veya tam iadeSonuç brifinize uymuyorsa ve revizyonlar sorunu çözmediyse ya da iş teslim süresinin iki katından uzun sürerse sipariş sohbetine yazın: işi yeniden yaparız veya ödemenin tamamını iade ederiz.
Nasıl çalışır →

Sorular ve yanıtlar

Maç sırasında canlı skor verebilir mi?

Hayır. Sayfaları siz çalıştırdığınızda, siteyi yormayan bir hızda okur; bu yüzden canlı bir veri akışı değildir. Canlı veri için liginin resmi veri hizmetini kullanın.

Oyuncu istatistiklerini toplayabilir mi?

İstatistikleri kulübe ve maça göre toplar. Oyuncuların kişisel profilleri dışarıda bırakılır; böylece tabloda hiçbir kişisel veri yer almaz.

Bahiste bana yardımcı olur mu?

Hayır. Tablo geçmiş sonuçları sitede göründükleri gibi tutar; tüyo, tahmin ya da bahis tavsiyesi vermeyiz.

Hangi siteleri okuyabilir?

Sonuçların görsel değil metin olduğu ve oturum açmadan görülebildiği açık siteleri. Ligler çoğu zaman verilerinin sahibidir; bu yüzden sitenin koşullarını kontrol edin, karar sizindir. Google, Amazon, LinkedIn ve sosyal ağlar kapsam dışıdır.

Yanıtınızı bulamadınız mı?

Paketler