Bir sitenin sayfalarının SEO verilerini bir tabloya kaydeden Python parser'ı: title, description, H1, durum kodu, canonical

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Bir site taşımadan ya da SEO kontrolünden önce bu parser bir sitenin sayfalarında gezinir ve her biri için bir satır kaydeder: adres, yanıt kodu, uzunluklarıyla birlikte title ve meta description, H1, H2 sayısı, canonical bağlantı, noindex etiketi, kelime sayısı, alt metni olmayan görseller ve iç bağlantı sayısı. Adresleri sitenin sitemap dosyasından, kategori sayfalarından ya da sizin listenizden alır. Kendi sitenizde ya da açık bir rakip sitesinde kullanın. Site adresini, tarayıcınızdan kaydedilmiş birkaç sayfayı ve ihtiyacınız olan alanları gönderin. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Olguları toplar, siteyi düzeltmez ve arama sıralaması vaat etmez. Yalnızca açık sayfaları siteyi yormayan bir hızda okur; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz. Bir sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sonradan bir düzen değişikliği olursa güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Etiketler ve uzunluklarıKarakter sayılarıyla title ve description
• Yanıt kodlarıBozuk ve yönlendirilmiş sayfaları görün
• Eksik alt metinAlt metni olmayan görselleri sayar
• Sitemap'ten ya da listenizdenSitemap dosyasından, kategorilerden ya da verdiğiniz bir dosyadan adresler
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi

Nasıl çalışır

1. 1
   SiteSiteyi, adres kaynağını ve kaydedilmiş sayfaları verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve birkaç satırı tarayıcınızda kontrol edersiniz
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Site adresi ve parser'ın adresleri nereden alacağı: sitemap dosyası, kategori sayfaları ya da kendi listeniz. Yaklaşık kaç sayfa olduğu. İhtiyacınız olan alanlar, ör. adres, yanıt kodu, title, description, H1, canonical, noindex, kelime sayısı, alt metni olmayan görseller. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) farklı türde iki üç sayfa. CSV ya da Excel.

Size soracaklarımız:

• Hangi site?
• Adresler nereden alınacak
• İhtiyacınız olan alanlar
• Yaklaşık kaç sayfa?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun