Açık ürün yorumlarını bir tabloya toplayan Python parser'ı: yalnızca metin, puan ve tarih, isim yok

Örnek sonuç

def product_links(list_url: str) -> Iterator[str]:
    """Product page links from every page of the list, following 'Next'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """One open page, at a polite pace: a pause between requests and a few tries on errors."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} did not open after 3 tries")

Bu hizmet hakkında

Alıcıların sizin ya da bir rakibin ürünlerinde neyi beğenip neyi beğenmediğini görmek için bu parser açık yorumları bir tabloya toplar: ürün ve bağlantısı, her yorum için de yalnızca metin, puan ve tarih. Yorum yapanların adları, kullanıcı adları, fotoğrafları ve profil bağlantıları dışarıda bırakılır; böylece tabloda hiçbir kişisel veri yer almaz. Mağazanın sitesini, yorumları olan bir ürün sayfasını ve tarayıcınızdan kaydedilmiş bir ya da iki sayfayı gönderin; yorumlar bir “daha fazla göster” düğmesiyle açılıyorsa parser onu takip eder. Python kodu, bir ayar dosyası ve README alırsınız ve onu bilgisayarınızda çalıştırırsınız. Amazon'u, Google'ı, LinkedIn'i ya da sosyal ağları okumaz; asla oturum açmaz, CAPTCHA'ları ya da korumaları aşmaz ve siteyi yormayan bir hızda çalışır. Sitenin koşullarının buna izin verip vermediğine siz karar verirsiniz; sitenin düzeni sonradan değişirse güncelleme gerekir.

Neler dahil

• Neler alırsınızPython kodunu, bir ayar dosyasını ve adım adım talimatlar içeren bir README dosyasını barındıran bir ZIP arşivi; kod sipariş sayfasında da gösterilir.
• Yorum başına üç bilgiMetin, puan ve tarih; kişi hakkında hiçbir şey
• Ürüne bağlıHer yorum satırında ürün adı ve bağlantısı yer alır
• Tüm yorum sayfaları“Daha fazla göster”i ve yorum sayfalarını takip eder
• Nazik hızSayfalar arasında, ayarlardan belirlenen bir bekleme süresi
• Bilgisayarınızda çalışırPython yüklü Windows, macOS ya da Linux

Nasıl çalışır

1. 1
   SayfalarMağazayı, ürünleri ve yorumları olan kaydedilmiş bir sayfayı verirsiniz
2. 2
   ParserKodu ve çalıştırma kılavuzunu yazarız
3. 3
   ÇalıştırmaÇalıştırır ve bir ürünün yorum sayısını kontrol edersiniz
4. 4
   DeğişikliklerPaketiniz kapsamında değişiklik ister, varsa hata mesajını gönderirsiniz

Sizden neler gerekiyor

Mağazanın sitesi ve tam sayfalar: ürün bağlantıları listesi ya da bir kategori bağlantısı ve yaklaşık kaç ürün ve yorum olduğu. Yorum metni, puan ve tarih dışında ihtiyacınız olan ürün alanları, ör. ürün adı, kod, bağlantı, ortalama puan. Tarayıcınızdan kaydedilmiş (Dosya > Sayfayı farklı kaydet) yorumlu bir ya da iki sayfa veya ekran görüntüleri. CSV ya da Excel.

Size soracaklarımız:

• Hangi mağaza ve ürünler?
• Ürün alanları
• Yaklaşık kaç yorum?
• Yalnızca bazı yorumlar mı?

Paketleri karşılaştırın

Sorular ve yanıtlar

Yanıtınızı bulamadınız mı? Bize sorun