YazılımÖdeme korumasıAyrıntılar
- Paket kapsamındaki revizyonlar ücretsizdir.
- Teslimattan sonraki 3 gün içinde yanıt vermezseniz iş otomatik olarak onaylanır.
Para, ödeme yaptığınızda bloke edilir ve yalnızca işi onayladığınızda aktarılır.

Örnek sonuç
Parser of a garden tools supplier's catalog into Excel
What the result looks like
| Article | Name | Price | In stock | Weight | Photo |
|---|---|---|---|---|---|
| GT-1042 | Pruning shears, 20 mm | 18.90 | Yes | 0.24 kg | …/gt-1042.jpg |
| GT-1187 | Folding saw, 210 mm | 24.50 | Yes | 0.31 kg | …/gt-1187.jpg |
| GT-2210 | Hedge shears, wavy blade | 39.00 | No | 1.10 kg | …/gt-2210.jpg |
| GT-3305 | Hand trowel, stainless | 9.80 | Yes | 0.18 kg | …/gt-3305.jpg |
| GT-4120 | Garden hose 25 m, 1/2" | 42.00 | Yes | 2.90 kg | …/gt-4120.jpg |
The file in the example has 1,236 products from 52 list pages.
A part of the code
def product_links(list_url: str) -> Iterator[str]:
"""Product page links from every page of the list, following 'Next'."""
url: str | None = list_url
while url:
page = fetch(url)
for card in page.select("div.product-card a.title"):
yield urljoin(url, card["href"])
next_link = page.select_one("a.pagination-next")
url = urljoin(url, next_link["href"]) if next_link else None
def fetch(url: str) -> BeautifulSoup:
"""One open page, at a polite pace: a pause between requests and a few tries on errors."""
for attempt in range(3):
time.sleep(settings.delay_seconds)
response = session.get(url, timeout=30)
if response.status_code == 200:
return BeautifulSoup(response.text, "html.parser")
log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
raise ScraperError(f"{url} did not open after 3 tries")
Files: a ZIP archive with scraper.py, settings.ini (the start page, the pause between requests, the file name), requirements.txt and a README on installing and running it. It reads only open pages, one every 2 seconds, and checks the site's robots.txt first. The client runs it on their own computer.
Client: an online garden shop that resells a supplier's tools; the supplier has an open catalog on its website but no price list file. Task: go through the catalog's list pages, open every product page and save the article number, name, price, stock, weight and main photo link to Excel, to compare prices once a week.
Müşteri ve tüm ayrıntılar kurgusaldır.
Bu hizmet hakkında
Hazır bir haber başlıkları ayrıştırıcısı: haber sayfalarına önceden çözülmüş tipik bir Python ayrıştırıcısı, adını verdiğiniz açık haber sitesine veya bölümüne uyarlanır. Başlığı, tarih ve saati, bölümü, etiketleri, sitenin gösterdiği kısa girişi ve bağlantıyı kaydeder: sektörünüzü takip etmeye, bir konunun ne sıklıkla geçtiğini görmeye ya da bir bülten için okuma listesi tutmaya yeter. Yayıncılarına ait olan makalelerin tamamını kopyalamaz; tablo onlara bağlantıyla işaret eder. Sitenin bir RSS akışı varsa ayrıştırıcı onu okuyabilir, bu site için daha naziktir. Bir bölüm sayfasına ve bir makaleye bağlantıları, bunların kaydedilmiş kopyalarını ve ihtiyacınız olan alanları gönderirsiniz. Onu kendi bilgisayarınızda kendiniz çalıştırırsınız. Yalnızca açık sayfaları nazik bir hızda okur, ücretli üyelik duvarının veya girişin arkasındaki her şeyi atlar ve yorumları ya da okurların adlarını içeren hiçbir şeyi kaydetmez.
Neler dahil
- Neler alırsınızPython'da hazır haber başlıkları ayrıştırıcısının ZIP arşivi, adreslerin ve sayfalar arası bekleme süresinin bulunduğu bir ayar dosyası ve bir README; kod ayrıca sipariş sayfasında gösterilir.
- Başlık alanları hazırBaşlık, tarih, bölüm, etiketler, giriş, bağlantı
- Bağlantılar, tam metinler değilMakaleler yayıncılarında kalır
- Birkaç site birlikteTek tabloda en fazla 3, Premium'da
- Nazik hızSayfalar arasında ayarlarda belirlenen bir bekleme
- Sade bir kılavuzPython'u kurma ve çalıştırma, adım adım
Nasıl çalışır
- 1SayfalarSiteyi, bölümü, alanları ve kaydedilmiş sayfaları verirsiniz
- 2KurulumHazır ayrıştırıcıyı o sayfalara uyarlar ve kılavuzu yazarız
- 3ÇalıştırmaÇalıştırır ve tablonun ilk satırlarını kontrol edersiniz
- 4DeğişikliklerPaketiniz kapsamında değişiklik istersiniz ve varsa hata mesajını gönderirsiniz
Sizden neler gerekiyor
Açık haber sitesi ve tam sayfalar: bir bölüm veya etiket sayfasına ve bir makaleye bağlantı. İhtiyacınız olan alanlar tablonuzun sırasıyla, örneğin başlık, tarih, bölüm, giriş ve bağlantı. Bu sayfalardan bir ikisi tarayıcınızdan kaydedilmiş (Dosya > Farklı kaydet) ya da ekran görüntüleri ve sitede varsa RSS bağlantısı. Sonuç dosyası: CSV, Excel veya Premium'da JSON. Premium için diğer siteler ve ne sıklıkla çalışacağı.
Size soracaklarımız:
- Hangi site ve bölüm?
- İhtiyacınız olan alanlar
- Tutulacak anahtar kelimeler
- Sonuç dosyası ve ne sıklıkla
Paketleri karşılaştırın
| Paketler | Temel$16 | Standart$31 | Premium$56 |
|---|---|---|---|
| Neler dahil | Tek sayfadan başlıklar | Bölüm ve makaleler | En fazla 3 haber sitesi |
| Teslim süresi | 1 gün | 2 gün | 3 gün |
| Revizyonlar | 1 | 2 | 3 |
| Siteler | 1 | 1 | en fazla 3 |
| Sayfa türleri | 1 | 2 (liste ve ürün) | en fazla 3 |
| Alanlar | en fazla 10 | en fazla 25 | her birinde en fazla 25 |
| Bir listenin sayfalarından geçer | Hayır | Evet | Evet |
| Sonuç dosyası | CSV | Excel veya CSV | Excel, CSV veya JSON |
| Yinelenenler kaldırılır, kaldığı yerden devam eder | Hayır | Hayır | Evet |
| Hazır sürüm | Haber başlıkları | Haber başlıkları | Haber başlıkları |
| Sipariş ver Temel | Sipariş ver Standart | Sipariş ver Premium |
Ödeme koruması
Sipariş verirken ödersiniz, ancak para yalnızca onaylanan iş için aktarılır.
- Sabit fiyatPaket fiyatı, ödeme yaptıktan sonra değişmez.
- Para bloke edilirÖdeme yaptığınızda tutar yalnızca bloke edilir. İşi onayladığınızda hizmete aktarılır.
- Teslimattan önce kontrolHer sonuç size ulaşmadan önce kalite kontrolünden geçer ve onaylamadan önce sipariş sayfasında görürsünüz.
- Ücretsiz revizyonlarBrifiniz kapsamında, paketin izin verdiği sayıda değişiklik isteyin.
- 3 gün sonra onayTeslimattan sonraki 3 gün içinde işi onaylamaz veya değişiklik istemezseniz iş otomatik olarak onaylanır. Teslimattan sonra sipariş sohbetine yazarsanız sipariş bekletilir; yanıt verdikten sonra 3 günlük süreyi yeniden başlatabiliriz ve bunu sohbette bildiririz.
- Yeniden yapım veya tam iadeSonuç brifinize uymuyorsa ve revizyonlar sorunu çözmediyse ya da iş teslim süresinin iki katından uzun sürerse sipariş sohbetine yazın: işi yeniden yaparız veya ödemenin tamamını iade ederiz.
Sorular ve yanıtlar
Makalelerin tam metnini kaydedebilir mi?
Hayır. Makaleler yayıncıların eseridir. Ayrıştırıcı başlığı, sitenin gösterdiği kısa girişi ve bağlantıyı kaydeder; makaleyi sitede okursunuz.
Başlıkları sitemde yeniden yayımlayabilir miyim?
Bu, yayıncının koşullarına ve ülkenizin yasalarına bağlıdır ve karar sizindir. Ayrıştırıcı kendi takibiniz ve okuma listeleriniz için hazırlanmıştır.
Site düzenini değiştirirse ne olur?
Ayrıştırıcı sayfalara şu anki hallerine göre çalışır. Yeniden tasarımdan sonra bir güncelleme gerekir; bu yeni bir siparişle yapılır. Nazik bir hızda okur ve bir sitenin koyduğu sınırları aşmaz.
Bu verileri toplamama izin var mı?
Herkese açık verileri toplamak birçok durumda serbesttir ancak sitelerin koşulları ve veri yasaları ülkeden ülkeye farklıdır; bu yüzden toplayıp kullanıp kullanamayacağınıza siz karar verirsiniz. Ayrıştırıcı asla giriş yapmaz, korumaları aşmaz ya da kişisel veri toplamaz.
Neden özel bir ayrıştırıcıdan daha ucuz?
Hazır ve tipik bir haber başlıkları ayrıştırıcısıdır: alanları ve sayfalar arasında gezinme biçimi önceden çözülmüştür ve biz onu adını verdiğiniz siteye ve sütunlarınıza uyarlarız. Alışılmadık siteler ve alanlar özel ayrıştırıcı hizmetidir.
Yanıtınızı bulamadınız mı?


