YazılımÖdeme korumasıAyrıntılar
- Paket kapsamındaki revizyonlar ücretsizdir.
- Teslimattan sonraki 3 gün içinde yanıt vermezseniz iş otomatik olarak onaylanır.
Para, ödeme yaptığınızda bloke edilir ve yalnızca işi onayladığınızda aktarılır.

Örnek sonuç
Parser of a garden tools supplier's catalog into Excel
What the result looks like
| Article | Name | Price | In stock | Weight | Photo |
|---|---|---|---|---|---|
| GT-1042 | Pruning shears, 20 mm | 18.90 | Yes | 0.24 kg | …/gt-1042.jpg |
| GT-1187 | Folding saw, 210 mm | 24.50 | Yes | 0.31 kg | …/gt-1187.jpg |
| GT-2210 | Hedge shears, wavy blade | 39.00 | No | 1.10 kg | …/gt-2210.jpg |
| GT-3305 | Hand trowel, stainless | 9.80 | Yes | 0.18 kg | …/gt-3305.jpg |
| GT-4120 | Garden hose 25 m, 1/2" | 42.00 | Yes | 2.90 kg | …/gt-4120.jpg |
The file in the example has 1,236 products from 52 list pages.
A part of the code
def product_links(list_url: str) -> Iterator[str]:
"""Product page links from every page of the list, following 'Next'."""
url: str | None = list_url
while url:
page = fetch(url)
for card in page.select("div.product-card a.title"):
yield urljoin(url, card["href"])
next_link = page.select_one("a.pagination-next")
url = urljoin(url, next_link["href"]) if next_link else None
def fetch(url: str) -> BeautifulSoup:
"""One open page, at a polite pace: a pause between requests and a few tries on errors."""
for attempt in range(3):
time.sleep(settings.delay_seconds)
response = session.get(url, timeout=30)
if response.status_code == 200:
return BeautifulSoup(response.text, "html.parser")
log.warning("%s answered %s, try %d of 3", url, response.status_code, attempt + 1)
raise ScraperError(f"{url} did not open after 3 tries")
Files: a ZIP archive with scraper.py, settings.ini (the start page, the pause between requests, the file name), requirements.txt and a README on installing and running it. It reads only open pages, one every 2 seconds, and checks the site's robots.txt first. The client runs it on their own computer.
Client: an online garden shop that resells a supplier's tools; the supplier has an open catalog on its website but no price list file. Task: go through the catalog's list pages, open every product page and save the article number, name, price, stock, weight and main photo link to Excel, to compare prices once a week.
Müşteri ve tüm ayrıntılar kurgusaldır.
Bu hizmet hakkında
Hazır bir fiyat ayrıştırıcı: mağaza katalogları için önceden çözülmüş tipik bir Python ayrıştırıcısı, adını verdiğiniz açık online mağazanın sayfalarına uyarlanır. Herhangi bir ziyaretçinin gördüğünü toplar: ürün adı, fiyat, eski fiyat, stokta olup olmadığı, ürün kodu, kategori ve bağlantı; bunları çalıştırma tarihiyle bir tabloya kaydeder, böylece fiyatları zaman içinde izleyebilir veya kendi ürün yelpazenizle karşılaştırabilirsiniz. Bir kategoriye ve bir ürün sayfasına bağlantıları, bunların kaydedilmiş kopyalarını ve ihtiyacınız olan alanları gönderirsiniz. Ayrıştırıcıyı kendi bilgisayarınızda çalıştırırsınız, bu yüzden veriler doğrudan size gider. Yalnızca açık sayfaları nazik bir hızda okur ve asla giriş yapmaz ya da captcha veya korumaları aşmaz; değerlendirmeleri ve insanların adlarını veya iletişim bilgilerini içeren her şeyi atlar. Yalnızca giriş yaptıktan sonra ya da yalnızca bir uygulamada gösterilen fiyatlar erişiminin dışındadır. Verileri mağazanın koşulları uyarınca toplayıp toplayamayacağınız sizin kararınızdır.
Neler dahil
- Neler alırsınızPython'da hazır fiyat ayrıştırıcının ZIP arşivi, adreslerin ve sayfalar arası bekleme süresinin bulunduğu bir ayar dosyası ve bir README; kod ayrıca sipariş sayfasında gösterilir.
- Fiyat alanları hazırAd, fiyat, eski fiyat, stok, kod, bağlantı
- Tarihli satırlarHer çalıştırma işaretlenir, fiyatları zaman içinde izlemek için
- Bütün kategorilerBir listenin her sayfasından geçer, Standart paketten itibaren
- Nazik hızSayfalar arasında ayarlarda belirlenen bir bekleme
- Sade bir kılavuzPython'u kurma ve çalıştırma, adım adım
Nasıl çalışır
- 1SayfalarMağazayı, alanları ve bir iki kaydedilmiş sayfayı verirsiniz
- 2KurulumHazır ayrıştırıcıyı o sayfalara uyarlar ve kılavuzu yazarız
- 3ÇalıştırmaÇalıştırır ve tablonun ilk satırlarını kontrol edersiniz
- 4DeğişikliklerPaketiniz kapsamında değişiklik istersiniz ve varsa hata mesajını gönderirsiniz
Sizden neler gerekiyor
Açık online mağaza ve tam sayfalar: bir kategoriye ve bir ürün sayfasına bağlantı ve kabaca kaç ürün olduğu. İhtiyacınız olan alanlar, tablonuzun sırasıyla, örneğin ad, fiyat, eski fiyat, stokta, ürün kodu ve bağlantı. Bu sayfalardan bir ikisi tarayıcınızdan kaydedilmiş (Dosya > Farklı kaydet) ya da ekran görüntüleri. Sonuç dosyası: CSV, Excel veya Premium'da JSON. Premium için diğer mağazalar ve ne sıklıkla çalışacağı.
Size soracaklarımız:
- Hangi mağaza ve hangi sayfalar?
- İhtiyacınız olan alanlar
- Kabaca kaç ürün?
- Sonuç dosyası ve ne sıklıkla
Paketleri karşılaştırın
| Paketler | Temel$16 | Standart$32 | Premium$58 |
|---|---|---|---|
| Neler dahil | Ürün sayfalarından fiyatlar | Bütün bir kategori | En fazla 3 mağaza |
| Teslim süresi | 1 gün | 2 gün | 3 gün |
| Revizyonlar | 1 | 2 | 3 |
| Siteler | 1 | 1 | en fazla 3 |
| Sayfa türleri | 1 | 2 (liste ve ürün) | en fazla 3 |
| Alanlar | en fazla 10 | en fazla 25 | her birinde en fazla 25 |
| Bir listenin sayfalarından geçer | Hayır | Evet | Evet |
| Sonuç dosyası | CSV | Excel veya CSV | Excel, CSV veya JSON |
| Yinelenenler kaldırılır, kaldığı yerden devam eder | Hayır | Hayır | Evet |
| Hazır sürüm | Ürün fiyatları | Ürün fiyatları | Ürün fiyatları |
| Sipariş ver Temel | Sipariş ver Standart | Sipariş ver Premium |
Ödeme koruması
Sipariş verirken ödersiniz, ancak para yalnızca onaylanan iş için aktarılır.
- Sabit fiyatPaket fiyatı, ödeme yaptıktan sonra değişmez.
- Para bloke edilirÖdeme yaptığınızda tutar yalnızca bloke edilir. İşi onayladığınızda hizmete aktarılır.
- Teslimattan önce kontrolHer sonuç size ulaşmadan önce kalite kontrolünden geçer ve onaylamadan önce sipariş sayfasında görürsünüz.
- Ücretsiz revizyonlarBrifiniz kapsamında, paketin izin verdiği sayıda değişiklik isteyin.
- 3 gün sonra onayTeslimattan sonraki 3 gün içinde işi onaylamaz veya değişiklik istemezseniz iş otomatik olarak onaylanır. Teslimattan sonra sipariş sohbetine yazarsanız sipariş bekletilir; yanıt verdikten sonra 3 günlük süreyi yeniden başlatabiliriz ve bunu sohbette bildiririz.
- Yeniden yapım veya tam iadeSonuç brifinize uymuyorsa ve revizyonlar sorunu çözmediyse ya da iş teslim süresinin iki katından uzun sürerse sipariş sohbetine yazın: işi yeniden yaparız veya ödemenin tamamını iade ederiz.
Sorular ve yanıtlar
Büyük pazar yerlerinden fiyat toplayabilir mi?
Genellikle hayır: koşulları bunu yasaklar, birçok sayfa giriş gerektirir ve ayrıştırıcının aşmadığı korumalar kullanırlar. Fiyatları her ziyaretçiye gösteren açık mağaza sitelerine uygundur.
Fiyatları sizin yerinize siz mi toplayacaksınız?
Hayır. Ayrıştırıcıyı kendiniz çalıştırırsınız, böylece sonuçlar doğrudan size gider ve güncel fiyatlara ihtiyaç duyduğunuzda yeniden çalıştırabilirsiniz.
Site düzenini değiştirirse ne olur?
Ayrıştırıcı sayfalara şu anki hallerine göre çalışır. Yeniden tasarımdan sonra bir güncelleme gerekir; bu yeni bir siparişle yapılır. Nazik bir hızda okur ve bir sitenin koyduğu sınırları aşmaz.
Bu verileri toplamama izin var mı?
Herkese açık verileri toplamak birçok durumda serbesttir ancak sitelerin koşulları ve veri yasaları ülkeden ülkeye farklıdır; bu yüzden toplayıp kullanıp kullanamayacağınıza siz karar verirsiniz. Ayrıştırıcı asla giriş yapmaz, korumaları aşmaz ya da kişisel veri toplamaz.
Neden özel bir ayrıştırıcıdan daha ucuz?
Hazır ve tipik bir fiyat ayrıştırıcısıdır: alanları ve sayfalar arasında gezinme biçimi önceden çözülmüştür ve biz onu adını verdiğiniz siteye ve sütunlarınıza uyarlarız. Alışılmadık siteler ve alanlar özel ayrıştırıcı hizmetidir.
Yanıtınızı bulamadınız mı?


