Parser de preçosProntos para uso

Um parser Python pronto de preços de produtos de uma loja virtual aberta: nome, preço, preço antigo, estoque e link

Normalmente fica pronto em 15 minutosAjustes incluídosControle de qualidade
Pacotes
Pagamento protegidoDetalhes
  • Os ajustes previstos no pacote são gratuitos.
  • Se você não responder em 3 dias após a entrega, o trabalho é aprovado automaticamente.

O dinheiro fica reservado no pagamento e só é liberado quando você aprova o trabalho.

Um parser Python pronto de preços de produtos de uma loja virtual aberta: nome, preço, preço antigo, estoque e link

Exemplo de resultado

Exemplo do pacote Padrão

Parser do catálogo de um fornecedor de ferramentas de jardinagem para o Excel

Como fica o resultado

ArtigoNomePreçoEm estoquePesoFoto
GT-1042Tesoura de poda, 20 mm18,90Sim0,24 kg…/gt-1042.jpg
GT-1187Serrote dobrável, 210 mm24,50Sim0,31 kg…/gt-1187.jpg
GT-2210Tesoura para cerca viva, lâmina ondulada39,00Não1,10 kg…/gt-2210.jpg
GT-3305Pá de jardinagem, inox9,80Sim0,18 kg…/gt-3305.jpg
GT-4120Mangueira de jardim 25 m, 1/2"42,00Sim2,90 kg…/gt-4120.jpg

O arquivo do exemplo tem 1.236 produtos de 52 páginas de lista.

Um trecho do código

def product_links(list_url: str) -> Iterator[str]:
    """Links das páginas de produto de todas as páginas da lista, seguindo o botão 'Próxima'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Uma página aberta, em um ritmo educado: uma pausa entre as requisições e algumas tentativas em caso de erro."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s respondeu %s, tentativa %d de 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} não abriu depois de 3 tentativas")

Arquivos: um arquivo ZIP com scraper.py, settings.ini (a página inicial, a pausa entre as requisições, o nome do arquivo), requirements.txt e um README sobre como instalar e rodar. Ele lê só páginas abertas, uma a cada 2 segundos, e confere antes o robots.txt do site. O cliente roda o parser no próprio computador.

Cliente: uma loja online de jardinagem que revende as ferramentas de um fornecedor; o fornecedor tem um catálogo aberto no site, mas nenhum arquivo de tabela de preços. Tarefa: percorrer as páginas de lista do catálogo, abrir cada página de produto e salvar no Excel o código do artigo, o nome, o preço, o estoque, o peso e o link da foto principal, para comparar os preços uma vez por semana.

O cliente e todos os dados são fictícios.

Sobre este serviço

Um parser de preços pronto: um parser Python típico já resolvido para catálogos de lojas e ajustado às páginas da loja virtual aberta que você indicar. Ele coleta o que qualquer visitante vê: nome do produto, preço, preço antigo, em estoque ou não, código do produto, categoria e link, e salva em uma tabela com a data da execução, para você acompanhar os preços ao longo do tempo ou compará-los com o seu próprio sortimento. Você envia links de uma categoria e de uma página de produto, cópias salvas delas e os campos de que precisa. Você executa o parser no seu próprio computador, então os dados vão direto para você. Ele lê apenas páginas abertas em um ritmo educado e nunca entra em contas nem contorna captchas ou proteções, e ignora avaliações e qualquer outra coisa com nomes ou contatos de pessoas. Preços exibidos só depois do login ou só em um app estão fora do alcance dele. Se você pode coletar os dados conforme os termos da loja é decisão sua.

O que está incluído

  • O que você recebeUm arquivo ZIP com o parser de preços pronto em Python, um arquivo de configurações com os endereços e a pausa entre páginas, e um README; o código também aparece na página do pedido.
  • Campos de preço prontosNome, preço, preço antigo, estoque, código, link
  • Linhas com dataCada execução marcada, para acompanhar os preços ao longo do tempo
  • Categorias inteirasPor todas as páginas de uma lista, a partir do Padrão
  • Ritmo educadoUma pausa entre páginas, definida nas configurações
  • Um guia simplesInstalar o Python e executá-lo, passo a passo

Como funciona

  1. 1
    PáginasVocê informa a loja, os campos e uma ou duas páginas salvas
  2. 2
    ConfiguraçãoAjustamos o parser pronto a essas páginas e escrevemos o guia
  3. 3
    ExecuçãoVocê o executa e confere as primeiras linhas da tabela
  4. 4
    AjustesVocê pede ajustes dentro do seu pacote e envia qualquer mensagem de erro

O que precisamos de você

A loja virtual aberta e as páginas exatas: um link para uma categoria e para uma página de produto, e mais ou menos quantos produtos há. Os campos de que precisa, na ordem da sua tabela, por exemplo nome, preço, preço antigo, em estoque, código do produto e link. Uma ou duas dessas páginas salvas do seu navegador (Arquivo > Salvar página como) ou capturas de tela. O arquivo de resultados: CSV, Excel ou, no Premium, JSON. Para o Premium, as outras lojas e com que frequência executar.

Vamos perguntar:

  • Qual loja e quais páginas?
  • Os campos de que você precisa
  • Mais ou menos quantos produtos?
  • Arquivo de resultados e frequência

Compare os pacotes

PacotesBásicoR$ 89PadrãoR$ 178PremiumR$ 323
O que está incluídoPreços de páginas de produtoUma categoria inteiraAté 3 lojas
Prazo1 dia2 dias3 dias
Ajustes123
Sites11até 3
Tipos de página12 (lista e item)até 3
Camposaté 10até 25até 25 em cada
Percorre as páginas de uma listaNãoSimSim
Arquivo de resultadosCSVExcel ou CSVExcel, CSV ou JSON
Duplicatas removidas, retoma de onde parouNãoNãoSim
Versão prontaPreços de produtosPreços de produtosPreços de produtos
Fazer pedido BásicoFazer pedido PadrãoFazer pedido Premium

Pagamento protegido

Você paga ao fazer o pedido, mas o dinheiro só é liberado pelo trabalho aprovado.

  • Preço fixoO preço do pacote não muda depois que você paga.
  • O dinheiro fica reservadoAo pagar, o valor fica apenas reservado. Ele só é repassado quando você aprova o trabalho.
  • Verificado antes da entregaCada resultado passa por um controle de qualidade antes de chegar até você, e você o vê na página do pedido antes de aprovar.
  • Ajustes gratuitosPeça ajustes dentro do seu briefing quantas vezes o pacote permitir.
  • Aprovação após 3 diasSe em 3 dias após a entrega você não aprovar o trabalho nem pedir ajustes, ele é aprovado automaticamente. Se você escrever no chat do pedido após a entrega, o pedido fica em espera; depois que respondermos, podemos reiniciar a contagem de 3 dias e avisaremos no chat.
  • Refazer ou reembolso totalSe o resultado não corresponder ao seu briefing e os ajustes não resolverem, ou se o trabalho levar mais que o dobro do prazo, escreva no chat do pedido: refazemos o trabalho ou reembolsamos o pagamento integralmente.
Como funciona →

Perguntas e respostas

Ele pode coletar preços de grandes marketplaces?

Em geral não: os termos deles proíbem, muitas páginas exigem login e usam proteções que o parser não contorna. Serve para sites de lojas abertos que mostram preços a todo visitante.

Vocês vão coletar os preços por mim?

Não. Você mesmo executa o parser, então os resultados vão direto para você e você pode executá-lo de novo sempre que precisar de preços atualizados.

E se o site mudar o layout?

O parser funciona pelas páginas como estão agora. Depois de um redesenho ele precisa de uma atualização, que é um novo pedido. Ele lê em um ritmo educado e não contorna limites que um site define.

Posso coletar esses dados?

Coletar dados públicos é permitido em muitos casos, mas os termos dos sites e as leis de dados diferem entre países, então é você quem decide se pode coletar e usar. O parser nunca entra em contas, contorna proteções nem coleta dados pessoais.

Por que custa menos do que um parser sob medida?

É um parser de preços pronto e típico: seus campos e o jeito como ele percorre as páginas já estão resolvidos, e nós o ajustamos ao site que você indicar e às suas colunas. Sites e campos incomuns são o serviço de parser sob medida.

Não encontrou a resposta?

Pacotes