Un parser de Python que comprueba si hay stock de productos en una web abierta y guarda cada estado con la fecha

Ejemplo de resultado

def product_links(list_url: str) -> Iterator[str]:
    """Enlaces a las páginas de producto de todas las páginas de la lista, siguiendo 'Siguiente'."""
    url: str | None = list_url
    while url:
        page = fetch(url)
        for card in page.select("div.product-card a.title"):
            yield urljoin(url, card["href"])
        next_link = page.select_one("a.pagination-next")
        url = urljoin(url, next_link["href"]) if next_link else None


def fetch(url: str) -> BeautifulSoup:
    """Una página abierta, a un ritmo prudente: una pausa entre peticiones y algunos reintentos si hay errores."""
    for attempt in range(3):
        time.sleep(settings.delay_seconds)
        response = session.get(url, timeout=30)
        if response.status_code == 200:
            return BeautifulSoup(response.text, "html.parser")
        log.warning("%s respondió %s, intento %d de 3", url, response.status_code, attempt + 1)
    raise ScraperError(f"{url} no se abrió tras 3 intentos")

Acerca de este servicio

Cada vez que lo ejecuta, este parser comprueba qué productos están disponibles en una web abierta, como la de su proveedor o una tienda cuyos artículos revende, y guarda una tabla: nombre, código, estado tal como lo escribe la página, cantidad restante cuando se muestra, plazo de entrega, precio, enlace, y la fecha y hora de la comprobación. Guarde el archivo de cada ejecución y verá qué ha vuelto y qué se ha agotado. Envíenos la web, enlaces a una categoría y a una página de producto, los estados que usa la web y una o dos páginas guardadas desde su navegador. Recibe código Python, un archivo de configuración y un README y lo ejecuta en su ordenador. Lee solo páginas abiertas a un ritmo prudente y nunca inicia sesión, ni se salta captchas o protecciones, ni recoge datos personales. Usted decide si las condiciones de la web lo permiten; un cambio posterior de su estructura requiere una actualización.

Qué incluye

• Qué recibeUn archivo ZIP con el código Python, un archivo de configuración y un README con instrucciones paso a paso; el código también se muestra en la página del pedido.
• El estado como columnaLas palabras de la web, o sus propias etiquetas como sí / no / por encargo
• Cantidad cuando se muestraCuando la página indica cuántas quedan
• Filas con fechaFecha y hora de la comprobación en cada fila
• Ritmo prudenteUna pausa entre páginas, fijada en la configuración
• Se ejecuta en su ordenadorWindows, macOS o Linux, con Python

Cómo funciona

1. 1
   PáginasUsted da la web, los productos y los estados que usa
2. 2
   ParserEscribimos el código y la guía para ejecutarlo
3. 3
   Primera comprobaciónLo ejecuta y compara algunos estados con la web
4. 4
   CambiosPide cambios dentro de su paquete y nos envía cualquier mensaje de error

Qué necesitamos de usted

La web y las páginas exactas: un enlace a una categoría y a una página de producto, o su lista de enlaces de productos, y cuántos productos hay aproximadamente. Los estados de stock que muestra la web, escritos tal como aparecen. Los campos que necesita además del estado, p. ej., código, precio, plazo de entrega. Una o dos páginas guardadas desde su navegador (Archivo > Guardar página como) o capturas, a ser posible una con stock y otra agotada. Con qué frecuencia piensa ejecutarlo.

Le preguntaremos:

• ¿Qué web y qué productos?
• Los estados de stock
• Otros campos
• ¿Con qué frecuencia lo comprobará?

Comparar paquetes

Preguntas y respuestas

¿No encontró su respuesta? Pregúntenos