Скрипт на Python, который пройдёт по вашему сайту и выпишет каждую битую ссылку вместе со страницей, где она стоит

Пример результата

python merge_sales.py --month 2026-10

2026-11-02 09:14:03 INFO  Папка: sales/2026-10, найдено файлов: 9
2026-11-02 09:14:03 INFO  shop-01.csv: 1284 строки
2026-11-02 09:14:04 INFO  shop-02.xlsx: 967 строк
2026-11-02 09:14:04 WARN  shop-07.csv: пропущены 3 строки без цены (строки 88, 412, 913)
2026-11-02 09:14:05 INFO  Готово: 10 412 строк -> report-2026-10.xlsx (листы «Продажи» и «Итоги»)

[columns]
date = Дата, Дата продажи, День
product = Товар, Наименование, Название
quantity = Кол-во, Количество, Шт
price = Цена, Цена за шт

def read_shop_file(path: Path, columns: dict[str, list[str]]) -> pd.DataFrame:
    """Читает файл одного магазина и даёт столбцам названия из отчёта."""
    table = pd.read_excel(path) if path.suffix == ".xlsx" else pd.read_csv(path, encoding="utf-8-sig")
    renamed = {}
    for name, variants in columns.items():
        found = next((c for c in table.columns if c.strip() in variants), None)
        if found is None:
            raise ReportError(f"{path.name}: нет столбца «{name}» (искали: {', '.join(variants)})")
        renamed[found] = name
    table = table.rename(columns=renamed)[list(columns)]
    table["shop"] = path.stem
    return table

Об услуге

Ссылки в никуда раздражают посетителей, и сайт кажется заброшенным: старые записи блога ведут на удалённые страницы, ссылки на товары после смены каталога, сайты партнёров, которые закрылись. Этот скрипт на Python начинает с главной страницы, идёт по внутренним ссылкам сайта страница за страницей и проверяет каждую ссылку, а начиная со «Стандарта» и каждую найденную картинку. Он сохраняет список битых ссылок с ошибкой, страницей, где каждая стоит, и текстом ссылки, чтобы было ясно, что и где чинить. Читает он только открытые страницы, в спокойном темпе, который задаёте вы, и никуда не входит под паролем. Ссылки, которые страницы добавляют через JavaScript после загрузки, могут не попасть в проверку. Скрипт для вашего собственного сайта. Запускаете его вы на своём компьютере, а ссылки исправляете сами.

Что входит

• Что вы получитеАрхив ZIP со скриптом на Python, README с пошаговой инструкцией и, начиная со «Стандарта», файл настроек со стартовой страницей, лимитами и темпом; код также виден на странице заказа.
• Где стоит каждая ссылкаСтраница, текст ссылки и ошибка
• Внутренние и внешниеСсылки на ваши страницы и на другие сайты
• Спокойный темпПауза между запросами, которую задаёте вы
• Только открытые страницыБез входа по паролю и обхода защиты
• Понятный кодС комментариями, лимиты легко поменять потом

Порядок работы

1. 1
   ЗадачаВы даёте адрес сайта и что проверять
2. 2
   КодМы пишем скрипт и инструкцию по запуску
3. 3
   ПроверкаВы запускаете его сначала с малым лимитом страниц, потом на весь сайт
4. 4
   ПравкиВы просите правки в рамках пакета и присылаете текст ошибки, если она есть

Что нужно от вас

Адрес вашего сайта, примерно сколько на нём страниц и какие разделы пропустить (результаты поиска, фильтры, корзину, админку). Проверять ли картинки и ссылки на другие сайты, а не только ваши страницы. С какой скоростью можно идти: страница в секунду это вежливый темп по умолчанию. Формат отчёта (CSV или Excel) и ваша система: Windows, macOS или Linux.

В брифе мы спросим:

• Какой адрес у вашего сайта?
• Что проверять?
• Что пропускать?
• Где он будет работать?

Сравнение пакетов

Вопросы и ответы

Не нашли ответ? Спросите