robots.txt и sitemap WordPressRobots и sitemap

Настройка robots.txt и карты сайта для WordPress

Обычно готово за 15 минутДоработки включеныКонтроль качества
Пакеты
Защита оплатыПодробнее
  • Доработки в рамках пакета бесплатны.
  • Если вы не ответите в течение 3 дней после сдачи, работа будет принята автоматически.

При оплате деньги резервируются и переходят сервису, только когда вы примете работу.

Настройка robots.txt и карты сайта для WordPress

Пример результата

Пример по пакету «Стандарт»

robots.txt и карта сайта: интернет-магазин одежды

Заказчик: интернет-магазин одежды с фильтрами и поиском по сайту. Задача: не пускать поисковых роботов на тысячи страниц фильтров и корзины и указать им карту сайта.

User-agent: *
Disallow: /cart
Disallow: /checkout
Disallow: /account
Disallow: /search
Disallow: /*?sort=
Disallow: /*?color=
Disallow: /*&size=
Allow: /collections/

Sitemap: https://example.com/sitemap.xml

План карты сайта:

ФайлЧто в нёмСтраниц
sitemap.xmlсписок файлов ниже
sitemap-collections.xmlкатегории64
sitemap-products-1.xmlтовары1–5 000
sitemap-products-2.xmlтовары5 001–8 300
sitemap-pages.xmlо нас, доставка, возврат, блог41

Зачем: страницы фильтров повторяют категории и тратят обход. Товары, которых нет в наличии больше 90 дней, уходят из карты сайта, но страница остаётся.

Клиент и все данные вымышлены.

Об услуге

WordPress сам отдаёт виртуальный robots.txt и карту сайта, а SEO-плагины вроде Yoast, Rank Math или All in One SEO подменяют их своими, поэтому у многих сайтов две карты, в индексе архивы меток и авторов, а правила для wp-admin скопированы со старого форума. Мы смотрим, что сайт отдаёт сейчас, и пишем пошаговую инструкцию для вашего плагина: какую карту оставить, какие типы записей и таксономии включить, чистый robots.txt и где менять каждую настройку.

Что входит

  • Что вы получитеИнструкция по настройке для вашего WordPress: что сейчас с robots.txt и картой сайта, готовый robots.txt, пошаговые настройки плагина и что отправить в Search Console.
  • Что сейчасПроверка текущих robots.txt и карт
  • Одна картаКакую оставить, какую отключить
  • Что в картеТипы записей, таксономии и архивы
  • Чистый robots.txtБез устаревших запретов wp-includes
  • Шаги в плагинеГде находится каждая настройка

Порядок работы

  1. 1
    ПроверкаСмотрим ваши текущие файлы
  2. 2
    ИнструкцияПишем шаги для вашего плагина
  3. 3
    ОтправкаВы применяете и отправляете карту

Что нужно от вас

Ссылка на сайт, SEO-плагин, который вы используете или планируете, ваши типы записей и таксономии, например товары, портфолио или мероприятия, и какие архивы нужны в поиске.

В брифе мы спросим:

  • Какой SEO-плагин стоит на сайте?
  • Какие у вас типы записей и таксономии?
  • Нужны ли в поиске архивы меток, авторов или дат?

Сравнение пакетов

ПакетыЭконом10 $Стандарт20 $Бизнес39 $
Что входитБлог или небольшой сайтСайт компанииWooCommerce или мультиязычный
Срок1 день2 дня3 дня
Доработки122
Типов записей и таксономийдо 4до 8до 15
Шаги настройки плагинаДаДаДа
Готовый robots.txtДаДаДа
Заказать ЭкономЗаказать СтандартЗаказать Бизнес

Защита оплаты

Вы оплачиваете заказ сразу, но деньги переходят сервису только за принятую работу.

  • Фиксированная ценаЦена пакета не меняется после оплаты.
  • Деньги резервируютсяПри оплате сумма только резервируется. Сервису она переходит, когда вы примете работу.
  • Проверка перед сдачейКаждый результат проходит проверку качества, прежде чем попасть к вам, и вы видите его на странице заказа до приёмки.
  • Бесплатные доработкиПросите изменения в рамках брифа столько раз, сколько предусмотрено пакетом.
  • Приёмка через 3 дняЕсли в течение 3 дней после сдачи вы не примете работу и не попросите изменений, она будет принята автоматически. Если после сдачи вы напишете в чат заказа, заказ подождёт; ответив, мы можем начать отсчёт 3 дней заново и сообщим об этом в чате.
  • Переделка или полный возвратЕсли результат не соответствует брифу и доработки не помогли или срок превышен больше чем вдвое, напишите в чат заказа: мы переделаем работу или полностью вернём деньги.
Как это работает →

Вопросы и ответы

У сайта две карты. Это плохо?

Это путает и часто дублирует страницы. Инструкция скажет, какую оставить, обычно плагина, и как отключить вторую.

Закрыть wp-content в robots.txt?

Нет. Поисковикам нужны файлы темы и картинки, чтобы отрисовать страницы. Готовый файл оставляет их открытыми.

Вы поменяете настройки плагина?

Нет, в ваш WordPress мы не заходим. Вы проходите шаги инструкции, это около получаса.

Не нашли ответ?

Пакеты