Настройка robots.txt.
Гарантия возврата денег, если товар не подойдёт
Описание
Создание или настройка robots. txt для вашего сайта.
Файл robots. txt содержит рекомендации для поисковых систем Яндекс и Google о том, какие страницы не нужно посещать и индексировать.
В большинстве случаев, поисковики не будут посещать и индексировать запрещенные в robots. txt страницы, это поможет избежать появление дублей страниц в индексе, что может положительно сказаться на позициях сайта в поисковой выдаче.
В кейс входит базовая настройка robots. txt и настройка по вашему заданию.
Базовая настройка robots. txt:
- Проверю существующий robots. txt на базовые проблемы (например, полный запрет индексации сайта).
- Пропишу ссылку на sitemap (при его наличии).
Для настройки robots. txt под ваш сайт, вам нужно:
- Сообщить мне, какие страницы или разделы на сайте нужно закрыть от индексации.
- Если есть подозрения, что какие-то страницы не индексируются, то напишите их, я проверю robots. txt на запрет их индексации и при необходимости уберу запрет.
Если вы не знаете какие страницы нужно запретить или разрешить для индексации, то можете заказать дополнительную услугу «Анализ сайта». Я проанализирую сайт, определю какие страницы нужно запретить индексировать, а какие нужно разрешить.
- адрес сайта
- список страниц или разделов сайта, которые нужно закрыть от индексации
- при подозрении на запрет индексации, список страниц или разделов, которые нужно проверить
- доступ к хостингу.