Создам или настрою правильный Robots.txt и Sitemap.xml для вашего сайта в соответствии со всеми требованиями поисковых систем.

Robots.txt является важным служебным файлом, который содержит правила для индексации вашего сайта определенными (или всеми) ботами поисковых систем.

Файл Sitemap помогает поисковым системам более быстро и качественно индексировать интернет проект. Это особенно важно в том случае, если объем web-ресурса исчисляется тысячами или десятками тысяч страниц.

Внимание! Для создания sitemap сайт должен быть открыт для сканирования роботом и на нем не должна стоять заглушка которая открывает сайт после взаимодействия с ней (Вам есть 18 лет, Нужно авторизироваться и т. д. ). Также сайт не должен блокировать после многочисленных запросов.

Нужно для заказа:
Адрес сайта, страницы которые нужно запретить к индексации (если нужно). Обратите внимание что sitemap. xml за один кворк создается для не более 20000 страниц сайта. Каждые 1000 страниц это дополнительная опция.

Если вы заказали дополнительную опцию "Загрузить файлы на сайт", тогда нужно предоставить доступ по FTP к сайту (В некоторых случаях доступ в админку сайта).

Объем услуги: Robots. txt и Sitemap. xml (до 1000 страниц) для одного Вашего сайта