Как настроить robots.txt

SEO вопросы и ответыКак настроить robots.txt
0 +1 -1
Илья спросил 3 года назад

 Здравствуйте! Можете подсказать как правильно настроить файл robots.txt

Ответов (1)
0 +1 -1
Никита ответил 2 года назад

В robots.txt должно быть следующее:
 

  • Главное зеркало ресурса
  • Страницы с полезным материалом
  • Запрещенные страницы

 
В корне сайта создайте файл robots.txt и наполняйте его содержимым. Также можно использовать онлайн-генераторы, которые автоматически создадут файл robots.txt. В любом случае файл нужно будет редактировать. 

Ваш ответ

18 + 16 =