Jump to content

Настройки robots.txt

Featured Replies

Posted

Установил 4.6.9 с нуля, не апгрейдил предыдущую версию. В настройках Search Engine Optimization установил рекомендуемые настройки. Файл robots.txt автоматически не создался. Его нужно создать руками или система его эмулирует из базы данных как-то? Не совсем понятно, будет ли работать robots.txt, если его добавить руками. 

И второй момент, достаточно ли для полной блокировки ботов Яндекса следующей директивы:

User-agent: Yandex
Disallow: /

 Я заметил, что сайт посещает бот rotor-vla2-287.vla.yp-c.yandex.net. Нужно ли его блокировать отдельной строкой в robots.txt?

1218340535_SearchEngineOptimization-GoogleChrome.thumb.jpg.316ac4922978b9aff523f1cc2e651160.jpg

Edited by Zero108

3 часа назад, Zero108 сказал:

И второй момент, достаточно ли для полной блокировки ботов Яндекса следующей директивы:

достаточно

только зачем это всё?)

2 часа назад, the.bunin сказал:

достаточно

только зачем это всё?)

Может у человека контент рассчитан на англ. язычную аудиторию зачем ему робот Яндекса? 

6 часов назад, Zero108 сказал:

Его нужно создать руками или система его эмулирует из базы данных как-то?

создаешь руками в  админке есть ссылка, на образец,

  • Author
7 часов назад, macar сказал:

создаешь руками в  админке есть ссылка, на образец,

Скопировал этот файл с другого проекта по Invision Community (как движок то теперь называется?) А для чего галочка Custom в настройках раздела? Она дозаписывает что-то в файл?

Edited by Zero108

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.

Guest
Ответить в этой теме...

Последние посетители 0

  • No registered users viewing this page.