Перейти к содержанию

Настройки robots.txt


Рекомендуемые сообщения

Установил 4.6.9 с нуля, не апгрейдил предыдущую версию. В настройках Search Engine Optimization установил рекомендуемые настройки. Файл robots.txt автоматически не создался. Его нужно создать руками или система его эмулирует из базы данных как-то? Не совсем понятно, будет ли работать robots.txt, если его добавить руками. 

И второй момент, достаточно ли для полной блокировки ботов Яндекса следующей директивы:

User-agent: Yandex
Disallow: /

 Я заметил, что сайт посещает бот rotor-vla2-287.vla.yp-c.yandex.net. Нужно ли его блокировать отдельной строкой в robots.txt?

1218340535_SearchEngineOptimization-GoogleChrome.thumb.jpg.316ac4922978b9aff523f1cc2e651160.jpg

Изменено пользователем Zero108
Ссылка на комментарий
Поделиться на другие сайты

7 минут назад, Zero108 сказал:

блокировки ботов

А зачем ботов блокировать, если не секрет?

Изменено пользователем Donjuan
Ссылка на комментарий
Поделиться на другие сайты

1 час назад, Donjuan сказал:

А зачем ботов блокировать, если не секрет?

Чтобы были заблокированными.

Ссылка на комментарий
Поделиться на другие сайты

2 hours ago, Zero108 said:

The robots.txt file was not automatically generated.

I have the same problem. I set the recommended settings but after one month my rank dropped from 700hk to 1,200,000.

what is reason?

Ссылка на комментарий
Поделиться на другие сайты

3 часа назад, Zero108 сказал:

И второй момент, достаточно ли для полной блокировки ботов Яндекса следующей директивы:

достаточно

только зачем это всё?)

Ссылка на комментарий
Поделиться на другие сайты

10 минут назад, the.bunin сказал:

достаточно

только зачем это всё?)

Чтобы было.

Ссылка на комментарий
Поделиться на другие сайты

2 часа назад, the.bunin сказал:

достаточно

только зачем это всё?)

Может у человека контент рассчитан на англ. язычную аудиторию зачем ему робот Яндекса? 

Ссылка на комментарий
Поделиться на другие сайты

6 часов назад, Zero108 сказал:

Его нужно создать руками или система его эмулирует из базы данных как-то?

создаешь руками в  админке есть ссылка, на образец,

Ссылка на комментарий
Поделиться на другие сайты

7 часов назад, macar сказал:

создаешь руками в  админке есть ссылка, на образец,

Скопировал этот файл с другого проекта по Invision Community (как движок то теперь называется?) А для чего галочка Custom в настройках раздела? Она дозаписывает что-то в файл?

Изменено пользователем Zero108
Ссылка на комментарий
Поделиться на другие сайты

В 10.01.2022 в 06:54, Zero108 сказал:

А для чего галочка Custom

сам пишешь.

Ссылка на комментарий
Поделиться на другие сайты

Присоединяйтесь к обсуждению

Вы можете написать сейчас и зарегистрироваться позже. Если у вас есть аккаунт, авторизуйтесь, чтобы опубликовать от имени своего аккаунта.
Примечание: Ваш пост будет проверен модератором, прежде чем станет видимым.

Гость
Ответить в этой теме...

×   Вставлено с форматированием.   Вставить как обычный текст

  Разрешено использовать не более 75 эмодзи.

×   Ваша ссылка была автоматически встроена.   Отображать как обычную ссылку

×   Ваш предыдущий контент был восстановлен.   Очистить редактор

×   Вы не можете вставлять изображения напрямую. Загружайте или вставляйте изображения по ссылке.

  • Последние посетители   0 пользователей онлайн

    • Ни одного зарегистрированного пользователя не просматривает данную страницу
×
×
  • Создать...