Jump to content

Robots.txt для IPS4

Redneck
Redneck
in Поисковая оптимизация

Featured Replies

comment_184057
1 час назад, Anche сказал:

macar А есть готовый уже? Чтобы просто закинуть и забыть)

Я просто не шарю какой нормальный тут, а какой нет.)

Еще надо?

  • Цитата
    • Replies 77
    • Просмотров 29,7k
    • Created
    • Последний ответ

    Лучшие авторы в теме

    Популярные дни

    Most Popular Posts

    • anomal3
      anomal3

      смотрите логи /var/log/nginx или apache2 Робот не будет индексировать такие ссылки. А для SEO важно, чем больше проиндексировано страниц, тем выше ТИЦ

    • Redneck
      Redneck

      надо указывать, просто не стал писать. в конце прописываем: Sitemap: http://сайт.ru/sitemap.php Host: сайт.ru Если сайт на https, то это обязательно надо указать и в карте и в хосте: Sitem

    • ram108
      ram108

      Для Yandex не обязательно все тоже самое повторять, достаточно будет первой секции. У меня robots.txt попроще: User-agent: * Disallow: /admin/ Disallow: /profile/ Disallow: /discover/ Disallow: /s

    Posted Images

    Join the conversation

    You can post now and register later. If you have an account, sign in now to post with your account.
    Note: Your post will require moderator approval before it will be visible.

    Guest
    Ответить в этой теме...
    Go to topic listing

    Последние посетители 0

    • No registered users viewing this page.