Jump to content

Robots.txt для IPS4

Redneck
Redneck
in Поисковая оптимизация

Featured Replies

comment_184057
1 час назад, Anche сказал:

macar А есть готовый уже? Чтобы просто закинуть и забыть)

Я просто не шарю какой нормальный тут, а какой нет.)

Еще надо?

  • Цитата
    • Link to comment
    https://ipbmafia.ru/topic/13473-robotstxt-dlya-ips4/?&do=findComment&comment=184057
    Share on other sites
    • Replies 77
    • Created
    • Последний ответ
    Expand topic overview

    Лучшие авторы в теме

    Популярные дни

    Лучшие авторы в теме

    Популярные дни

    Most Popular Posts

    anomal3
    anomal3

    смотрите логи /var/log/nginx или apache2 Робот не будет индексировать такие ссылки. А для SEO важно, чем больше проиндексировано страниц, тем выше ТИЦ

    Redneck
    Redneck

    надо указывать, просто не стал писать. в конце прописываем: Sitemap: http://сайт.ru/sitemap.php Host: сайт.ru Если сайт на https, то это обязательно надо указать и в карте и в хосте: Sitem

    ram108
    ram108

    Для Yandex не обязательно все тоже самое повторять, достаточно будет первой секции. У меня robots.txt попроще: User-agent: * Disallow: /admin/ Disallow: /profile/ Disallow: /discover/ Disallow: /s

    Posted Images

    Expand topic overview
    comment_184064
    33 минуты назад, aLEX49566 сказал:

    Еще надо?

    Да)

  • Цитата
    • Link to comment
    https://ipbmafia.ru/topic/13473-robotstxt-dlya-ips4/?&do=findComment&comment=184064
    Share on other sites
    comment_184065
    2 минуты назад, Anche сказал:

    Да)

    Скинул в личку

  • Цитата
    • Link to comment
    https://ipbmafia.ru/topic/13473-robotstxt-dlya-ips4/?&do=findComment&comment=184065
    Share on other sites

    Join the conversation

    You can post now and register later. If you have an account, sign in now to post with your account.
    Note: Your post will require moderator approval before it will be visible.

    Guest
    Ответить в этой теме...
    Go to topic listing

    Последние посетители 0

    • No registered users viewing this page.