Jump to content

Как запретить robots.txt для просмотра, кроме поисковиков?

Featured Replies

Posted
comment_183331
SetEnvIfNoCase User-Agent .*google.* search_robot
SetEnvIfNoCase User-Agent .*yandex.* search_robot
SetEnvIfNoCase User-Agent .*bot.* search_robot

Order Deny,Allow
Deny from All
Allow from env=search_robot

Всем привет! 
нашел такую вот систему для хитачи (может кому надо).

Может кто подскажет, как для Nginx’а реализовать? 

 

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.


Guest
Ответить в этой теме...

Последние посетители 0

  • No registered users viewing this page.