AnWey Опубликовано 6 марта Поделиться Опубликовано 6 марта Заходит кадлый день боты с Амазон, как их отключить то? через robots.txt User-agent: а какой и что дальше писать ? Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Desti Опубликовано 6 марта Поделиться Опубликовано 6 марта Если они с "амазона" по IP без какого-либо специального UA, то никак вы их не заблокируете через robots. AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
AnWey Опубликовано 7 марта Автор Поделиться Опубликовано 7 марта 39 минут назад, Desti сказал: Если они с "амазона" по IP без какого-либо специального UA, то никак вы их не заблокируете через robots. Да как то так это выглядит ... Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
aLEX49566 Опубликовано 7 марта Поделиться Опубликовано 7 марта CleanTalk AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
AnWey Опубликовано 7 марта Автор Поделиться Опубликовано 7 марта 1 час назад, aLEX49566 сказал: CleanTalk ??? Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
aLEX49566 Опубликовано 7 марта Поделиться Опубликовано 7 марта 1 минуту назад, AnWey сказал: ??? В Яндексе набери это слово Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
AnWey Опубликовано 7 марта Автор Поделиться Опубликовано 7 марта 12 минут назад, aLEX49566 сказал: В Яндексе набери это слово Это платное или бесплатная шняга ? Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
aLEX49566 Опубликовано 7 марта Поделиться Опубликовано 7 марта 5 минут назад, AnWey сказал: Это платное или бесплатная шняга ? Бесплатный тестовый период 7 дней. Дальше платно Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Zero108 Опубликовано 7 марта Поделиться Опубликовано 7 марта (изменено) 1. Сеть Amazon: AS16509 2. Перевести это в список IP адресов можно так: https://ipinfo.io/AS16509 Получаем список из 100 зон вида: 100.20.0.0/14 102.210.190.0/24 102.210.191.0/24 103.10.127.0/24 103.104.86.0/24 ... 3. Добавляем для каждого диапазона свою строку в файле .htaccess: Order Deny,Allow Deny from 100.20.0.0/14 Deny from 102.210.191.0/24 Но проще, всё-таки, забанить ботов через CF. Изменено 7 марта пользователем Zero108 AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Desti Опубликовано 7 марта Поделиться Опубликовано 7 марта (изменено) 2 часа назад, Zero108 сказал: Получаем список из 100 зон вида: У этой АС всего-то 9,683 сети. А про "100" сетей внизу есть коммент: The list on this page is limited to 100 results. Изменено 7 марта пользователем Desti Zero108, AnWey и aLEX49566 2 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
HooLIGUN Опубликовано 7 марта Поделиться Опубликовано 7 марта 9 часов назад, AnWey сказал: Да как то так это выглядит ... В логах веб сервера посмотрите, как называется юзерагент и заблокируйте его через CF AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Zero108 Опубликовано 7 марта Поделиться Опубликовано 7 марта Вот тут побольше IP-зон Амазона: https://asnlookup.com/asn/AS16509/ AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
AnWey Опубликовано 7 марта Автор Поделиться Опубликовано 7 марта Спасибо за информацию! Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
aLEX49566 Опубликовано 7 марта Поделиться Опубликовано 7 марта (изменено) Пипец не ищите легких путей) 400 рублей в год и живи без хлопот ) Изменено 7 марта пользователем aLEX49566 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
AnWey Опубликовано 7 марта Автор Поделиться Опубликовано 7 марта 7 часов назад, Zero108 сказал: 1. Сеть Amazon: AS16509 2. Перевести это в список IP адресов можно так: https://ipinfo.io/AS16509 Получаем список из 100 зон вида: 100.20.0.0/14 102.210.190.0/24 102.210.191.0/24 103.10.127.0/24 103.104.86.0/24 ... 3. Добавляем для каждого диапазона свою строку в файле .htaccess: Order Deny,Allow Deny from 100.20.0.0/14 Deny from 102.210.191.0/24 Но проще, всё-таки, забанить ботов через CF. мне в СF нужно указать 16509 ? Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Zero108 Опубликовано 7 марта Поделиться Опубликовано 7 марта Если только этот AS, то только его. По ссылке выше можно посмотреть образец настройки CF на скриншотах. AnWey 1 Цитата Ссылка на комментарий Поделиться на другие сайты Поделиться
Рекомендуемые сообщения
Присоединяйтесь к обсуждению
Вы можете написать сейчас и зарегистрироваться позже. Если у вас есть аккаунт, авторизуйтесь, чтобы опубликовать от имени своего аккаунта.
Примечание: Ваш пост будет проверен модератором, прежде чем станет видимым.