Как забанить ботов Амазон

[AnWey]

Заходит кадлый день боты с Амазон, как их отключить то? 

через robots.txt

User-agent: а какой и что дальше писать ? 

[Desti]

Если они с "амазона" по IP без какого-либо специального UA, то никак вы их не заблокируете через robots. 

[AnWey]

39 минут назад, Desti сказал:

Если они с "амазона" по IP без какого-либо специального UA, то никак вы их не заблокируете через robots. 

Да как то так это выглядит ... 

[aLEX49566]

CleanTalk 

[AnWey]

1 час назад, aLEX49566 сказал:

CleanTalk 

???

[aLEX49566]

1 минуту назад, AnWey сказал:

???

В Яндексе набери это слово

[AnWey]

12 минут назад, aLEX49566 сказал:

В Яндексе набери это слово

Это платное или бесплатная шняга ? 

[aLEX49566]

5 минут назад, AnWey сказал:

Это платное или бесплатная шняга ? 

Бесплатный тестовый период 7 дней. Дальше платно

[Zero108]

1. Сеть Amazon: AS16509

2. Перевести это в список IP адресов можно так: https://ipinfo.io/AS16509

Получаем список из 100 зон вида:

100.20.0.0/14
102.210.190.0/24
102.210.191.0/24
103.10.127.0/24
103.104.86.0/24
...

3. Добавляем для каждого диапазона свою строку в файле .htaccess:

Order Deny,Allow
Deny from 100.20.0.0/14
Deny from 102.210.191.0/24

Но проще, всё-таки, забанить ботов через CF.

Изменено 7 марта пользователем Zero108

[Desti]

2 часа назад, Zero108 сказал:

Получаем список из 100 зон вида:

У этой АС всего-то 9,683 сети.  А про "100" сетей внизу есть коммент: The list on this page is limited to 100 results. 

Изменено 7 марта пользователем Desti

[HooLIGUN]

9 часов назад, AnWey сказал:

Да как то так это выглядит ... 

В логах веб сервера посмотрите, как называется юзерагент и заблокируйте его через CF

[Zero108]

Вот тут побольше IP-зон Амазона: https://asnlookup.com/asn/AS16509/

[AnWey]

Спасибо за информацию! 

[aLEX49566]

Пипец не ищите легких путей) 400 рублей в год и живи без хлопот )

Изменено 7 марта пользователем aLEX49566

[AnWey]

7 часов назад, Zero108 сказал:

1. Сеть Amazon: AS16509

2. Перевести это в список IP адресов можно так: https://ipinfo.io/AS16509

Получаем список из 100 зон вида:

100.20.0.0/14
102.210.190.0/24
102.210.191.0/24
103.10.127.0/24
103.104.86.0/24
...

3. Добавляем для каждого диапазона свою строку в файле .htaccess:

Order Deny,Allow
Deny from 100.20.0.0/14
Deny from 102.210.191.0/24

Но проще, всё-таки, забанить ботов через CF.

мне в СF нужно указать 16509 ? 

[Zero108]

Если только этот AS, то только его. По ссылке выше можно посмотреть образец настройки CF на скриншотах.