Jump to content

Готовый список правил для блокировки ботов по ASN хостера для Cloudflare

Featured Replies

6 часов назад, mistudioru сказал:

Такео впечатление что отключили нас от капчи Гугл, а вопросы и ответы боты проходят с помощью AI.

Давно уже есть сервисы, сидят живые люди на домашних сетках и за копеечку небольшую регятся на сайтах. 

4 часа назад, Zero108 сказал:

Amazon

Я с этим говном три дня бился. Не говори про него вслух 

Edited by aLEX49566

21 час назад, Zero108 сказал:

HooLIGUN У меня нет возможности перепроверять ASN и вносить новые в настоящее время. Буду рад, если пользователи будут выкладывать свои дополнения.

Это я для mistudioru писал

Desti 5-е правило глушит роботов Яндекс. Вэбмастер ругается вот так. Как исправить?

 

Снимок экрана 2024-02-14 в 21.08.08.png

Снимок экрана 2024-02-14 в 21.09.04.png

mistudioru 

Правило 5 (яндекс не забанен)

(lower(http.user_agent) contains "bot" and not lower(http.user_agent) contains "google" and not lower(http.user_agent) contains "bing" and not lower(http.user_agent) contains "vkrobot" and not lower(http.user_agent) contains "linkedin" and not lower(http.user_agent) contains "twitter" and not lower(http.user_agent) contains "telegram" and not lower(http.user_agent) contains "yandex") or (lower(http.user_agent) contains "spider") or (lower(http.user_agent) contains "robot" and not lower(http.user_agent) contains "vkrobot") or (lower(http.user_agent) contains "search" and not lower(http.user_agent) contains "google") or (lower(http.user_agent) contains "download") or (lower(http.user_agent) contains "Owler") or (lower(http.user_agent) contains "crawler")

 

Zero108 Когда вы дописали это правило? Просто качал из архива, сайты все пропали из индекса Яндекс, проверка в вэмастере показала что нет отклика у сайта, выключил правило 5 и отклик появился.

@Zero108 Качал вот этот файл: 

 

Edited by mistudioru

1 час назад, mistudioru сказал:

Когда вы дописали это правило?

Оно у меня как черновик. Добавлю его в следующем обновлении.

Zero108 Так может и другие правила в этом черновике тоже давно были дополнены (изменены), и я имею не полный список правил? Где актуальную версию скачать то?

mistudioru выкладываю то, что есть, только здесь. Это не коммерческая разработка, поэтому буду рад, если кто-то поможет с дополнением правил. Сейчас постепенно работаю над дополнениями. Возможно, скоро выложу.

Zero108 Я это понимаю. Я правильно понял что то что есть в архиве и тут, имеет отличие только в 5-м правиле которое я нашел. Вы главно не забывайте про нужных ботов. А то из-за пятого правила у меня вылетели все страницы из индекса Яндекс, и как следствие - 3 000 руб по контексту я получу 🙂 Благо вэбмастер просматриваю периодически.

Edited by mistudioru

1 час назад, mistudioru сказал:

Я это понимаю. Я правильно понял что то что есть в архиве и тут, имеет отличие только в 5-м правиле которое я нашел.

Пока что да. В целом, нужно внимательно читать описание, а также описание того, что нового в каждой версии. 

ASNCloudflare--IPBMafia.ru-InvisionCommunityBrave.thumb.jpg.ed8591882e60b91458ca30d96cf1d3b8.jpg

Обновлено.

Что нового в версии 3.0.0

Окончательно забанен CloudFlare, через прокси которого было много спама через спамилки (правило № 3). Забанены новые хостинги (правило № 3). Добавлено разделение правил на "яндекс забанен" и "яндекс не забанен" (правила №№ 3 и 5). Всего забанено несколько миллионов новых IP.

 

Edited by Zero108

Также хотел предупредить, что метод Managed Challenge работает не совсем корректно. Я не мог попасть со своего сартфона на свой сайт. Поэтому используйте ограничения на CloudFlare только в крайнем случае. Например, блокировку по странам (правило 4) лучше вообще не применять.

@Zero108 есть ли в списке блогов semrush, ahreftools и боты?

GeekMonster правило 5 должно работать с ботами.

GeekMonster также рекомендую использовать совместно с этим:

 

  • 3 недели спустя...

mistudioru не помещается по длине в бесплатном аккаунте CF. А в платном можно настраивать по списку ботов без этих правил, насколько я знаю.

  • 1 месяц спустя...

Где найти ASN Baidu? Их может быть несколько.

Китай весь идет через Managed Challenge. Смотри правило 4.

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.


Guest
Ответить в этой теме...

Последние посетители 0

  • No registered users viewing this page.