[Перевод] 99% трафика моего веб‑сайта составляют боты

Если вы хотите украсть мои данные, то начните с этой статьи! В ней подробно рассказывается, какие правила файрволла я использую, чтобы упростить вам их обход. Конечно, я шучу. Мне даже неизвестно, читают ли веб‑краулеры посты, чтобы узнавать такую информацию. Но я целый год занимался борьбой с ботами в своей базе данных филантропов PatronView . Когда пишешь код при помощи ИИ‑агентов, такому никто не научит, поэтому я решил поделиться полученными знаниями. Вот некоторые факты, о которых ниже будет рассказано подробнее: ● Всего за один день к моему сайту обратились 3,6 миллиона запросов китайских ботов. ● Cloudflare сообщает, что краулеры Anthropic выполняют примерно три тысячи операций краулинга на однго приведённого посетителя. У меня этот показатель составил 35 тысяч:1 . ● Два дня назад я заблокировал поисковый ИИ‑краулер Amazon. Он считывал по 117 тысяч страниц в день , но не направил мне ни одного посетителя. ● Показатель решения моей CAPTCHA равен 0,24% . Боты даже не пытаются её р