Форум техподдержки Elite-Board

просто в файл .htaccess
прописываем
RewriteCond %{HTTP_USER_AGENT} ^.(Baiduspider|AhrefsBot|SemrushBot|MJ12bot|MegaIndex).$ [NC]
RewriteRule .* - [F,L]

мб кому-то пригодится

Рекомендую это делать в самую первую очередь!!!


Иначе возникнут проблемы с повышенной нагрузкой, а это - приводит к повышению тарифов хостинга из-за превышения лимитов, подвисанию сайта или появления ошибок типа 502, 504 и т.д.

да, согласен, пока вот сам не столкнулся, так бы и был не в теме

Такие темки желательно закреплять наверху. Эти паразиты беспредельно грузят сервер/сайт вплоть до 502.
Новые боты "рождаются" часто, поэтому мониторить логи и дополнять список нужно регулярно! Заметили ухудшение скорости, не забудьте проанализировать логи.
Раскидывать ссылки на сайт по различным каталогам и другим сомнительным ресурсам опасно, bad боты там буквально живут. Тема ссылок ушла на покой после замены ТИЦа на ИКС сайта.