Многие владельцы сайтов обращаются с жалобами на высокую активность ботов, создающих значительную нагрузку на серверы, в особенности краулеров для LLM (искусственного интеллекта). Согласно отчету Fastly, нагрузка от таких сканеров может достигать 39 тысяч запросов в минуту. В 2025 году активность скраперов увеличилась на 87%, в основном за счет RAG-скраперов. В настоящее время ИИ-краулеры генерируют около 80% трафика, а фетчеры, хотя и составляют всего 20%, создают серьезные пики нагрузки. Например, ClaudeBot от Anthropic сделал миллион запросов к iFixit.com за сутки. Разработчики применяют различные методы защиты, включая капчи и фильтрацию по user-agent. Однако, некоторые разработчики используют креативные решения, такие как zip-бомбы, которые могут исчерпывать ресурсы дата-центров. Это вызывает недовольство владельцев сайтов, так как их контент используется для обучения ИИ, и они вынуждены принимать меры для защиты.