Боты обогнали людей в интернете – глава Cloudflare признал, что это произошло раньше прогнозов

Стремительный рост агентного трафика привёл к историческому сдвигу. По словам главы и сооснователя Cloudflare Мэттью Принса, боты впервые в истории интернета превзошли людей по объёму запросов.

Что ж, это случилось быстрее, чем я предсказывал.

Принс, отметив, что ранее ожидал такого пересечения только к концу 2027 года.

Согласно свежим данным Cloudflare, соотношение автоматизированных и человеческих HTTP-запросов составляет 57,5% против 42,5% в пользу ботов. Принс добавил, что точную дату перехода назвать сложно, так как "данные немного грязные", но "мы определённо уже по ту сторону".

Речь идёт не о привычных краулерах поисковиков или мошеннических ботах. Cloudflare отдельно учитывает агентов нового поколения, которые путешествуют по сети практически как люди, выполняя задачи от имени пользователей. В прошлом году компания начала классифицировать таких посетителей, выделяя подписанных агентов и верифицированных ботов, из-за чего графики не уходят далеко в прошлое.

Чем именно занимаются ИИ-агенты в сети?

По оценкам Cloudflare, они читают страницы товаров, сравнивают цены, выполняют многошаговые задачи вроде поиска авиабилетов, собирают и индексируют контент для обучения моделей, а также работают персональными ассистентами – заказывают еду, делают покупки и обращаются в службы поддержки.

При этом метрики Cloudflare измеряют именно HTTP-запросы, а не вовлечённость. Живые пользователи по-прежнему лидируют по суммарному времени в приложениях, стриминге и бесконечной прокрутке лент. Эти форматы просто не генерируют такого количества быстрых загрузок страниц, как автоматизированные агенты.

Интересна и география распределения:

• Гибралтар (92,1%)

• Сингапур (76,4%)

• Иран (76,4%)

Если в первых двух случаях это связано с обилием дата-центров и хостинговой инфраструктуры относительно населения, то иранский показатель объясняется скорее массовым использованием VPN с автоматизированными скрейперами и инструментами обхода блокировок. Ранее Cloudflare уже отмечала Иран как горячую точку вредоносной ботовой активности.

35% новых сайтов в интернете созданы с помощью ИИ – и это только начало мертвого интернета

ИИ-боты все активнее захватывают интернет и уже составляют значительную долю трафика

Сдвиг ставит перед владельцами сайтов сложные вопросы – от роста расходов на трафик до изменения подходов к дизайну. Многие администраторы небольших ресурсов уже жалуются, что агрессивные ИИ-краулеры фактически устраивают DDoS-атаки, вынуждая закрывать контент за регистрацией.