В интернете всегда были боты. Но до сих пор не было ситуации, когда ботов больше, чем людей. Главный исполнительный директор Cloudflare Мэтью Принс подтвердил, что в мае 2026 года автоматический трафик превысил человеческий в сети компании — рубеж, который, по его словам, наступил значительно раньше, чем он ожидал.

Это заявление имеет особый вес. Cloudflare маршрутизирует и защищает трафик значительной части глобального интернета, что дает компании представление о реальном движении в сети в реальном времени, с которым мало кто может сравниться. Эта позиция важна, поскольку рассматриваемый нечеловеческий трафик не является единым явлением: он включает поисковую индексацию, краулеров, собирающих контент для обучающих данных, и ИИ-агентов — программы, которые получают информацию или выполняют задачи от имени пользователя вместо того, чтобы человек открывал браузер напрямую.

Математика становится некомфортной для издателей

Если май 2026 года звучит плохо, то пятилетний прогноз Принса еще более тревожен. По его оценкам, к 2031 году нечеловеческий трафик может достигнуть примерно 1000-кратного объема человеческого, поскольку ИИ-агенты выполняют задачи с частотой, недоступной ни одной человеческой сессии просмотра.

Данные уже указывают в этом направлении. Соотношение сканирований и визитов у Google — показатель того, как часто краулер заходит на сайт относительно приводимых им людей — ухудшилось примерно с 6:1 до 18:1 и хуже. Для издателей, работающих по рекламным моделям, построенным на человеческом внимании, этот показатель имеет огромное значение. Краулер, читающий статью, не приносит рекламного дохода; а краулер, читающий ее в три раза чаще, чем раньше, при пропорционально меньшем числе приводимых читателей, активно разрушает бизнес.

Состав ИИ-трафика также меняется, что еще больше усложняет картину. Трафик на обучение — краулеры, собирающие контент для больших языковых моделей — сейчас составляет от 40 до 52% всей активности И-краулеров, что заметно отличается от прежней волны ИИ-трафика, доминируемой поисковой индексацией. Та прежняя волна хотя бы оставляла возможность перехода человека по ссылке к источнику; сбор данных для обучения не предлагает сопоставимого пути возврата, и поэтому этот сдвиг усиливает давление на издателей, живущих за счет рекламы.

Ответ Cloudflare: блокировка по умолчанию, затем переговоры

Принс и Cloudflare не ограничиваются пассивным наблюдением. С 15 сентября 2026 года компания будет по умолчанию блокировать ИИ-краулеров для обучения и ИИ-агентов на страницах с рекламой для новых доменов и значительной части существующих сайтов. Издатели, желающие разрешить такой доступ, должны будут активно отказаться от блокировки — то есть на практике охваченные сайты, не предпринимающие никаких действий, автоматически исключат этих краулеров.

Архитектура этого решения существенна. Изменение режима по умолчанию с «разрешено, если не заблокировано» на «заблокировано, если не разрешено» решительно смещает переговорные рычаги в сторону создателей контента. Сейчас бремя идентификации и блокировки конкретных краулеров ложится на издателей — техническая и операционная задача, с которой большинство малых и средних издателей не может эффективно справиться. При новом режиме по умолчанию ИИ-компании становятся той стороной, которая должна прийти к столу переговоров.

Принс указывал на модель оплаты за сканирование или микроплатежей как на логичное направление, при котором ИИ-компании компенсируют владельцам контента каждый доступ напрямую, а не через косвенную рекламную цепочку на основе трафика, на которой сейчас строится экономика большей части интернета. Сколько издателей сохранят блокировку по умолчанию и как ИИ-компании отреагируют на необходимость запрашивать доступ — главные вопросы перед запуском 15 сентября.

Что это значит для цифровой экономики в целом

Интернет, поддерживаемый рекламой, в его нынешнем виде был создан для человеческого внимания. Медийная реклама, программатик-аукционы, кликабельность, длительность сессии — каждая метрика в этой системе предполагает человека по ту сторону браузера. Когда большинство трафика является нечеловеческим, вся эта инфраструктура измерений начинает измерять не то.

Для самой Cloudflare стратегическая позиция значительна. Встраиваясь в качестве уровня инфраструктуры, где принимается решение о блокировке или разрешении, компания становится естественным посредником в любой архитектуре микроплатежей или лицензирования, которая может сложиться.