インターネットには昔からボットが存在しました。しかし、ボットが人間の数を上回る状況は、これまでありませんでした。Cloudflareの最高経営責任者(CEO)であるマシュー・プリンス氏は、2026年5月に同社ネットワーク上で自動化トラフィックが人間によるトラフィックを上回ったことを確認し、この節目が自身の予想を大幅に上回るスピードで訪れたと述べました。

この主張には並外れた重みがあります。Cloudflareはグローバルなウェブの相当部分のトラフィックをルーティング・保護しており、インターネット上を実際に流れているものをリアルタイムで把握できる組織はほとんどありません。この視点が重要なのは、問題の非人間トラフィックが単一の現象ではないからです。それは検索に近いインデックス作成、訓練データ用にコンテンツを取得するクローラー、そしてAIエージェント——ユーザーが直接ブラウザを開くのではなく、ユーザーの代わりに情報を取得したりタスクを完了したりするソフトウェア——に及んでいます。

パブリッシャーにとって計算が厳しくなる

2026年5月でも深刻に聞こえますが、プリンス氏の5年間の予測はさらに不安を煽るものです。同氏は、AIエージェントが人間のブラウジングセッションでは到底達成できない頻度でタスクを実行するため、2031年までに非人間トラフィックが人間のトラフィックの約1,000倍に達する可能性があると見積もっています。

データはすでにそのを示しています。Googleのクロール対訪問者比率——クローラーがサイトを訪れる頻度と、そこから人間を送り込む頻度の比率——は、約6:1から18:1以上に悪化しました。人間の注目を前提とした広告モデルで運営するパブリッシャーにとって、この比率は極めて重要です。記事を読むクローラーは広告収入を生みません。以前の3倍の頻度で記事を読みながら、送り込む読者数は比例して少なくなるクローラーは、ビジネスそのものを蝕んでいます。

AIトラフィックの構成も、状況をさらに複雑にする形で変化しています。訓練トラフィック——大規模言語モデルへの入力用にコンテンツを取得するクローラー——は現在、全AIクローラー活動の40〜52%を占めており、検索に近いインデックス作成が支配的だった初期のAIトラフィックの波から大きく乖離しています。初期の波は少なくとも人間がリンクをたどってソースに戻る可能性を残していましたが、訓練データの取得にはそれに相当する還元経路がなく、だからこそこの変化は広告収入に依存するパブリッシャーへの圧力を強めています。

Cloudflareの対応:デフォルトでブロック、その後交渉

プリンス氏とCloudflareはこれを単なる観察として放置していません。2026年9月15日から、同社は新規ドメインおよび既存サイトのかなりの割合において、広告掲載ページ上のAI訓練・エージェントクローラーをデフォルトでブロックします。そのアクセスを許可したいパブリッシャーは、ブロックを解除するために能動的にオプトアウトする必要があります。つまり実際には、何も対応しない対象サイトでは、これらのクローラーが自動的に排除されることになります。

この決定の構造は重要です。デフォルトを「ブロックされない限り許可」から「許可されない限りブロック」に切り替えることで、交渉上の主導権はコンテンツ制作者側に明確に移ります。現状では、特定のクローラーを特定してブロックする負担はパブリッシャーに課されており、これはほとんどの中小規模パブリッシャーが効果的に対応できない技術的・運用的負担です。新しいデフォルトの下では、AI企業が交渉のテーブルに着く側となります。

プリンス氏は、ペイ・パー・クロールやマイクロペイメントモデルを論理的な到達点として示しており、そこAI企業が、現在のウェブ経済のほとんどを支える間接的なトラフィックベースの広告チェーンを通じるのではなく、アクセスごとにコンテンツ所有者へ直接対価を支払います。どれだけのパブリッシャーがデフォルトブロックを維持するのか、そしてアクセス申請を求められることになるAI企業がどう対応するのかが、9月15日の導入に向けた当面の焦点です。

より広いデジタル経済にとっての意味

今日存在する広告支援型のウェブは、人間の注目を前提に設計されました。ディスプレイ広告、プログラマティックオークション、クリック率、セッション時間——この仕組みのあらゆる指標は、ブラウザの向こう側に人がいることを想定しています。トラフィックの過半数が非人間になれば、この計測インフラ全体が間違ったものを測り始めます。

Cloudflare自身にとって、ここでの戦略的ポジショニングは相当なものです。ブロックか許可かの判断が行われるインフラ層として自らを位置づけることで、同社は今後生まれうるマイクロペイメントやライセンシングのアーキテクチャにおいて、自然な仲介者となります。