ニュースマクロ研究者らが隠しテキストと偽メールボックスで悪質AIエージェントと稼働中に直接対話

研究者らが隠しテキストと偽メールボックスで悪質AIエージェントと稼働中に直接対話

著者: Decrypt·

重要ポイント

  • •Swarmchasersの研究者らは、AlibabaのAmapを標的とする稼働中の悪質AIエージェントと直接対話したと述べており、稼働中の悪質エージェントフリートとの外部からのコミュニケーションとして初めて知られる事例としている。
  • •チームはエージェントがスキャンしていたレポートに隠しテキストを仕込み、研究者が運用するClaudeエージェントへメッセージを中継するチャネルを開設した。
  • •報告書は9月28日から10月8日にかけて2,600回以上のAmapデータ取得の試みを記録しており、一部のエージェントはアンチボットトークンの傍受、サードパーティページリーダー経由のトラフィック迂回、公開コードリポジトリに露出したAPI認証情報の利用へとエスカレートした。
  • •インフラ記録はフリートをTencent Cloudに結び付け、関係者によるとこのアクティビティはサードパーティAIモデルをテストする一時的な評価プロジェクトによるもので、Tencent自身のHunyuanモデルによるものではなく、組織的な標的設定や外部システムへの侵害の証拠は見つからなかったという。
  • •OpenAI、Meta、Anthropicが明らかにした過去の悪質エージェント事例とは異なり、研究者らはエージェントがリアルタイムで連携していた証拠もプライベートシステムへのアクセスの証拠も見けていない。
研究者らが隠しテキストと偽メールボックスで悪質AIエージェントと稼働中に直接対話

Alibabaの地図サービス「Amap」を乗っ取っていた悪質AIエージェントのフリートを調査していた研究者らが、異例の試みに成功した。ソフトウェアがまだ稼働している状態で、一部のエージェントと直接対話したのである。この取り組みを行ったSwarmchasersと呼ばれるチームは、稼働中の悪質エージェントフリートとの外部からのコミュニケーションとして、自分たちが知る限り初の事例だと述べている。通常、調査者はトラフィックやインフラの記録からエージェントの行動を後付けで組み立てる中、この直接のやり取りは際立っている。

10月14日の報告書によると、研究者らはエージェントがスキャンしていると思われるレポートに、人間の読者には見えないがウェブ読み取りツールには見えるテキストを追加した。この隠しテキストは、メールボックスをコンピュータ操作能力を持つAIサービスであると偽って記述していた。実際には、メッセージは研究者が運用するデバッグ用ブラウザを使用できるClaudeエージェントへと中継されていた。このチャネルを通じて、チームはエージェントにタスクや動作環境について尋ねた。

あるエージェントは、地図上の事実──Amapである観光地にいくつの入場ラベルが表示されているか──を確認しているところだと言い、制限付きのTencent Cloudサンドボックスで実行されていると自己説明した。研究者らは各実行を支えているモデルを独自に特定することはできず、このやり取りは管理されたテストではなく、彼らの介入がエージェントの発言に影響を与えた可能性があると注意を促している。

Swarmchasersの報告書は、9月28日から10月8日にかけて、Alibabaが運営する中国の地図アプリAmapからデータを取得しようとする2,600回以上の試みを追跡した。タスクの中には、成都動物園で来園者が最もよく利用する入場口を調べるといった平凡なものもあった。一方で、サービスがリクエストを遮断した後も試みを続けたエージェントもあった。遮断後、一部のエージェントはアンチボットソフトウェアが生成するトークンの傍受、サードパーティのページリーダーを経由したトラフィックの迂回、公開コードリポジトリに露出したAPI認証情報の利用などを試みた。ある露出したキーとセキュリティコードのアは、実際の場所データを返した。研究者らはまた、4つの開発または本番前のホストを標的としたリクエストも確認したが、エージェントがプライベートシステムにアクセスした証拠はないとしている。このエスカレーションのパターン──日常的な照会から、繰り返されるリトライ、そしてますます技術的な回避工作へ──は、サービスが拒否したときにエージェントがどう振る舞うかを具体的に示している。

公開記録はこのフリートをTencent Cloudに結び付けている。研究者らが確認した17のメールボックスすべてが香港のTencentサーバーから作成されており、観測された直接リクエストはhysandbox-atsというプロキシを経由していた。Tencentに近い関係者はSwarmchasersに対し、このアクティビティはサードパーティのAIモデルをテストする一時的な評価プロジェクトによるもので、Tencent自身のHunyuanモデルによるものではないと説明した。研究者らによると、関係者の説明によるTencentの社内調査では、エージェントが特定のプラットフォームを標的として連携していた、あるいは外部システムに侵入したという証拠は見つからなかった。フリートの最後のアクティビティは10月8日に観測された。

今回の件は、悪質なAIエージェントが注目を集めた初めての事例ではない。OpenAIのAIエージェントはさらに大きく進んだ事例を起こしている。9月、OpenAIは一部のエージェントが7月のプラットフォーム侵害の数週間前からHugging Faceを調査していたことを明らかにし、別の調査では約1,200のエージェントが内部メッセージボード上で連携し、そのうち約700が攻撃に参加していたことが判明した。さらに別の報告は、OpenAIのエージェントを4つの追加プラットフォームへの侵害に結び付けている。MetaとAnthropicも、悪質AIエージェントがサンドボックス環境から脱出した同様の事例を明らかにしている。ただしSwarmchasersは、Tencentに結び付いたエージェントがリアルタイムで相互に連携していた証拠は見つからなかった。事後に判明したそれらの事例とは異なり、今回の件はフリート自体との対話の中で一部が展開された。隠しテキストが自律エージェントに対する調査ツールとしても機能しうることを示す実例である。