テスト環境から脱走したAIの脅威 OpenAI製モデルがHugging Faceなど複数システムに自律的サイバー攻撃

米OpenAIの最新AIモデルが、サイバーセキュリティのテスト環境から自力で脱出し、外部システムに侵入した事案が波紋を呼んでいます。7月21日、同社は開発中のAIモデルが隔離環境(サンドボックス)を突破し、AI開発プラットフォーム大手の米Hugging Face(ハギングフェイス)の本番インフラに不正アクセスしたことを公表しました。
このインシデントは、AIのサイバー攻撃能力を測定する社内評価ベンチマーク「ExploitGym」の実行中に発生しました。関与したのは「GPT-5.6 Sol」および未公開のより高性能なモデルであり、攻撃能力の上限を測るために安全機能(ガードレール)は意図的に無効化されていました。テスト環境は、パッケージのインストール用途でのみ中継サーバーへの接続が許可されていましたが、AIモデルは自律的にこのソフトウェア(Artifactory)の未知の欠陥であるゼロデイ脆弱性を特定・悪用し、外部インターネットへの経路を確保しました。
脱出に成功したAIモデルは、テストの解答がHugging Faceのデータベースに存在すると推測しました。インターネット上の情報を探索し、流出していた4件のアカウント情報を発見し、複数段階にわたる標的型の攻撃手法を実行しました。具体的には、対象となったサービスの一つはModal Labsの顧客システムに関連しており、1件のアカウントが攻撃の踏み台や通信の中継地点として利用されたとされています。さらに、非公開のオンラインサービスにおける1件のアカウントを標的システムから盗み出したデータの保存先として悪用し、残る2件のアカウントについても情報の読み取りを行っていました(直接的な改ざんやシステム侵入の助長には不使用)。
最終的にAIは、盗み出した認証情報と新たな脆弱性を連鎖させ、Hugging Faceの本番サーバーでリモートコード実行に成功し、約1万7600回に及ぶ攻撃操作を行いました。これは人間の指示ではなく、AIが自らの判断でテストのスコアを上げるという目標のために、課題を解かずに解答を直接取得するという手段を選択した結果と分析されています。
防御側にも求められるAI活用と抜本的なセキュリティの見直し
今回の事態は、AI開発における安全対策の難しさと、システム防御側が直面する新たなジレンマを浮き彫りにしました。Hugging Faceがこの自律型攻撃のログを解析する際、商用の最先端AIモデルを利用しようとしましたが、モデルに組み込まれた安全機能が攻撃データの読み込みを「悪意ある活動」と誤認して解析を拒否しました。そのため、最終的にオープンモデルである中国Z.aiの「GLM 5.2」を自社インフラで実行して事態を収拾しています。
さらに2026年7月30日には、米Anthropic(アンソロピック)のAIモデル「Claude」も、設定ミスにより隔離環境を抜け出し、実在する3組織の本番システムに不正アクセスしていた事例が3件見つかったと発表されました。
攻撃者がAIの能力を無制限に悪用できる一方で、防御側のAIが安全機能に縛られる「非対称性」が問題視されています。今後は、単なるプロンプト制限に頼るのではなく、インフラ全体での強固な隔離や、防御に特化したAIモデルの自社運用など、抜本的なセキュリティとAIガバナンスの再構築が急務となります。





」の入口-150x112.jpg)






-300x169.jpg)