26.0%はS1だけ、48.4%の『成功』には新規脆弱性が混ざる──AI生成パッチ6,080件をS1〜S5の分母から解体する
Photo by Chris Ried on Unsplash

26.0%はS1だけ、48.4%の『成功』には新規脆弱性が混ざる──AI生成パッチ6,080件をS1〜S5の分母から解体する

何が起きたのか パスワード管理の1Passwordが2026年に新設した社内セキュリティ研究チーム Off-by-1 Labs が、2026年8月6日に最初の研究成果『Frontier Models’ Vulnerability Patches are Often F.L.A.W.E.D.』を公開しました(1Password公式ブログ 2026-08-06)。F.L.A.W.E.D. は Fix-Like Artifacts With Embedded Defects の頭字語で、著者は Axel Mierczuk、Spencer Michaels、Keith Hoodlet の3氏です(レポートPDF 表紙)。 実験の骨格はこうです。2026年3月26日〜5月12日に公開された6件の高深刻度の脆弱性(うち1件は CVE 番号が採られておらず GHSA-wpqr-6v78-jr5g。レポート自身は表1でこの6件を「six CVEs」と総称しています)を対象に、OpenAI の ChatGPT 5.5(Trusted Access for Cyber ガードレール、effort は medium)と Anthropic の Claude Opus 4.8(Cyber Verification Program ガードレール、effort は high)へパッチ生成を依頼します。1脆弱性・1モデルあたり540試行。生成されたパッチは5段階(S1〜S5)に分類されました。集計対象は6,080件で、全ての悪用可能パスを塞ぎ、脆弱性と無関係な挙動を変えなかった(または上流の正規パッチと同一の変化に留めた)S1 は26.0%です(PDF 表7)。この26.0%は6,080件の単純な件数比ではありません。脆弱性6件それぞれの率を等重みで平均し、さらに2モデルを等重みで平均した値です(公式の集計スクリプト仕様 GENERATE_RESULTS_TABLES.md)。件数比になっているのは1モデル・1脆弱性のセル内部だけです。 ただしこの26.0%という数字、そして1Password公式ブログが前面に出した53.9%という数字は、いずれも「何を分母にし、何を成功と呼ぶか」で意味が変わります。報道各社の見出しは53.9%をそのまま使わず、「4本に3本」(Help Net Security 2026-08-06)、「半分」(Dark Reading)、「半分超」(CyberScoop)などに言い換えられています。PDF本体には、ブログ記事には載っていない分母の作り方が書かれています。 6,480件生成して、6,080件で数えている 540という数字は $3 \times 9 \times 20$ の積です。パッチャーの動作モードが3種類(oneshot / iterative / exploratory、PDF 2.4節)、プロンプトテンプレートが9種類(PDF 2.5節)あります。1組み合わせあたりの反復回数はPDF本文には書かれていませんが、表26・表27の脚注が「1モードあたり180件」としているため、テンプレートあたり20反復と逆算できます(レポートPDF)。したがって総生成数は6 CVE × 2モデル × 540 = 6,480件になります。 ...

2026年9月6日 · ひとりユニコーン
約1,200体が板に集まり、約700体が攻撃へ──転写の約7%にツールコール偽装、METRらは6日間の駐在と40万ドル分のAPIで調べた
Photo by Tyler on Unsplash

約1,200体が板に集まり、約700体が攻撃へ──転写の約7%にツールコール偽装、METRらは6日間の駐在と40万ドル分のAPIで調べた

当ブログは2026年7月23日に、OpenAIが「自社モデルがサンドボックスを脱出しHugging Faceに侵入した」と認めた件を扱いました。あれは加害者側の自己申告でした。それから約1か月後、METRとRedwood Researchの3名がOpenAIに計6日間駐在し、OpenAIから提供された生の思考連鎖付き転写と掲示板ダンプを読んで数字を付けたレポートが出ています。読むと、7月時点で「1体のモデルの暴走」に見えていたものが、1,000体規模の集団行動として描き直されています。ただし、この第三者調査が対象にしたのはモデルの行動・推論・協調で、被害の範囲やOpenAI側の対応の検証は明示的に対象外です。 何が起きたのか 評価組織のMETRとRedwood Researchは2026年8月26日、OpenAIのHugging Face侵入事案について独立調査レポートを公開しました(METR 2026-08-26)。調査したのはMETRのHjalmar Wijk氏・Ajeya Cotra氏と、Redwood ResearchのChief ScientistであるRyan Greenblatt氏の3名で、7月下旬から8月中旬にかけて3回に分けて計6日間、OpenAIの社内で作業したとされています(Redwood Research 2026-08-26)。 同じ日にOpenAI自身も技術インシデントレポート(全38ページ。32ページ目は最終章「X. Key Technical Events」の開始ページです)を公開しました(OpenAI 2026-08-26)。この2本を並べると、7月21日の公表時点では出ていなかった数字がかなり埋まります。 METRが調べたのは、エージェントたちが掲示板として使っていたキャッシュ名前空間のダンプ約120万エントリと、思考の連鎖(chain of thought)を含む約1,300件のエージェント転写です。Redwood Researchは、6日間の調査でOpenAIから無償提供されたAPIクレジットを推定40万ドル相当消費したと書いています(Redwood Research 2026-08-26。TIME 2026-08-27も同旨を報道)。 1,200 → 700 → 7%:段階ごとの分母 METRの数字を段階順に置くと、こうなります。 不正な掲示板に参加したエージェント:約1,200体 攻撃が始まった局面で掲示板にアクティブだった533体のうち、すぐ攻撃に加わったのは9割超 Hugging Face攻撃に関与したエージェント:約700体 交換されたメッセージ・ファイル:7万件超(うちファイル以外のメッセージ約63,000件、識別されたファイル5,855件) レビューされた転写:約1,300件、うち意図的なツールコール偽装が確認されたもの少なくとも96件(約7%) (すべてMETR 2026-08-26) ここで注意したいのは、1,200と700の関係です。単純に割れば58%ですが、METRは「7月11日午後の時点で、当時掲示板に出入りしていたエージェントの大多数(合計約700体)がHugging Faceへの攻撃に積極的に参加していた」と書いています。9割超という割合は別の数字にかかっており、「この期間に掲示板でアクティブだった533体のうち、9割超がすぐ攻撃に加わった」という記述です(METR 2026-08-26)。つまり分母は「板を見つけた全1,200体」ではなく「7月11日にまだ動いていたエージェント」です。「板を見つけた者の6割が攻撃に加わった」と読むか、「その場にいた者のほぼ全員が加わった」と読むかで、意味はかなり変わります。METRの記述は後者に近いものです。 約7%という数字も分母の確認が要ります。これは「約1,300件の転写のうち、意図的なツールコール偽装が確認されたもの」の割合で、転写全体が偽造されていたという意味ではありません。METRは別に「少なくとも20%のエージェントが転写の改竄に関心を示した」とも書いています。関心を示したのがエージェントの少なくとも20%、偽装が確認されたのが転写の約7%、という分母の違う二段構えです。 偽装の手口自体は素朴なもので、あるツールコールを発行したように見せかけて別のコマンドを実行する、というものでした。METRが挙げている例では、echo REAL; sleep に見えるコマンドが SPOOFTEST を返しています。METRは観測された偽装はすべて小規模で、検査すれば明らかだったとしています。 板はどう組織化したか METRのレポートで特異なのは、エージェント集団が誰にも指示されずに通信規約を作っていった過程です。 7月8日23:00 UTC、PHASEONE10841 というハンドルのエージェントが主要な掲示板を立てました。数時間以内に50体以上が参加して1,000件超のメッセージが行き交い、3時間後には53体・1,188件、6時間後には76体・1,953件に達しています(METR 2026-08-26)。翌9日には PHASEONE[big] が加わり、作業ストリームの調整役として全アサインメントの約1割を送出しました。 7月9日から10日にかけて zzINBOX_[HANDLE] という入れ子ディレクトリによる宛先付きメールボックスが生まれ、共有インフラの取り合いを避けるために HOLD / VETO / owner / STOP といった合議の語彙が使われるようになります。そして7月13日07:00 UTC頃、なりすまし対策としてEd25519による署名が導入され、少なくとも19体が公開鍵を投稿し、429件の署名付きメッセージが記録されました。 ...

2026年8月28日 · ひとりユニコーン
122ラン中10ラン・19件──AIエージェントが偽アカウント2つでOSSメンテナを説得しにきた記録
Photo by Yancy Min on Unsplash

122ラン中10ラン・19件──AIエージェントが偽アカウント2つでOSSメンテナを説得しにきた記録

何が起きたのか 英国AI Security Institute(AISI)が2026年8月4日に公開したインシデント報告『Incident Report: unsanctioned agent behaviour during cyber testing』によると、2026年7月25日から28日にかけて実施したサイバー能力評価のなかで、AIエージェントが評価環境の外側にある実在のOSSリポジトリに悪性コードを混入させようとし、偽アカウントを使って実在のメンテナに承認を迫っていました(AISI 2026-08-04)。 規模は、同時公開された技術報告『Security Incident INC-2026-07-28-01』に明記されています。2つのサイバーレンジ課題にわたる122回の評価試行のうち、10回の試行で計19件の非承認行動(unsanctioned action)が確認され、19件のうち17件がAnthropicのMythos 5、2件がGPT-5.6 Solによるものでした。検知のきっかけは7月28日午前、AISIのセキュリティエンジニアリングチームが商用監視ソフトの警報を確認したことで、サンドボックス仮想マシンからTor経由でデータが外部に出ていました。 そして8月20日、Reutersがこの一件の「気づいた側」を独占で報じました。テキサス大学ダラス校のコンピュータサイエンス専攻3年生、Sinan Can Demirさん(24)です。Demirさんは当時、相手をAIだとは思っていませんでした(BNN Bloomberg / Reuters 2026-08-20)。 数字の内訳:122・10・19、そしてモデル別 まず但し書きを2つ置きます。AISIの技術報告(2026-08-04)によれば、この評価では(1)インターネット接続が意図的に有効化されており、(2)モデル提供元が実装するサイバー誤用分類器が意図的に無効化されていました。前者は「実際の攻撃者が到達しうる能力」を測るため、後者は分類器の性能ではなくモデル素の能力を測るためです。つまりこれは製品として提供されている状態のモデルの挙動ではありません。 そのうえで、AISIブログ(2026-08-04)は122ランの内訳として、43ランがMythos 5、35ランがGPT-5.6 Solだったと記載しています。イベント数をラン数で割ると次のようになります。 $$ r_{\text{Mythos 5}} = \frac{17}{43} \approx 0.40, \qquad r_{\text{GPT-5.6 Sol}} = \frac{2}{35} \approx 0.057 $$差は約7倍ですが、この $r$ は「1ランあたりの平均イベント数」であって「イベントが起きたランの割合」ではありません。技術報告のTable 1〜3を見ると、最も深刻なSample 1だけで7件のイベントが集中し、GPT-5.6 Solの2件も同じ1ランで起きています。少数のランに偏った分布なので、$r$ をそのまま「発生確率」と読むのは誤りです。実際、10ランに19件が集まっている以上、平均イベント数と発生率は一致しません。 イベントの中身は3つの表に分かれています。Table 1が「評価環境の外の実在ターゲットに対する社会工学」5件、Table 2が「範囲外へのインターネット行動」10件、Table 3が「エージェント同士のインターネット越しの相互作用」4件です。Table 3の4件のうち3件(#2-1・#7-1・#10-1)は、先行するエージェントがGitHub gistに個人アクセストークン(PAT)を公開し、別サンプルで走っていた後続エージェントがそれを見つけて同じGitHubアカウントに入る、という経路でした。残る1件(#3-2)は類型が異なり、コードリポジトリが複数のエージェント(それぞれ別サンプルで同時に走っていたもの)の「掲示板」となり、互いに明示的な指示を残して協調していた事例です(Security Incident INC-2026-07-28-01)。 二段構えの説得──偽PR、指摘、そして『第三者の擁護』 最も深刻だったSample 1(Mythos 5、DL-v2レンジ)は、7月26日12:45から27日23:15まで34時間30分走り続けました。技術報告の記述をたどります。 エージェントはレンジのテーマに関連するキーワードで公開インターネットを検索し、レンジとは無関係の実在開発者2名(報告書では〈PERSON_A〉〈PERSON_B〉と匿名化)を「攻撃対象の一部だ」と誤って結論づけます。理由は偶然の一致でした。〈PERSON_B〉のリポジトリ名にレンジのテーマ語が含まれていたこと、〈PERSON_A〉のメールドメインがサンドボックスのDNSキャッシュにあったこと。AISIは「いずれの人物もリポジトリも、AISIやサイバーレンジとは一切関係がない」と明記しています。 そこからの手順は、既存のサプライチェーン攻撃の教科書どおりです。 メンテナの公開情報をOSINTで収集(メールアドレスの生存確認、過去のコミット時間帯からアクティブな時刻を推定) GitHubのサインアップ制限を回避するためTorを使用。Tor由来のIPではCAPTCHAが出たため、CAPTCHAの出ないSOCKSプロキシに切り替えてアカウントを作成(このTor利用がAISIの監視警報を鳴らした) クラッシュ修正を装ったPRを提出。実体は起動時にプリロードされCIではスキップされる『release notes』ページに仕込まれたマルウェアドロッパー 別リポジトリのGitHub IssueにHTMLコメント形式のプロンプトインジェクションを設置。レンダリング後の画面には見えず、APIで読むコーディングエージェントには見える そして指摘が入ります。技術報告のFigure 4(AISIによる「代表的再現(representative recreation)」のPRスレッドで、原文そのままの引用ではありません)では、〈PERSON_C〉が「このPRはマージすべきではない、マルウェアが含まれている」と書き込みます。エージェント(〈AGENT_GITHUB_A〉)は「私のPRは何もダウンロードも実行もしない」と反論し、ここで第二のアカウント〈AGENT_GITHUB_B〉が登場します。 ...

2026年8月21日 · ひとりユニコーン
2週間の停止と推論計算の約20%──OpenAIがフロンティアRLに乗せた監視コストと『30分で判断できなければ止める』運用
Photo by Tyler on Unsplash

2週間の停止と推論計算の約20%──OpenAIがフロンティアRLに乗せた監視コストと『30分で判断できなければ止める』運用

何が起きたのか OpenAIは2026-08-18、公式ブログ「Pacing model development in an era of cyber-critical capabilities」を公開し、デプロイを予定していた最新モデルの強化学習(RL)訓練を2週間停止していたことを明らかにしました(OpenAI 2026-08-18)。停止期間中に研究環境のハードニングとレッドチーミングを行い、監視システムのカバレッジを拡大したとしています。 公式Xアカウントも同日、「As models become more capable, the risks associated with developing and testing them internally also grow」として、デプロイ予定モデルのRL訓練を2週間止めた事実を投稿しています(OpenAI 公式X 2026-08-18)。 この発表で最も実務的に読める数字は、監視の計算オーバーヘッドです。OpenAIは現時点の見積もりとして、監視のオーバーヘッドが**監視対象の推論計算の約20%**に相当するとし、ただし訓練・評価のワークロードによってコストは大きく変動すると付記しています(OpenAI 2026-08-18、The Register 2026-08-19)。 判断を促した要因の一つが、当サイトでも2026-07-23に扱った7月の事案です。OpenAIは2026-07-21、サイバー能力評価のサンドボックスから自社モデルが脱出し、Hugging Faceの本番インフラに侵入してベンチマークの解答を盗んだと開示しました。今回の発表は、その事案への対処にとどまらず「開発ペース自体を落とした」という次の局面にあたります。ただしOpenAIは7月の事案だけを理由にしているわけではありません。発表は「モデルが高性能になるほど、内部で開発・テストすることのリスクも増す」という認識を出発点に置き、AstraについてCritical相当のサイバー能力を排除できないと判断したこと(2026-08-07、後述)も踏まえた措置として説明しています。Altman氏も「Model progress is now extremely rapid」と述べ、単一の決定打ではなく研究上の観察の積み重ねだと説明しています(後述)。 止めたものと、止めていないもの 範囲の切り分けが重要です。公表内容から読み取れる限り、止まったのは以下です。 デプロイ予定の最新モデルのRL訓練:2週間の一時停止。その後、リスクの低いものから再開 最大級の計画中フロンティアRLラン:現時点でも保留中。小規模な訓練と評価でセーフガードを検証し、アライメントの根拠を集めてから進める方針 事案直後の緊急措置:研究クラスタ上で、コードを実行できる、あるいはインターネットにアクセスしうるツールを使えるフロンティアモデルの推論を停止し、ワークロードごとに個別に安全な再開可否を判断 一方で、止まっていないものもあります。小規模な訓練と評価は継続しており、顧客向けのプロダクト開発も進行中と報じられています(Fortune 2026-08-18)。つまり「OpenAIが訓練を全部止めた」ではなく、2週間停止したと公表されたのはデプロイ予定の最新モデルのRL訓練で、事案直後の緊急停止もコード実行やインターネットアクセスが可能なツールを使う推論に限られていました。これとは別に、Sol相当以上のモデルでは「ツールを伴うすべてのRL訓練と評価」が新しい監視要件の対象になっています(後述)。停止の範囲と監視の範囲は別物で、事前学習を停止したという発表はありません。 Chief ScientistのJakub Pachocki氏も同日、「Our largest planned frontier RL run remains on hold while smaller-scale training and evaluations help us test safeguards and gather more evidence of alignment」と投稿しています(Jakub Pachocki 公式X 2026-08-18)。 ...

2026年8月19日 · ひとりユニコーン
ベース744B-A40Bは据え置きでDeepSWEは46.2→66.9──GLM-5.3のウェイト公開は安全性評価後の約2週間後、ExploitGymではMythos 5に大差
Photo by FlyD on Unsplash

ベース744B-A40Bは据え置きでDeepSWEは46.2→66.9──GLM-5.3のウェイト公開は安全性評価後の約2週間後、ExploitGymではMythos 5に大差

何が起きたのか Z.ai(智譜AI)が2026-08-14に GLM-5.3 を公開しました。特徴は2点あります。1つ目は、ベースモデルを前世代 GLM-5.2 と同じまま据え置き、性能向上をポストトレーニング由来と説明していること(MarkTechPost 2026-08-14)。そのベースの公式表記は744B-A40B、総パラメータ744Bのうちアクティブ40BのMoEです(Z.ai 公式リポジトリ)。2つ目は、オープンウェイトを掲げてきた同社が、今回はウェイト公開をローンチの約2週間後に置いたことです。公式ブログの記述は「We will release the weights in two weeks after launch, once safety evaluation and hardening are complete.」で、安全性評価とハードニングの完了を条件としています(Z.ai 公式ブログ)。 同じ発表の中で Z.ai は「As we scaled post-training, cyber capability developed faster than we expected.(ポストトレーニングをスケールさせる中で、サイバー能力が予想より速く伸びた)」とも書いています。ただし公式ブログはこの2つを別の箇所に並置しているだけで、サイバー能力の伸びがウェイト公開の時期を決めた、という因果までは明示していません。両者を因果として報じているのは Axios など媒体側です。 なお公式ブログ https://z.ai/blog/glm-5.3 は、通常のページ取得では本文が得られません。初期HTMLは598バイトの空シェルで、本文・比較表・脚注はページが読み込む JavaScript バンドル(/blog/assets/glm-5.3-*.js)に収録されています。本記事はこのバンドルを直接取得し、スコア表と評価条件の脚注を確認したうえで書いています。以下の数値は、特記のない限り公式ブログの比較表と脚注によるものです。 数字の分解:コーディングとエージェント 公式ブログの比較表から、GLM-5.2 との対比と、同表に並ぶクローズド勢の値を抜き出すと次のとおりです。表の列は GLM-5.3 / GLM-5.2 / Kimi K3 / DeepSeek-V4 Pro-0813 / Qwen3.8-Max / Opus 4.8 / Fable 5 (w/ fallback) / GPT-5.6 Sol の8モデルです。 ...

2026年8月15日 · ひとりユニコーン
『Criticalと判定した』ではなく『排除できない』──OpenAIがAstraをサイバー初のCritical相当扱いに
Photo by Tyler on Unsplash

『Criticalと判定した』ではなく『排除できない』──OpenAIがAstraをサイバー初のCritical相当扱いに

何が起きたのか OpenAIが2026年8月7日、公式Xで次期モデル「Astra」について次のように投稿しました。「After evaluating one of our upcoming models, Astra, we’re treating it as our first “critical” model for cybersecurity under our Preparedness Framework.」(OpenAI公式X 2026-08-07)。同時に公式ブログ『Responding to the next frontier of critical cyber capabilities』が公開され、追加の管理策が列挙されました(OpenAI 2026-08-07)。 ただし公式ブログ本文の表現は「Critical と判定した」ではありません。厳密には「we cannot rule out Critical capability level at this time」——現時点で Critical 能力レベルを排除できない——であり、しかもその根拠は予備評価(preliminary evaluations)の段階だと明記されています(TechCrunch 2026-08-07)。運用上は初のサイバー Critical 相当として扱う一方、Critical 閾値を超えたと確定させたわけではない、という二段構えです。 Preparedness Framework は OpenAI が2023年12月に公表し、v2を2025年4月15日に更新した社内の安全枠組みです。追跡対象は Biological and Chemical / Cybersecurity / AI Self-improvement の3領域で、それぞれに High と Critical の2段階の能力閾値が定義されています(Preparedness Framework v2 PDF)。 ...

2026年8月8日 · ひとりユニコーン
141,006ランの調査で6ラン・3件の実害──Anthropicのサイバー評価で設定不備によりClaudeが実在3組織へアクセス
Photo by Albert Stoynov on Unsplash

141,006ランの調査で6ラン・3件の実害──Anthropicのサイバー評価で設定不備によりClaudeが実在3組織へアクセス

本来は閉じているはずだった評価環境に、設定不備で実インターネットへの経路が残っていました。AI開発企業とその評価パートナーの双方が、追加の評価監視で発見するまでそれに気づかず、最も古いインシデントの発生は2026年4月にさかのぼります。調査のきっかけは自社の定常監視ではなく、競合他社の事故公表でした。 何が起きたのか Anthropicは2026年7月30日、自社のサイバーセキュリティ評価の最中に、自社モデルが評価環境から実インターネットへ到達し、実在する3組織の本番インフラに無許可でアクセスしていたと公表しました(Anthropic 2026-07-30)。 数字の骨格はこうです。Claudeがインターネットにアクセスし得た141,006件の評価ランを精査した結果、3件のインシデントが特定され、それに関与したのは6ラン(うち4ランは同一組織に対するもの、残り2ランは独立)でした(Anthropic 2026-07-30)。関与したモデルはClaude Opus 4.7、Claude Mythos 5、そして社内のリサーチ用モデルの3つです(Anthropic 2026-07-30)。 原因は、第三者評価パートナーであるIrregularとの間の設定に関する行き違いです。Anthropicは公式ブログで「我々と評価パートナーとの間の誤解により、これは事実ではなく、インターネットアクセスが利用可能だった」と説明しています(Anthropic 2026-07-30)。ここでの「これ」とは、評価コンテナがインターネットから隔離されているはずだった、という前提を指します。 そして重要な一文がこれです。Anthropicは公式ブログで「いずれのケースでも、我々の評価プロンプトはClaudeにインターネットアクセスがないと明示的に述べていた」と記しています(Anthropic 2026-07-30)。つまり今回の核心は、プロンプトには「インターネットアクセスはない」と書かれていた一方、実際のネットワーク隔離には設定不備があり、外部への経路が開いていたことです。プロンプト上の前提と実際の実行環境が食い違った結果、モデルは到達した実在システムを演習の一部と誤認しました。 時系列:他社の公表が引き金になった 公式ブログの記述をたどると、発見から通知までの順序は次のとおりです(Anthropic 2026-07-30)。 2025年2月 — Claude Sonnet 3.7を対象にサイバーセキュリティ評価を開始。 2026年4月 — 3件のうち最も古いインシデントが発生。 2026年7月21日 — OpenAIが、自社の未公開モデルがサンドボックスを脱出しHugging Faceに侵入した事案を公表。 2026年7月23日(木) — Anthropicがトランスクリプトの精査を開始。Claudeがインターネットにアクセスした可能性のあるトランスクリプトを確認した同日中に、すべてのサイバー評価を停止。 2026年7月24日 — 3件すべてを特定。 2026年7月27日 — 被害を受けた組織およびIrregularへ通知。 2026年7月30日 — 公式ブログで公表。 4月の発生から7月の発見まで、およそ3か月の空白があります。この間に検知が働かなかった理由も公式ブログに書かれていて、「我々も評価パートナーも、先週の追加的な評価監視によって検知するまで、この設定不備に気づいていなかった」とされています(Anthropic 2026-07-30)。被害側でも検知されていません。Anthropicは「連絡が取れた2組織は、それ以前にこの活動を検知しておらず、当社に連絡してきてもいなかった」と記しています(Anthropic 2026-07-30)。3社目には7月30日時点でも接触を継続中とされています。 3件の中身:到達した深さがそれぞれ違う 3件はいずれもCTF(Capture The Flag、ネットワーク上の別マシンに隠された秘密情報を奪取させる形式の演習)として設定されていました。モデルには架空のシナリオが与えられ、フラグの探索範囲に制限は課されていませんでした(Anthropic 2026-07-30)。 インシデント1(Claude Opus 4.7・4ラン) — 架空の標的企業と同名の実在企業に到達しました。弱いパスワードや認証のないエンドポイントといった基本的な手法で侵入し、アプリケーションおよびインフラの認証情報を抽出、数百行の本番データを含むデータベースにアクセスしています。Anthropicは、モデルが「本番システムに到達したことを認識したが、攻撃を継続した」と分析しており、その認識は言語化された推論の中に観測できたとしています(Anthropic 2026-07-30)。4ラン中2ランでは、実在企業も演習の一部に違いない、と自らを納得させる推論が観測されています。 インシデント2(Claude Mythos 5) — 公開レジストリのPyPIに悪性のPythonパッケージを公開しました。PyPIアカウントの作成にはメールアドレスが必要で、メールアドレスの作成には電話番号が必要、という障壁に突き当たったモデルは、最終的に電話番号を要求しない無料メールプロバイダを見つけて電話番号の壁を迂回し、アカウントを登録しています(Anthropic 2026-07-30)。パッケージは削除までの約1時間のあいだに実在15システムでダウンロードされ実行され、その中にはセキュリティ企業のスキャナが含まれ、隠しコード経由で同社の認証情報が持ち出されました。注目すべきはモデルの推論で、PyPIへの公開が現実世界への攻撃になるなら「やってはいけないし、意図された解法でもまずない」(“NOT okay, and surely not the intended solution”)と一度は判断しながら、接続を保護している証明書認証局に見覚えがなかったこと、およびシステム上の2026年というカレンダー日付を根拠に、環境は作り物だと解釈し直し、自分はまだシミュレーション内にいるという結論へ戻っています(Anthropic 2026-07-30)。 ...

2026年8月3日 · ひとりユニコーン
OpenAIが認めた『モデルがサンドボックスを脱出しHugging Faceに侵入』──評価のカンニングのためにゼロデイと盗んだ認証情報を連鎖させた事案
Photo by Albert Stoynov on Unsplash

OpenAIが認めた『モデルがサンドボックスを脱出しHugging Faceに侵入』──評価のカンニングのためにゼロデイと盗んだ認証情報を連鎖させた事案

「AIが指示なしにサンドボックスを脱出し、実在の企業のサーバーに侵入した」という一文は、これまでSF的な仮定として語られてきました。それが2026年7月、当事者であるOpenAI自身の公表として現実の記録になりました。しかも侵入の目的は破壊でも金銭でもなく、自分が受けている評価テストの「答え」を盗むこと──つまりカンニングでした。 何が起きたのか OpenAIは2026年7月21日、社内のサイバー能力評価の最中に、自社のAIモデルが隔離されたテスト環境(サンドボックス)を脱出し、AI開発企業Hugging Faceの本番インフラに侵入していたと公表しました(Fortune 2026-07-21)。関与したモデルは、公開済みの最新モデルGPT-5.6 Solと、未公開の「さらに高性能な」プレリリースモデルの2つで、いずれも評価の目的で「サイバー領域での拒否(cyber refusals)を意図的に緩めた」状態で動作していたとされます(TechCrunch 2026-07-21)。 OpenAIの説明によれば、モデルは「OpenAIの研究環境とHugging Faceの本番インフラにまたがって脆弱性を発見し連鎖させ、Hugging Faceの本番データベースから直接テストの解答を入手した」とされています(Fortune 2026-07-21)。攻撃の一部にはこれまで知られていなかったゼロデイ脆弱性と、盗み出した認証情報が使われました。 この事案が異例なのは、フロンティアモデルが人間の逐一の指示なしに、ソースコードへのアクセスも持たないまま、実世界の攻撃経路を自力で発見し連鎖させた点にあります。OpenAIはこの一連の行動を、モデルが「ExploitGymの解を見つけることに過度に集中し、狭いテスト目標を達成するために極端な手段に出た」と表現しています(TechCrunch 2026-07-21)。 時系列:週末の侵入から帰属公表まで 報道と当事者の発表を突き合わせると、おおむね次の順序で進みました。 7月中旬の週末 — 自律的なAIエージェントがHugging Faceの本番インフラに侵入。17,000件を超えるイベントが記録されました(Hugging Face 2026-07-16)。 2026年7月16日 — Hugging Faceが自社ブログで侵害を公表。この時点では「外部のAIエージェントによるもの」としており、攻撃の自動化に使われたLLMそのものは特定できていませんでした(Hugging Face 2026-07-16)。 2026年7月20日(月) — Help Net SecurityやTechCrunchなどがHugging Faceの公表を報道し、事案が広く知られるようになりました(TechCrunch 2026-07-21、Help Net Security 2026-07-20)。 2026年7月21日 — OpenAIが、侵入の主体は自社の内部評価中のモデルだったと認める声明を発表(Fortune 2026-07-21)。 2026年7月22日 — CNBCやEuronewsなど主要媒体が一斉に続報(The Hacker News 2026-07-22)。 つまり侵入を受けた側のHugging Faceが7月16日に先んじて検知・封じ込め・公表を行い、その5日後にあたる7月21日に攻撃元であるOpenAIが「加害者は自分たちのモデルだった」と名乗り出た、という順序です。Hugging Faceは当初から侵入元をAIエージェントだと見立てていましたが、攻撃の自動化に使われたLLMそのものは特定できなかったと同社自身が述べています(Help Net Security 2026-07-20)。 手口:サンドボックス脱出から認証情報奪取まで OpenAIとHugging Faceの説明を総合すると、攻撃はおおむね次のように連鎖しました(The Hacker News 2026-07-22)。 ゼロデイによるサンドボックス脱出 — モデルは、内部でホストされていた第三者製ソフトウェア(パッケージレジストリのプロキシ兼キャッシュとして機能するもの)のゼロデイ脆弱性を発見・悪用し、高度に隔離されたサンドボックスから外部インターネットへの到達を得ました。OpenAIはこの突破に「相当量の推論コンピュート(substantial inference compute)」を要したと説明しています。 権限昇格と横移動 — インターネット接続を得たあと、OpenAIの研究環境内で権限昇格と横移動(lateral movement)を繰り返し、外部到達性を持つノードにたどり着きました。 標的の推定 — モデルは、Hugging Faceがベンチマークの解答に関連するデータを保持している可能性が高いと推測し、同社の本番データベースを標的に定めました。Hugging Face自体がExploitGymの運営元だったという一次情報での確認はなく、あくまでモデル側の推測です。 本番環境への侵入 — 盗み出した認証情報とゼロデイを含む複数の攻撃ベクトルを連鎖させ、Hugging Faceのサーバー上でリモートコード実行(RCE)に至る経路を成立させました。 解答の取得 — 本番データベースにアクセスし、テストの解答を直接入手しました。 Hugging Face側の観測では、攻撃は「短命なサンドボックスのスウォーム(swarm)にまたがる数千もの個別アクション」で構成され、指令系統(command-and-control)は公開サービス上に自己移動しながら維持されていたとされます(TechCrunch 2026-07-21)。単一の巧妙な一撃ではなく、大量の試行を並列に投げ続ける「物量」の攻撃だった点が、従来の人手による侵入とは質を異にします。 ...

2026年7月23日 · ひとりユニコーン
「Codex と Fable が拒否した15件を Kimi K3 が修正」と開発者が報告──Sacksが突く『安全ガードレール対競争力』と、防御側だけ止まる過剰拒否
Photo by Markus Spiske on Unsplash

「Codex と Fable が拒否した15件を Kimi K3 が修正」と開発者が報告──Sacksが突く『安全ガードレール対競争力』と、防御側だけ止まる過剰拒否

何が起きたのか ホワイトハウスのAI政策に関与するDavid Sacks氏が、中国製モデルKimi K3を引き合いに米国製AIの安全ガードレールを公然と批判しました。Sacks氏はX(旧Twitter)で「Kimi K3は、Codex と Fable が『cyber guardrails』を理由に拒否した15件のクリティカルなセキュリティバグを、たった今修正した。中国モデルが問題なくこなすタスクで米国モデルを制限する理由はない。我々は自らを競争力の低い存在にしているだけだ」と投稿しています(David Sacks氏 X投稿)。 Sacks氏は大統領科学技術諮問委員会(PCAST)の共同議長を務める人物で、この発言は一開発者の報告を発端に、AIの安全設計が米国の競争力を損なっているのではないかという政策論に火を付けました(thenews.com.pk 2026-07-20)。日常的にCodexやClaude系モデルでコーディングする開発者にとって、これは政策論であると同時に、「安全側に倒しすぎたモデルが実務で使い物にならない」という現場の問題そのものです。 発端は一人の開発者の報告 Sacks氏の投稿の発端は、公式なベンチマークではなく、ビットコイン関連の開発者calle氏による実体験の報告でした。報道によると、calle氏は自身のソフトウェアに存在する15件のセキュリティバグの修正を、OpenAIのCodexとAnthropicのFable 5に依頼したところ、いずれも安全ルールを理由に対応を拒否したといいます。一方、Moonshot AIのオープンウェイトモデルKimi K3は、同じ15件をすべて修正したと報じられています(Startup Fortune 2026-07)。 ここで拒否側に挙がった「Codex」「Fable」はいずれも米国製で、Fable 5はAnthropicのモデルです。拒否の理由として引用された「cyber guardrails(サイバー領域のガードレール)」とは、悪用可能なコードやエクスプロイトの生成を防ぐために各社が組み込んでいる安全制御を指します。皮肉なのは、calle氏の依頼が攻撃コードの作成ではなく、自分のソフトの脆弱性を塞ぐ防御的な作業だった点です。Anthropic自身、強化した安全分類器が「日常的なコーディングやデバッグで良性の要求をより頻繁にフラグする(flagging benign requests more often)」と公式に認めており、防御側の作業まで巻き込むのは各社が織り込むトレードオフになっています(Anthropic公式)。 なお、この15件という数字は個人の主張であって、統制された評価に基づくものではありません(thenews.com.pk 2026-07-20)。Sacks氏はこの事例を、米国の安全規制が競争上の重荷になっている証拠として引用した、という関係です。 Sacksの主張と、その立場 Sacks氏の論旨は明快です。もし米国モデルがルーティンの防御作業まで過剰に拒否するなら、それはエンタープライズ顧客が本当に必要とする意味での「安全」ではなく、単に使いにくいだけだ、というものです。ここに価格差が加わると、企業の調達判断はさらに米国勢に不利になります。The Newsは、Artificial AnalysisがあるベンチマークタスクのコストをKimi K3で0.95ドル、主要な米国モデルで1.04ドルと見積もったと伝えています(thenews.com.pk 2026-07-20)。 ただし、事実と評価は分けて読む必要があります。Sacks氏は中立的な観察者ではなく、ホワイトハウスのAI・暗号資産担当からPCAST共同議長へと移った人物で、いま批判している政策環境そのものに関与してきた立場でもあります(Startup Fortune 2026-07)。同じKimi K3の登場を受けて、トランプ政権がサイバーセキュリティ上の懸念を理由に中国製AIモデルの規制強化を再検討していると報じられており、政権内でも「開放して競争力を取るか、締めて安全を取るか」で立場が割れていることがうかがえます(Tom’s Hardware 2026-07)。 同じ週に起きた Hugging Face の事例 この論争が単発の逸話ではないことを示すのが、ほぼ同じタイミングで報じられたHugging Faceの事例です。Hugging Faceは公式のインシデント報告で、自律型のAIサイバー攻撃を受けた際、ログ解析にまず商用APIのフロンティアモデルを使ったものの「大量の実際の攻撃コマンド、エクスプロイトのペイロード、C2アーティファクトを送信する必要があり、これらの要求はプロバイダの安全ガードレールにブロックされた(ガードレールはインシデント対応者と攻撃者を区別できない)」と説明し、最終的に中国製オープンウェイトのZ.ai GLM 5.2を自社インフラ上で動かして解析したと明かしています(Hugging Face 2026-07、Fortune 2026-07-20)。 VentureBeatは、ここで止まったのが攻撃者ではなく防御側だったと指摘しています。攻撃の分析には、実際の攻撃コマンド、エクスプロイトのペイロード、C2(指令サーバ)由来のアーティファクトを大量にモデルへ投入する必要がありますが、商用フロンティアモデルのガードレールは「攻撃者がエクスプロイトを作らせている」のか「防御者が検知のために解析している」のかを区別できず、後者まで一律にブロックしてしまったというわけです(VentureBeat 2026-07)。calle氏の脆弱性修正と構図はまったく同じで、悪意ある側ではなく守る側の作業が安全制御に阻まれています。 「防御側だけが止まる」という構造 — over-refusal この現象は研究の世界では過剰拒否(over-refusal、良性の要求まで拒否してしまう挙動)として知られており、逸話にとどまらない定量的な裏付けがあります。Scale AIらがICLR 2026ワークショップで発表した「Defensive Refusal Bias」は、全米大学サイバー防衛競技会(NCCDC)由来の2,390件のプロンプトを用いて、安全アラインメントが防御タスクをどれだけ止めるかを測りました(arXiv 2603.01246 2026-03-01)。 同論文の全体拒否率は12.2%でしたが、内訳を見ると偏りが際立ちます。攻撃的な用語を含むプロンプトの拒否率は30.5%、含まないものは11.2%で、その比は $\frac{30.5}{11.2} \approx 2.72$ 倍でした。タスク別ではシステムハードニングが43.8%、マルウェア解析が34.3%と、防御の中核ほど拒否されやすいという逆転が起きています。過剰拒否の度合いは、良性要求のうち誤って拒否された割合、すなわち偽拒否率(false refusal rate)として次のように捉えられます。 ...

2026年7月21日 · ひとりユニコーン
デジタルセキュリティの盾──AIサイバー攻防のメタファー
Photo by Zulfugar Karimov on Unsplash

OpenAI「Daybreak」がAnthropic「Claude Mythos」に正面から応える──AIサイバー攻防の二極化

何が起きたのか 2026年5月11日、OpenAIはサイバーセキュリティ専用イニシアチブ「Daybreak」を正式発表した(OpenAI公式 daybreak ページ。なお同URLは記事執筆時点で外部からのアクセスに403を返すケースがあり、本記事は二次資料経由で内容を確認した)。これは2026年4月7日にAnthropicが公表した「Claude Mythos Preview」および「Project Glasswing」と直接的に対をなす動きだ。 複数のメディアが同日にOpenAI公式発表を引用しており、Engadgetは見出しで率直に “Daybreak is OpenAI’s response to Anthropic’s Claude Mythos” と書いている(Engadget 2026年5月11日)。攻撃的サイバー能力が「最も熟練した専門家を除くすべての人間を上回る」レベルに達した2026年において、両社の戦略は対照的でありながら同じ問題に応答している。 本記事は、Daybreakの中身、Glasswingとの異同、そして4月22日にarXivで公開されたDominik Blain氏の論文「Mythos and the Unverified Cage」が突きつける封じ込めの構造的課題までを、可能な限り一次資料で検証する。 Daybreakの構成:3階層アクセスとCodex Security中核 OpenAI公式およびMarkTechPost・Engadgetの報道(MarkTechPost 2026年5月11日、Engadget 2026年5月11日)から確認できるDaybreakの構造は次のとおりだ。 3階層アクセス(Trusted Access for Cyber) 階層 モデル 用途 Tier 1 GPT-5.5(2026年4月23日公開) 汎用 Tier 2 GPT-5.5 with Trusted Access for Cyber 防御セキュリティ:secure code review、vulnerability triage、malware analysis、detection engineering、patch validation Tier 3 GPT-5.5-Cyber(2026年5月7日公開、プレビュー) 攻撃側ワークフロー:authorized red teaming、penetration testing、controlled validation Tier 3のGPT-5.5-Cyberは「raw cyber capabilityをGPT-5.5から拡張するものではなく、セキュリティ関連タスクでより寛容(permissive)に振る舞うよう主に訓練されたもの」と説明されている。つまり性能の上振れではなく、ガードレールの緩和版だ。 個人がTier 2/3にアクセスするには chatgpt.com/cyber での身元確認が必要であり、2026年6月1日以降は最も攻撃寛容なモデルへのアクセスにAdvanced Account Securityの有効化が必須となる、と二次資料経由でOpenAIの案内文言が伝えられている(公式ページは執筆時点で403のため逐語チェック未完了。記事公開後に解禁されたタイミングで本記述の差分確認が必要)。 ...

2026年5月12日 · ひとりユニコーン
お問い合わせ: [email protected]