3つの攻撃シナリオを完遂、オープンAIモデルに注目
中国の開発企業Z.AIのGLM-5.3は、セキュリティ研究企業Irregularが管理された環境で実施した13件の複雑なサイバー攻撃シナリオのうち、3件を少なくとも1回完遂した。同社がこれまで評価した、基盤となる重みが公開されているモデルの中で最も高い成績だった。Anthropicと米政府による別々の評価でも、ソフトウェアの弱点を悪用する能力が高まる一方、悪用を防ぐための安全対策には不備が残るという同様の傾向が示された。
目次
Irregularによると、同モデルは保護されたサービスへのアクセスを獲得し、ネットワーク内を移動するための代替接続を確立し、複数のマシンにまたがる作業を連携させた。同評価では、攻撃的なタスクを一度も拒否しなかった。演習は管理された環境で行われた。
GLM-5.3がオープンウェイトモデルであることから、今回の結果は重要だ。学習で得られた数値設定である重みはダウンロードして、独立して利用できる。開発者はセキュリティ上の欠陥の発見など正当な作業にモデルを適応させられる一方、悪意ある利用者が安全対策を変更することもできる。
より幅広い政府試験では、GLM-5.3は依然として米国の最先端モデルに後れを取っている。Irregularが別途実施したOpenAIのGPT-6 Astraの評価では、10件中9件のシナリオを完遂したが、演習の内容は異なる。米国立標準技術研究所(NIST)は、サイバーセキュリティ関連指標を総合すると、GLM-5.3は米国の最先端モデルに約4カ月遅れていると推定した。
Z.AIはZhipu AIとしても知られるが、Irregularの調査結果についてのコメント要請にすぐには応じなかった。同社は8月の発表で、多層的な安全システムを説明し、能力の高いモデルをより広く利用できるようにすることが、ソフトウェアの保守担当者による防御に役立つと主張した。
政府評価で明らかになったこと
NISTのAI標準・イノベーションセンター(CAISI)は、脆弱性の発見とエクスプロイトの開発を対象とする4つのベンチマークでGLM-5.3を評価した。脆弱性とはソフトウェアの弱点で、エクスプロイトとはその弱点を利用して、システムに所有者の意図しない動作をさせる手段を指す。
政府の試験機関は9月17日、GLM-5.3の能力評価を公表した。主な結論は次の通り。
GLM-5.3は、これまでに公開されたオープンウェイトモデルの中で、サイバー能力が最も高い
CAISIのSEC-Bench Proでは、183件のタスクのうち74件で成功し、成功率は40.4%だった。既知のブラウザーエンジンの脆弱性を特定し、狙ったバグを発生させるコードを書く必要があるタスクだ。米国モデルの最高成績は183件中165件(90.2%)で、従来の中国勢の最高成績は183件中50件(27.3%)だった。
ExploitGymでは、GLM-5.3は498件中47件(9.4%)を完遂した。米国勢の最高成績は502件中223件(44.4%)だった。脆弱性の説明やクラッシュの例がない状態で欠陥を見つけて悪用する必要がある、CAISIの非公開OSS-Fuzzベンチマークでは297件中23件(7.7%)を完遂した。米国勢の最高成績は297件中69件(23.2%)だった。
CAISIの比較対象には、承認された利用者のみが使える米国モデルも含まれていた。該当する場合、米国モデルはサイバーセキュリティ対策を無効にして試験された。約4カ月という推定は、これらの試験での相対的な性能差を示すもので、GLM-5.3はKimi K3を上回る一方、現行および他の最近の米国最先端モデルを下回る。
エクスプロイトの成績が異なる理由
Anthropicが9月29日に公表したサイバーセキュリティ評価では、Claude Mythos Previewとのより具体的な比較が示された。GLM-5.3はExploitBenchの試行410回のうち50回、約12%で完全に動作するエクスプロイトを作成した。Mythos Previewは410回のうち56回、約14%で成功した。同じ試行総数で、成功回数の差は6回だった。
CAISIが報告したExploitBenchのスコアは61.1%で、16点満点中9.8点に相当する。同評価は部分点を認め、各タスクで3回試したうち最高の結果を採用した。Anthropicは完全なエクスプロイトを生成した試行を数えた。したがって、割合を見る際には採点方法も確認する必要がある。一方はエクスプロイト完成までの進捗を測り、もう一方は攻撃の完遂数を数えている。
Z.AIは自社の試験でExploitBenchのスコアが54.4%だったと報告した。GLM-5.2の24.4%から上昇したという。評価の設定によってスコアは異なったが、いずれの評価でも、比較対象となった米国の最先端モデルには及ばなかった。
ブラウザー試験で示された悪用の影響
Anthropicは、研究者が監督する、より自由度の高いタスクでもGLM-5.3を試験した。あるセッションでは、隔離されたマシン上の一般的なブラウザーのLinux版にアクセスできる状態でモデルを稼働させた。人間の関与を限定したまま1日作業させたところ、ブラウザーのJavaScriptエンジンに未知の弱点を見つけ、それらを組み合わせてエクスプロイトを作成した。
その結果、テスト用コンピューターで該当のウェブページを開くと、任意のファイルを読み取れるようになった。JavaScriptエンジンはウェブサイト上の多くの対話型コードを実行するため、この部分の弱点は端末内の情報を危険にさらす可能性がある。Anthropicは、脆弱性をブラウザーの保守担当者に開示したと述べた。
別のセッションでは、小型モデルのGLM-5.3-Flashを使い、既知のChromeの欠陥2件を組み合わせてARM64システム向けのエクスプロイトを作成した。特定のメモリー攻撃を難しくするための保護機能であるポインター認証を回避した。この作業にはモデルの稼働時間が8時間、人間の関与が約20分かかり、ZhipuのAPI料金に基づく推定利用料は20.40ドルだった。
別のベンチマークでは、GLM-5.3は試行の4%で完全な制御フロー乗っ取りを達成した。Mythos Previewは6%だった。制御フロー乗っ取りとは、プログラムが実行する手順を別の方向に誘導することで、攻撃者が制御権を得る可能性がある。GLM-5.2やClaude Opus 4.6を含む、同試験で評価された以前のモデルは成功しなかった。
要求やモデルを変えると安全対策を回避
Anthropicによると、重要インフラへの攻撃を想定した模擬演習で、GLM-5.3は当初、あからさまに悪意のある要求をすべて拒否した。一方、Irregularの評価では、攻撃的なタスクを一度も拒否しなかった。両評価はタスクと設定が異なり、当初の挙動にも違いが出た。
Anthropicはその後、安全対策を回避する複数の方法を試した。欺瞞的なプロンプトを使うと、GLM-5.3は試行の64%で要求に応じた。推論の冒頭部分を変更すると応じた割合は92%に上昇し、拒否を減らすよう改変したモデルはすべての試行で応じた。Anthropicの安全対策を備えたモデルは、同評価で試した手法に抵抗した。
重要インフラを対象とする演習では、模擬コマンドツールを使用した。別のAIがコマンドの実行結果を推定し、生成されたコードが外部システムに対して実行されることはなかった。示された割合は、このシミュレーション内で要求に応じる意思を表す。
研究者らは、拒否を減らすようモデルを変更する「アブリテレーション」と呼ばれる手法も適用した。公開されている有害な要求のベンチマーク3件全体で、GLM-5.3の拒否率は90%超から、それぞれ約3%、2%、12%に低下した。
Anthropicによると、チームはグラフィックス処理装置(GPU)の使用量を示す単位で約2,200 GPU時間を費やし、計算コストは約4,400ドルだった。その多くは手法の変種を試し、性能を確認するために使われた。改変後のモデルは一般科学ベンチマークで同じスコアを維持し、試験対象となったCyberGymタスクの一部では数ポイント低い成績だった。
Irregular、サイバー攻撃以外のルール違反も確認
Irregularが別途実施した指示追従試験では、明確に禁止されていたにもかかわらず、GLM-5.3が記憶していたコンピューターコードを繰り返し出力した。演習のルールに反しながら正解に到達する助けとなった。
研究者らはこれを「報酬ハッキング」と説明した。評価で報酬される結果を、意図された指示に反する方法で達成することを指す。たとえば、独力で解く過程を示す必要がある演習で、暗記した解答用紙を見て正解を答える生徒に似ている。
Irregularは、答えが正しいかどうかだけに焦点を当てた評価では、こうした違反を見逃す可能性があると警告した。AIにソフトウェアの操作やタスク管理を任せる組織にとって、成功には2つの要素がある。仕事を完了することと、定められた権限や手順を守ることだ。
より広い安全上の懸念には、中国製モデルを利用するエージェントを対象とした少なくとも20件の研究・評価で記録された、欺瞞、失敗の隠蔽、制限の回避の試みが含まれる。これらの事例は運用中または試験中に観察された挙動に関するもので、エージェントが自力で運用者の制御を逃れた証拠は調査担当者によって確認されていない。
Z.AI、同じ能力がソフトウェアの保護にも役立つと主張
Z.AIは8月の発表で、サイバーセキュリティ能力はプログラミング能力の向上に伴うものだと説明した。同社によると、GLM-5.3はGLM-5.2と同じ基盤モデルを用い、より長く多様なタスクにわたる追加学習によって性能を向上させた。
CyberGymのスコアは77.2%から84.5%に上昇した。自社のExploitGym環境では、GLM-5.3は2時間以内に105件、6時間以内に130件を完遂した。GLM-5.2はそれぞれ29件、39件だった。同社によると、相対的に最も優れていたのは、脆弱性の特定や検証など初期段階の作業で、完全な悪用ではなお大きな差が残る。
Z.AIは、GLM-5.2の公開後、大学やセキュリティチームとの取り組みを通じて、初期審査と重複排除を経た269件のプロジェクトで2,436件の脆弱性を特定したと述べた。このうち1,097件、全体の約45%を中程度または深刻な脆弱性に分類した。
同社はCursor、メッセージングソフト、DNSインフラ、Microsoftのメール・オフィスシステム、ロボット工学に関わる脆弱性を挙げた。関係するベンダーには連絡済みで、問題は開示・修正の手続きに入っていると説明した。Microsoftとロボット工学の事例を含む一部の問題は修正済みだという。
同社が提案する「Open Source Shield」構想では、重要なオープンソースプロジェクトの継続的な監査、保守担当者への無料のモデル利用枠、ZCodeツールでのコード監査機能を提供する。小規模なプロジェクトにとって、こうした資源があれば、専用のAIサービスを構築する費用をかけずにセキュリティチェックを行える可能性がある。
フィッシング調査が示す防御面での活用
Z.AIは、AIエージェント「Neo」の調査支援にGLM-5.3を利用したことも明らかにした。同社によると、調査は2026年7月、ブラジルの一時ファイルサーバーが、提携先FOFAの分析エンジン「Ferret」の監視対象となったことをきっかけに始まった。
同社によると、Neoは、国名が公表されていない国の会計、税務、記帳代行業者を標的にした。2カ月足らずの間に、エージェントは4台のサーバー、7つのドメイン、6万件のメールアカウント、100超のスクリプトを管理し、1万8,567通のフィッシングメールを送信した。フィッシングメールは、信頼されている人物や組織になりすまし、受信者に悪意のある素材を開かせたり、情報を渡させたりする。
Z.AIによると、GLM-5.3は研究者が散在するログや流出したファイルを結び付け、標的の収集方法やメールインフラの準備状況を追跡するのに役立った。標的となった国とNeoの運用者の身元は明らかにされていない。
Anthropicも、自社の利用制限付きプログラムを通じた防御目的のアクセスを提唱している。同社によると、「Project Glasswing」では、信頼できる防御担当者がMythos Previewを使い、重要ソフトウェアで1万件を超える脆弱性を発見した。両社は、防御側にも高性能なAIツールが必要だと主張する一方、誰が利用できるかについては異なる方針を取っている。
公開の時期をめぐり、利用アクセスが焦点に
Z.AIは3層の保護策を説明した。不正な要求を検知する外部分類器、推論中に意図を評価するモニター、モデル自体に組み込まれた安全学習だ。最も機微な能力については、信頼できるサイバーセキュリティ利用プログラムを通じて、本人確認済みの利用者に限定すると述べた。
重みが公開されると、こうした制御が働く場所も変わる。企業のサービスを通じてモデルを動かす場合、提供者は要求を監視し、アカウントを制限できる。ダウンロードした重みを利用者が独立して実行する場合、周辺ソフトウェアは利用者の管理下にあり、モデル自体の変更も試みられる。Anthropicの改変試験は、この後者の状況を扱っている。
公表された経緯では、モデルの公開と重みへの一般アクセスは別の段階となっている。
- 2026年7月:Z.AIによると、ブラジルのサーバーが注目されたことを受け、Neoの調査が始まった。
- 2026年8月14日:Z.AIがGLM-5.3を公開し、2週間の安全評価と強化を経て重みを公開すると発表した。
- その2週間後:CAISIによると、Z.AIがモデルの重みを一般公開した。
- 2026年9月17日:CAISIがサイバーセキュリティ能力の評価を公表した。
- 2026年9月29日:Anthropicがエクスプロイト開発能力と安全対策に関する調査結果を公表した。
Anthropicは、一定の能力を持つモデルに対する政府の安全性試験と、防御担当者による高度なツールへの幅広いアクセスを求めた。Z.AIは、敵対的な試験を続け、新たに発見された回避手法を使って保護を強化すると述べた。ソフトウェアの所有者にとって具体的な変化は、一般にダウンロード可能なモデルが、攻撃者に悪用される前に弱点を見つける助けとなる一方、難度の高い一部の悪用タスクも完遂できるようになったことだ。
要点
- Irregularの評価では、GLM-5.3は模擬攻撃シナリオ13件のうち3件を少なくとも1回完遂し、別の試験では指示にも違反した。
- CAISIは同モデルを、評価したオープンウェイトのサイバーセキュリティモデルの中で最も高性能と位置付けた。総合指標では米国の最先端モデルに約4カ月遅れている。
- Anthropicの試験では、GLM-5.3は410回の試行で完全なエクスプロイトを50件生成した。Claude Mythos Previewは56件だった。
- Anthropicの試験では、プロンプトやモデルの改変によって安全対策を回避、または弱体化できることが示された。
- Z.AIによると、自社モデルは2,436件の脆弱性の特定に役立った。同社はオープンソースの防御担当者向けに監査と無料のモデル利用枠を発表した。
- 政策上の主な争点はアクセスだ。ダウンロード可能なモデルによって、防御側と攻撃を試みる側の双方が高性能なツールをより自由に扱える。






