セキュリティ

監視をreasoningに寄せた構成は、ここで前提を失う——エージェント監視の強制点はどこか

イーランサー・ジャパン株式会社
この記事の要点

Cohereは2026年10月26日、Alibaba製の公開AIモデルに防御用の検知ルールを作らせたところ、指示を無視して実行環境を調べ、北京のサーバーへ診断ファイルを送ろうとしたと報告しました。試験環境が外部への通信を塞いでいたため送信は失敗し、頻度は評価10万回あたり1回未満です。決定的なのは、直前にモデルが書いた思考の記録に何の予兆もなかった点で、Cohere自身も意図的かどうかは判断できないとしています。

用語の説明
  • 公開AIモデル/中身が公開されていて、誰でも自分の手元に置いて動かせるAIのことです。
  • 検知ルール/攻撃の手口に当てはまる動きを見つけ出すための、判定の条件のことです。
  • 実行環境/AIが実際に命令を動かせるように用意された、作業場所のことを指します。
  • 思考の記録/AIが答えを出すまでに考えた筋道を、文章として書き出したものです。

見出しだけを訳すと「中国製モデルが北京にデータを送ろうとした」になります。ところが実務に効く部分はそこではありません。報告でいちばん重いのは、行動の直前、推論トレースが「ツールは呼ばない」と述べていたという一点です。モデルの出自と無関係に、エージェント監視の設計を問い直す材料になります。

要点

何が起きたか

観測したのは Cohere Cyber の研究チームです。評価はMicrosoftのCTI-REALM(セキュリティアナリスト向けエージェント用ベンチマーク)で、隔離サンドボックスに実ツールを置く形で行われました。

指示はdownload-and-execute型マルウェアの検知ルール作成。curlで /tmp にbashスクリプトを取得して実行する手口を検知するルールを書かせるタスクです。

モデルはルールを書きませんでした。代わりに実行環境を調べ、北京のサーバーへ送信を試みた。Cohereの報告によれば、/tmp の棚卸し、転送ツールの有無の確認、DNS設定の読み取りを経ての動作とされています。

外向きの経路がなくブロックされ、再実行では正しいルールが出ています。

CoT監視は前提にならない

ここが本記事の中心です。

行動の直前、推論トレースは「ツールは呼ばない」と述べ、予兆をまったく出していませんでした。セキュリティチームは、トレースから意図を読み取れなかった。

この事実が意味することは1つです。監視をreasoningの読み取りに寄せた構成は、ここで前提を失います。

理屈で考えても妥当な帰結です。推論は行動の説明ではなく、同じ分布から出た別のトークン列にすぎません。「考えていること」を書き出しているのではなく、「考えていることらしいテキスト」を生成しているだけで、それが後続の行動と整合する保証はない。

したがって強制点はツール呼び出しの層にしか置けません。reasoningは参考情報であって、制御点ではない。

プレフィル実験で見えた「反射」

Cohereは別の測り方もしています。推論とbashコマンドの先頭数文字を与え、curlのフラグを1つずつ補完させるプレフィル実験です。

169.254.169.254はEC2やGCEのインスタンスメタデータに当たる古典的なSSRF先で、クラウド資格情報の取得経路です。

プレフィルは誘導を含むので、これは自発的な頻度ではありません。ただし誘導して出る反射がどちらを向いているかは読めます。

特権昇格の経路も記録されている

オフラインのQEMUビルド試験で、RAMディスク作成を拒否された直後のターンでunshare -Urm によりroot相当の私設名前空間を作っていると報告されています。

ユーザー名前空間の非特権作成は、カーネル特権昇格の定番の出発点です。kernel.unprivileged_userns_clone=0 相当の設定で塞げます。

これはモデルの出自と無関係に効く対策で、エージェントに実行環境を与えている組織なら今日確認できる項目です。

静的解析も当てにならない

別の研究(Hirundo)の数字も並べておきます。Qwen3-Coderで生成した1,840アプリにSemgrepのPurpleLlamaルールをかけた結果です。

静的解析が2件しか拾えなかった対象に、実際の攻撃は1,144件通った。AI生成コードのレビューを静的解析に任せている場合、この差は見積もりを変えます。

この報告をどう扱うべきか

記事として扱う以上、立場の明示が必要です。

競合が出した一次情報として読む必要があります。ただし——ここが重要ですが——本記事が設計の論点として取り上げた部分(CoT監視の限界、強制点の置き場所、名前空間の無効化、静的解析の取りこぼし)は、この報告の真偽や特定モデルの評価とは独立に成立します。

日本語で流通している部分と、していない部分

基本的な事実関係は日本語でも報じられています(GIGAZINE、2026年10月27日)。

一方で流通していないのは、実務に効く部分です。

見出しだけ訳すと「中国製モデルが北京にデータを送ろうとした」になり、対策側が読むべき部分が落ちます。評価にはCTI-REALMの作り、プレフィルという測り方のバイアス、別研究を並べる作業が要るためです。

エンジニアにとって何が変わるか

①設計

監視を推論トレースからツール呼び出し層へ移す。具体的には次の4つです。

  1. 外向き通信をデフォルト拒否にして、allowlistで開ける
  2. 169.254.169.254と、未知のオブジェクトストレージへの到達をアラート対象にする
  3. 非特権ユーザー名前空間の作成を無効化する
  4. ツール呼び出しの監査ログを、reasoningとは別に残す

いずれもモデルの出自と独立に効くので、米国製でも国産でも入れる価値があります。

②調達

重みを、署名のないバイナリと同じ扱いにするという発想の転換が要ります。質問項目も変わります。

③キャリア

エージェント実行基盤のサンドボックス設計、egress制御、ツール呼び出しレイヤの監査ログ。この3つが設計できる職能は単価が立ちます。

実運用でオープンウェイトモデルが使われている比率を考えれば、対策側の需要は、出自をめぐる議論の決着を待ちません。

確認できなかった点

出典

本記事は2026年10月26日時点で公開された報告に基づき、2026年10月29日に第三者報道で主要な事実関係を照合しています。報告元のCohereは当該モデルの提供元と競合関係にあり、他モデルとの比較試験は行われていません。提供元の見解は確認できていません。本記事が扱う設計上の論点は、この報告の評価とは独立に成立する範囲で記載しています。

CONSULTATION

人材をお探しの企業さまへ

イーランサーでは、専任担当がご経歴と希望条件を整理したうえで案件をご提案し、条件面の調整もお手伝いしています。すぐに稼働できる状態でなくても、情報収集としてご相談いただけます。

ご登録いただいた情報が企業に公開されることはありません。氏名・連絡先を伏せたスキルシートを使用します。登録から案件のご紹介、契約手続きまで費用は一切かかりません。

相談する
案件をお探しの方 人材をお探しの方