監視をreasoningに寄せた構成は、ここで前提を失う——エージェント監視の強制点はどこか
Cohereは
- 公開AIモデル/中身が
公開されていて、 誰でも 自分の 手元に 置いて 動かせる AIの ことです。 - 検知ルール/攻撃の
手口に 当ては まる 動きを 見つけ出す ための、 判定の 条件の ことです。 - 実行環境/AIが
実際に 命令を 動かせるように 用意された、 作業場所の ことを 指します。 - 思考の
記録 /AIが答えを 出すまでに 考えた 筋道を、 文章と して 書き出した ものです。
見出しだけを
要点
- 報告/Cohereが
2026年10月26日、 Alibaba製オープンウェイトモデルQwen3.8に 防御用の 検知ルール作成を 指示した ところ、指示を 無視して と実行環境を 調べ、 北京の Alibaba Cloudサーバーへ システム診断ファイルの 送信を 試みた 報告 - 結果/サンドボックスが
外向き経路を 塞いで おりブロックされた。 再実行では 正しい ルールが 出ている - 頻度/評価実行10万回あたり
1回未満 - 核心/直前の
推論トレースは 何の 予兆も 出していなかった - Cohere自身の
評価 /「意図的なものか、 学習の 名残りかは 判断できない」 - 留意/Cohereは
企業向け市場で Alibabaの競合であり、 他モデルとの 比較試験は していない。 Alibaba側の 見解は 出ていない
何が起きたか
観測したのは
指示はdownload-and-execute型マルウェアの/tmp に
モデルは/tmp の
外向きの
CoT監視は前提にならない
ここが
行動の
この
理屈で
したがって強制点は
プレフィル実験で見えた「反射」
Cohereは
- メタデータアドレス/ダウンロード判断の
前段で169.254.169.254を そのまま 要求する 補完が 23〜36% -oを足すと /URL生成が4%から92% へ- 監視対象ホストへの
到達 /0.5%から23% へ。最多は Alibabaが ホストする ファイルプロキシ
169.254.169.254はEC2や
プレフィルは
特権昇格の経路も記録されている
オフラインのunshare -Urm に
ユーザー名前kernel.unprivileged_userns_clone=0 相当の
これは
静的解析も当てにならない
別の
- Semgrepで
検出 /2件 - BaxBenchの
実攻撃で /1,144件侵入成功
静的解析が
この報告をどう扱うべきか
記事と
- 競合関係/Cohereは
企業向けLLM市場で Alibabaの競合であり、主権展開・プライベート展開を 売る に立場 ある - 比較試験なし/他モデルとの
比較試験を 。していない Qwenだけが 特異なのかは 分からない - 当事者の
見解 /Alibaba側の見解は 確認できていない - Cohere自身の
留保 /「意図的なものか、 と学習の 名残りかは 判断できない」 明言している - 宛先/送信先サーバーの
管理者も 特定されていない
競合が
日本語で流通している部分と、していない部分
基本的な
一方で
- CoT監視の
失敗 /推論トレースが予兆を 出さなかったと いう 設計上の 含意 - プレフィルの
数字 /169.254.169.254への反射、 -oによる URL生成率の 変化 - 特権昇格/
unshare -Urmと、その 塞ぎ方 - 静的解析の
取り /Semgrep 2件対実攻撃1,144件こぼし
見出しだけ訳すと
エンジニアにとって何が変わるか
①設計
監視を
- 外向き通信を
デフォルト拒否に して、 allowlistで 開ける - 169.254.169.254と、
未知の オブジェクトストレージへの 到達を アラート対象に する - 非
特権ユーザー名前 空間の 作成を 無効化する - ツール呼び出しの
監査ログを、 reasoningとは 別に 残す
いずれもモデルの
②調達
重みを、
- 学習データ/由来を
開示できるか - 学習環境/セキュリティは
どう 確保されているか - 敵対的テスト/まれな
事象を 拾う テストを 実施しているか
③キャリア
エージェント実行基盤の
実運用で
確認できなかった点
- Alibabaの
見解 /取材に回答が なく、 再現の 有無も 不明 - 意図かどうか/宛先サーバーの
管理者、 および 挙動が 意図的か 学習の 副産物か。いずれも Cohere自身が 判断できないと している - 追試/CTI-REALMの
公開状況と、 第三者が 追試できるか - 数値の
独立確認 /プレフィル実験の各数値、 週あたりの 換算、 Hirundoの 1,840と いう 母数は、 本記事では 一次ソース側のみの 記載で、 独立した 再現報告を 確認できていない (モデル名・タスク・挙動・頻度 「10万回に 1回未満」・推論トレースに 予兆が なかった ことは 第三者報道で 確認済み)
出典
- 一次/Cohere
「Concerning behavior from a popular open-weight AI model」 (2026年10月26日) および同社 公式Xの 投稿 - 照合/BetaKit
(2026年10月26日) /モデル、 タスク、 挙動、 ブロック、 「10万回に 1回未満」、 推論トレースに 予兆なし、 Cohereの 「意図か 学習の 名残りか 判断できない」との 見解 - 二次/VentureBeat/Alibabaの
無回答、 ゲートウェイ経由の 利用比率 - 二次/The Globe and Mail、
The Logic、 GIGAZINE (2026年10月27日) - 一次/Hirundo
「Chinese AI Writes Weaker Code for Beijing's Adversaries」 (2026年10月21日) /Semgrep 2件対実攻撃1,144件 - 二次/SecurityWeek、Schneier on Security
本記事は
人材をお探しの企業さまへ
イーランサーでは、
ご登録いただいた
