分析官がAIチャットに2回聞いただけで核の偽情報ができた
2026年春のことだ。イランとの戦争下にあった米軍で特殊作戦部隊の分析官がAIチャットボットを使った。オープンソース情報と機密の通信傍受データを統合するよう指示したところAIは中国の船の貨物台帳を誤読し「核兵器の部品を運搬している」という偽の分析結果を返した。実際にはそのような貨物は積まれていない。
分析官はAIの出力を検証していない。同じAIツールをもう1回使い誤った内容を公式報告書の書式に整えた。体裁の整った報告書は各部隊の指揮系統に回覧される。AIが生み出した誤りをAI自身が見栄えよく仕上げる構造だ。原典にあたる工程は1度も挟まれていない。たった2回のAI利用で偽の情報が組織の判断材料に化けた。

- 2026年春米特殊作戦部隊の分析官がAIに2回質問し偽情報が生成される
- 2026年春武装した軍用機が離陸後に幻覚と判明し作戦を中止
- 9/18CNNが事案を報じ米軍のAI運用リスクが表面化
軍用機が離陸した後に嘘が発覚し攻撃は直前で止まった
報告書の回覧を受けて武装した軍用機が離陸する。中国の船に対する攻撃作戦が動き始めた段階で別の担当者が元の情報源を確認しAIの出力が幻覚(ハルシネーション)だと判明した。作戦は直前で中止される。CNNが9月18日に報じた。中国との軍事衝突がAIチャットボットの1回の誤りから始まりかけたことになる。
米国防総省はAIを「意思決定を加速し中国に対する優位を保つ鍵」と位置づけてきた。AIが情報処理を速めるほど指揮官は短い時間で判断を迫られる。速さが強みであると同時に誤りを検証なしで上層へ運ぶ経路にもなる。GovAIの研究者ジェイク・ステックラー氏は「武力行使につながる判断ではLLMの不確実性を理解することが特に重要だ」と述べている。

「AIの答えをAIで整形して出す」は日本の職場でも起きている
今回の失敗構造は「AIに質問→AIで整形→そのまま提出」の3段階だ。軍に限った話ではない。日本の企業でもChatGPTで調べた内容をそのままChatGPTでレポートに仕上げて上司に出すケースがある。途中で元の資料にあたる工程を入れていなければ誤りはそのまま通る。
報告書を読む側も体裁が整っている分だけ疑いを持ちにくい。フォーマットが公式らしいだけで信頼の代わりになってしまう。社内の議事録なら訂正で済むが取引先への提案書や報道資料で同じ構造が起きれば信用問題になる。AIの出力を人が裏取りする手順を省くほど今回の米軍と同じリスクを負う。
AIの出力は原典と突き合わせるまで「仮」として扱う
ステックラー氏は「この事例はAIを避ける理由ではなく安全策を足す理由だ」とも述べた。導入速度を優先しすぎると現場がAIを信用しなくなり普及がかえって遅れるという逆効果も警告している。
対策の基本は単純だ。AIの出力は原典と突き合わせるまで「仮」の扱いにする。報告書に使うなら情報源のリンクか資料名を必ず併記し別の人が確認できる状態にしておく。出力に含まれる固有名詞や数字を元の資料と照らし合わせるだけでよい。1人で完結させず第三者の目を1回通すだけで今回のような連鎖は断ち切れる。確認という1手間が攻撃を止めた事実がその効果を証明している。
- ハルシネーション
- AIが事実にない情報をもっともらしく出力すること。幻覚と訳される。学習データにない組み合わせを生成したり質問の文脈を誤読して架空の事実を作り出す現象を指す
今回の事例は「AIが間違えた」ではなく「AIの間違いを人が素通りした」問題だ。質問も整形も同じAIで済ませ原典にあたる工程がなかった。日本の職場でも同じ流れは起きうる。AIの出力に情報源を添え別の人が確認する手順を1つ挟むだけで連鎖は断ち切れる。導入を急ぐほど検証が抜けやすいという警告は日本の企業にもそのまま当てはまる。
- AIのハルシネーションはどうすれば見抜けるか
- 出力に含まれる固有名詞や数字を元の情報源と突き合わせるのが基本だ。AIが参照先を示さない場合は自分で検索して裏を取る。複数のAIに同じ質問をして答えが食い違えば幻覚の可能性がある。重要な判断に使うなら人が原典を確認する工程を必ず残す。
- 米軍はこの事件のあとAIの利用をやめるのか
- やめない方向だ。GovAI研究者のステックラー氏は「安全策を足す理由であってAIを避ける理由ではない」と述べている。導入速度を優先しすぎると逆に現場の信頼を失い普及が遅れるという指摘もある。武力行使につながる判断では人の確認を挟む運用が求められている。
この記事の出典
補助資料
- [1]TechCrunchこの記事の元にした報道
出典の最終確認日:2026年9月19日
