AI学習は1操作で断れるがMicrosoftの対応は2027年だ

Cloudflare「AI学習の不許可」　検索を残し学習だけ断る

Cloudflareが2026年9月15日に「AI学習の不許可」（Disallow AI Training）という設定を発表しました。全プランの全顧客が追加料金なしで使えます。

背景にあるのは兼用クローラーの問題です。AppleやGoogleなど検索とAI開発の両方を手がける企業は、検索とAI学習を1つのクローラーでまかなっています。サイト運営者がrobots.txtでこのクローラーを拒否すると、AI学習だけでなく検索インデックスからも外れてしまいます。AIに使われたくなくても検索で見つからなくなるリスクを負わされていました。

Cloudflareはクローラー運営各社と直接協議して解決策を作りました。「AI学習の不許可」をオンにすると、Cloudflareがrobots.txtに学習を拒否するルールを自動で書き込みます。対応する兼用クローラーは検索のためにサイトをクロールし続けますがAI学習には使いません。

AppleとGoogleは対応ずみ　Microsoftは2027年だ

兼用クローラーを持つ検索大手3社の対応状況にはばらつきがあります。AppleのApplebotとGoogleのGooglebotはすでにこの仕組みに対応しています。「AI学習の不許可」をオンにすれば検索のクロールは続けつつAI学習には使いません。

一方でMicrosoftのBingbotは2027年初頭までに対応する方針を示しているだけです。具体的な時期は公表されていません。それまでBingの学習を断りたいサイト運営者は、ページのHTMLに「NOARCHIVE」メタタグを入れるなど個別の対応が必要です。Cloudflareの設定だけでは止められません。

3社のうち2社が対応ずみなので今すぐ効果を得られるサイトは多いです。ただしBingについては半年以上待つか別の手を打つかを選ぶことになります。

OpenAIやAnthropicは最初からクローラーを分けている

OpenAI・Anthropic・Meta・Amazonは検索クローラーとAI学習クローラーを最初から分けています。学習用のクローラーだけをrobots.txtでブロックすれば済むので兼用クローラーの課題は発生しません。

兼用クローラーの問題が生じるのはApple・Google・Microsoftの3社だけです。3社は検索エンジンとAI開発の両方を手がけていて1つのクローラーで両方をまかなっています。今回の「AI学習の不許可」はこの3社の兼用クローラーに対して効く仕組みです。

つまりサイト運営者が取る手順は2つに分かれます。AI開発だけの企業のクローラーに対してはrobots.txtで学習用を個別にブロックします。兼用クローラーを持つ3社に対してはCloudflareの設定を使います。すべてのAI学習を断りたいなら両方を設定する必要があります。

Cloudflare管理画面で1つ設定を変えれば始まる

操作はCloudflareの管理画面から「AI学習の不許可」を1つオンにするだけです。robots.txtの書き換えはCloudflareが自動で行います。無料プランを含む全プランで使えるので追加の契約は要りません。

ただしCloudflareを使っていないサイトはこの設定の対象外です。その場合はrobots.txtを手で編集するか、各クローラーのオプトアウト手続きを個別に申請する必要があります。

Cloudflareによると検索順位への影響はありません。サイトのAI学習を制御したい情報システム担当者は、まずCloudflareを使っているかどうかの確認から始めてください。使っていれば管理画面の設定1つで済みます。使っていなければクローラーごとの拒否手順を調べることになります。著作権訴訟や利用規約の変更をきっかけにAI学習への対応を急ぐ企業は増えています。