Claudeに引用される書き方｜3種クローラーの設定と整え方【図解】

「うちのサイト、Claudeにきちんとクロールされているんだろうか」。robots.txtを開いて確認しようとしたものの、見慣れないクローラー名がいくつも並んでいて、どれが何のためのものか分からなくなった。そんな状態でこの記事にたどり着いた方が多いのではないかと思います。

対話AI「Claude」を開発するAnthropicは、クローラーの仕様とrobots.txtでの制御方法を、公式ヘルプで公開しています。2026年4月にも更新されました。一方で、Claudeがどのページを引用として選ぶかという基準そのものは、公式には明らかにされていません。

この記事は、公式に確認できる事実と、一般的なAIO原則（AI検索最適化・LLMOとも呼ばれます）からの推定を、はっきり分けて整理することを目指して書きました。「ここまでは公式情報、ここから先はまだ分かっていない」という境界線を、図解と会話で一緒に確認していきましょう。

この記事でも、ある会社のマーケティング部の2人と、専門家の会話をはさみながら進めます。

• 若葉さん（Web担当2年目）— 「そもそも、それって何ですか？」を聞く役
• 高梨課長（マーケ課長）— 「実際どう設定すればいいんですか？」を聞く役
• 鈴木さん（AIO/SEOの専門家・本誌監修）— 答える役

01そもそもClaudeは、AI検索対策の前提としてどうやってサイトの情報を取りに来るんですか？

若葉さん

若葉さんの発言

robots.txtを見ていたら、聞いたことのないクローラー名がいくつも並んでいて……。Claude関連のクローラーって、そんなに種類があるんですか？

鈴木さん

鈴木さんの発言

はい、Claude関連のクローラーは3種類あります。それぞれ役割がちがうので、まず整理しておきましょう。

Anthropicが公式ヘルプで明示している事実は、主に4点あります。1つ目が、このクローラーの種類分けです。Claude関連クローラーは3種類あり、目的ごとにrobots.txtで個別に制御できます（2026年4月7日更新の公式記事で確認できます）。

02Claudeのクローラーが3種類に分かれているのは、AI検索最適化で何の役に立つんですか？

3種類に分けている理由についてAnthropicは、サイト運営者が用途ごとに選択できるようにするためと説明しています。たとえば「モデルの学習には使ってほしくないが、Claude内の検索での見え方は維持したい」といった判断が、クローラーごとに可能になる、ということです。

03質問からClaudeが引用付きの回答を返すまで、AI検索の中で何が起きているんですか？

高梨課長

高梨課長の発言

3種類あるのは分かりました。それで、実際にユーザーが質問してから、出典付きの回答が返ってくるまで、中でどう動いているんでしょうか。

鈴木さん

鈴木さんの発言

公式に確認できる範囲で図にすると、こういう流れになります。

3つ目に公式が明示しているのが、Web検索機能の引用形式です。公式ヘルプは、検索結果を使った回答に出典リンクと引用文を添えると説明しています。

流れを順番に見ると、次のようになります。

1. 質問が届く — ユーザーがClaudeに質問を入力します。
2. 情報を集める — Web検索ツールが複数のソースを検索するか、Claude-Userが指定されたURLを取得します。
3. 関連する一文を抽出する — 集めた情報の中から、回答に必要な部分を取り出します。
4. 出典リンク付きで提示する — 根拠にしたページへのリンクと引用文を添えて、回答を返します。

この流れと並行して、ClaudeBot（学習データ収集）とClaude-SearchBot（Claude内検索の品質向上）が、それぞれ別の目的でサイトを巡回しています。この2つは、ユーザーの質問への即時の回答には直接関わらない、いわば下準備の巡回です。

04Claudeのrobots.txtでは、AI検索対策として学習と検索をどう書き分けるんですか？

高梨課長

高梨課長の発言

では、うちのrobots.txtで、実際にはどこを見ればいいでしょうか。設定を間違えて、逆に不利になることはありませんか。

鈴木さん

鈴木さんの発言

2つ目の事実がここに関わってきます。いずれのクローラーもrobots.txtに従うので、Disallow: /で個別にブロックできるんです。

2つ目にAnthropicが明示しているのが、この点です。ClaudeBot・Claude-User・Claude-SearchBotは、いずれもrobots.txtのルールに従います。Disallow: /と書けば、User-agentごとに個別のブロックが可能です。

たとえば「モデルの学習データ収集は拒否したいが、Claude内検索の巡回は許可したい」という場合は、次のように書き分けられます。

# モデル学習用クローラーは拒否
User-agent: ClaudeBot
Disallow: /

# Claude内検索の巡回は許可
User-agent: Claude-SearchBot
Allow: /

05Claudeの引用を残す書き方は、AIOのrobots.txtチェックでどこを見ればいいんですか？

06Web検索の引用と、Citations APIって、同じ仕組みなんですか？（LLMOでの注意）

若葉さん

若葉さんの発言

さっき出てきた「出典リンクと引用文」って、Citations APIっていう別の機能の話と、同じ仕組みなんでしょうか。ちょっと混同してしまって……。

鈴木さん

鈴木さんの発言

いい質問です。実はそこ、公式には同じ仕組みとは説明されていません。整理しておきましょう。

引用の仕組みを技術的に裏づける機能として、開発者向けに提供されているのがCitations APIです（2025年に公式発表されました）。文書引用を自動生成する機能で、公式ドキュメントは、プレーンテキストやPDFを「文単位」で分割し、その文または連なりを引用の最小単位にすると説明しています。

07Citations APIの仕組みを、AI検索でのClaudeの引用の書き方に当てはめていいんですか？

Citations APIの技術仕様は、API利用者が文書をClaudeに渡す場面のものであり、Web検索での引用選定と直接同じ仕組みだとは、公式に説明されていません。両者は「一文単位で引用する」という発想は共通していますが、別の機能として案内されています。

また、Web検索機能を支える検索エンジンについても、公式ヘルプに明記はありません。サブプロセッサー一覧への掲載などを根拠に「Brave Searchを使っている」と報じられていますが、公式発表ではないため、断定はできません。

08Claudeの引用を意識した書き方は、AI検索最適化の実務で何から手をつけますか？

高梨課長

高梨課長の発言

仕組みは分かってきました。それで、うちの体制で実際に何から着手すればいいでしょうか。

鈴木さん

鈴木さんの発言

影響を受けるのは、クロール制御と発信文章に関わる担当者です。急ぎの期限はありませんが、次の3点から着手するのをおすすめします。

ここで挙げる3つは、いずれも大掛かりなAI対策ではありません。既存の運用に少し手を加えるだけで着手できます。

3つ目の「文章を一文単位で自己完結させる」について、補足します。Citations APIの仕組みを踏まえると、指示語に頼らず要点を1文で言い切る書き方が、機械的な引用処理と相性がよいと考えられます。ただしこれはWEBMARKSによる推定であり、Claude固有の効果を検証した結果ではありません。

09Claudeの引用について、公式に確認できることと、まだ確認できていないことは何ですか？（AI対策の線引き）

若葉さん

若葉さんの発言

ここまでの話、公式の話と、そうでない話が混ざっていた気がして……。もう一度、整理してもらえますか。

鈴木さん

鈴木さんの発言

大事な視点です。「確認できること」と「まだ確認できていないこと」を分けて理解する姿勢が、遠回りを防ぎます。

WEBMARKSは、Claude固有の「引用されるコツ」を追うより、公式に確認できる土台を固めることを優先しています。AIO診断（aio-scan）やAIOレポートの運用では、実務上のボトルネックを数多く確認してきましたが、Claude向けの引用率そのものを検証したデータは、現時点で保有していません。そのため、この記事の推奨は、一般的なAIO原則の適用にとどめています。

10よくある質問

11まとめ｜今日やる3つのこと

Claudeの引用選定基準そのものは、公式には非公開です。ただし、クローラーの種類とrobots.txtでの制御方法は、公式ヘルプで明確に説明されています。まずはこの土台を確認することが、遠回りに見えて一番早い一歩です。