# robots.txt — AI流入重視版（2026-04-22更新）
# 方針:
# - 人間向け検索・参照流入はできるだけ残す
# - AI学習用クローラーは止める
# - 人間がAIに調べさせる（ユーザー起点）は許容
# - 学習と検索を分離できない/不明瞭な相手は保守的にブロック

# ========== OpenAI ==========
# 学習は拒否
User-agent: GPTBot
Disallow: /

# ChatGPT検索用は許可（検索流入確保）
User-agent: OAI-SearchBot
Allow: /

# ユーザー起点のアクセスは許可
User-agent: ChatGPT-User
Allow: /

# ========== Google ==========
# Google検索は通常どおり、生成AI学習のみ拒否
User-agent: Google-Extended
Disallow: /

# ========== Apple ==========
# Apple検索は許可、生成AI学習のみ拒否
User-agent: Applebot-Extended
Disallow: /

# ========== Anthropic (Claude) ==========
# AI学習は拒否
User-agent: ClaudeBot
Disallow: /

# ユーザーがClaudeで調べるときのフェッチは許可
User-agent: Claude-User
Allow: /

# Claude検索インデックス用は許可（検索流入確保）
User-agent: Claude-SearchBot
Allow: /

# ========== Common Crawl ==========
# 学習データセットに使われやすいため拒否
User-agent: CCBot
Disallow: /

# ========== Perplexity ==========
# 学習と検索の分離が不透明なため保守的に拒否
User-agent: PerplexityBot
Disallow: /

# ========== Amazon ==========
# 学習・収集系リスクを見て保守的に拒否
User-agent: Amazonbot
Disallow: /

# ========== Meta ==========
# AI学習・訓練用クローラーを拒否
User-agent: meta-externalagent
Disallow: /

# ========== ByteDance / TikTok ==========
User-agent: Bytespider
Disallow: /

Sitemap: https://www.reimagines.jp/sitemap.xml