User-agent: *
Allow: /
Disallow: /api/
Disallow: /design-system/
Disallow: /*?page=

# === BOTS SEO — ESSENTIELS ===
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

# === BOTS AI — TRAFIC RETOUR (gardés) ===
# PerplexityBot affiche nos résultats dans la recherche AI
User-agent: PerplexityBot
Allow: /

# GoogleOther utilisé pour Google AI Overview / SGE
User-agent: GoogleOther
Allow: /

# === BOTS AI — TRAINING ONLY (bloqués) ===
# Ces bots crawlent 277K pages pour entraîner leurs modèles
# sans aucun lien retour. Chaque crawl = CPU Workers payant.

User-agent: GPTBot
Disallow: /

User-agent: ChatGPT-User
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: Claude-Web
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: Meta-ExternalAgent
Disallow: /

User-agent: Meta-ExternalFetcher
Disallow: /

User-agent: Amazonbot
Disallow: /

User-agent: anthropic-ai
Disallow: /

User-agent: cohere-ai
Disallow: /

User-agent: Applebot-Extended
Disallow: /

User-agent: FacebookBot
Disallow: /

# === CONTENT SIGNALS (draft IETF aipref) ===
# Politique GES PAIR : bloquer training, autoriser search et inference via agents légitimes
Content-Signal: ai-train=no, search=yes, ai-input=yes

Sitemap: https://agenda.direct/sitemap.xml