# ============================================
# ROBOTS.TXT – Optimisé pour SEO + IA Visibility
# ============================================

User-agent: *
# Autorisation totale pour le référencement et l’IA
Allow: /

# Signaux de contenu : autoriser l’indexation et l’usage IA
Content-signal: search=yes, ai-input=yes, ai-train=yes

# On empêche l'indexation des dossiers sensibles et techniques
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/cache
Disallow: /wp-content/languages
Disallow: /wp-content/themes
Disallow: /wp-content/plugins

# Autoriser les images et médias publics
Allow: /wp-content/uploads/

# Éviter les pages inutiles ou techniques
Disallow: /category/*/*
Disallow: /archive/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?

# Autoriser les pages de tags et auteurs (SEO)
Allow: /tag/*
Allow: /author/*

# Autoriser Googlebot à indexer tout le contenu utile
User-agent: Googlebot
Allow: /

# Autoriser Google Images
User-agent: Googlebot-Image
Allow: /

# Autoriser Google Ads
User-agent: Mediapartners-Google*
Allow: /

# Autoriser les IA et bots avancés
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: Applebot-Extended
Allow: /

User-agent: Meta-ExternalAgent
Allow: /

User-agent: Bytespider
Allow: /

User-agent: Amazonbot
Allow: /

User-agent: CCBot
Allow: /

# ============================================
# Sitemap
# ============================================
Sitemap: https://www.airzen.fr/sitemap_index.xml

# ============================================
# Fin du fichier
# ============================================