# robots.txt pour https://www.joomil.ch
# Contrôle de l'accès des robots d'indexation (Googlebot, Bingbot, etc.)

# ============================================================================
# Crawlers LLM (GEO/AEO) — accès explicite aux pages publiques + API publique
# ============================================================================
# Optimisation pour citation dans les réponses des LLMs (ChatGPT, Claude,
# Perplexity, Gemini). Allowlist explicite = belt-and-suspenders, complète
# le User-agent: * ci-dessous sans rien y soustraire.

User-agent: GPTBot
Allow: /annonces
Allow: /annonce/
Allow: /annonceur/
Allow: /publier-annonce
Allow: /chaton-a-donner
Allow: /api/classifieds
Allow: /api/categories
Disallow: /member/
Disallow: /checkout/
Disallow: /classifieds-mon-compte
Disallow: /classifieds-mes-annonces
Disallow: /classifieds-messagerie
Disallow: /V4Files/

User-agent: ClaudeBot
Allow: /annonces
Allow: /annonce/
Allow: /annonceur/
Allow: /publier-annonce
Allow: /chaton-a-donner
Allow: /api/classifieds
Allow: /api/categories
Disallow: /member/
Disallow: /checkout/
Disallow: /classifieds-mon-compte
Disallow: /classifieds-mes-annonces
Disallow: /classifieds-messagerie
Disallow: /V4Files/

User-agent: anthropic-ai
Allow: /
Disallow: /member/
Disallow: /checkout/
Disallow: /V4Files/

User-agent: PerplexityBot
Allow: /
Disallow: /member/
Disallow: /checkout/
Disallow: /V4Files/

User-agent: Google-Extended
Allow: /
Disallow: /member/
Disallow: /checkout/
Disallow: /V4Files/

User-agent: Applebot-Extended
Allow: /
Disallow: /member/
Disallow: /checkout/
Disallow: /V4Files/

User-agent: CCBot
Allow: /
Disallow: /member/
Disallow: /checkout/
Disallow: /V4Files/

# ============================================================================
# Tous les autres crawlers (comportement historique)
# ============================================================================

User-agent: *

# Bloquer l'accès au répertoire V4Files dans son ensemble
Disallow: /V4Files/

# Réautoriser explicitement l'accès au sous-dossier /V4Files/pages/
Allow: /V4Files/pages/

# Interdire la page spécifique pageMember.php
Disallow: /V4Files/pages/pageMember.php

# Interdire la page spécifique pageMemberLogin.php
Disallow: /V4Files/pages/pageMemberLogin.php

# Bloquer les endpoints API internes (AJAX, auth, actions)
# Ces endpoints ne sont pas destinés aux robots ni aux agents externes
Disallow: /api/

# Autoriser explicitement l'API publique Joomil (annonces + catégories)
# Ces endpoints sont conçus pour les agents IA et intégrations tierces
Allow: /api/classifieds
Allow: /api/categories

# Bloquer les pages membres et espaces privés
Disallow: /member/
Disallow: /checkout/
Disallow: /classifieds-mon-compte
Disallow: /classifieds-mes-annonces
Disallow: /classifieds-messagerie

# Sitemap pour faciliter l'indexation du site
Sitemap: https://www.joomil.ch/sitemap.xml