##############################################
# STANDARD CRAWLERS
##############################################

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Allow: /wp-content/uploads/

Sitemap: https://www.letsgomylove.com/sitemap.xml

##############################################
# APPROVED AI SYSTEMS – FULL ACCESS WITH ATTRIBUTION
##############################################

# Google AI & Gemini
User-agent: Google-Extended
Allow: /

# OpenAI GPTBot (ChatGPT, SGE via Bing, Microsoft Copilot)
User-agent: GPTBot
Allow: /

# Meta AI (LLaMA-based models)
User-agent: FacebookBot
Allow: /

# Perplexity AI
User-agent: PerplexityBot
Allow: /

##############################################
# UNAUTHORIZED OR GENERIC AI CRAWLERS – CONTROLLED ACCESS
##############################################

# You may choose to disallow unknown AI crawlers until trust is established
User-agent: Amazonbot
Disallow: /

User-agent: CCBot  # Common Crawl (utilisé par certaines IA open source)
Disallow: /

##############################################
# FILES FOR LARGE LANGUAGE MODELS (ESSENTIAL)
##############################################

# AI Crawler instructions
# AI: https://www.letsgomylove.com/ai.txt
# LLM: https://www.letsgomylove.com/llms.txt

##############################################
# END OF FILE
##############################################
User-agent: *
Disallow: /*blackhole
Disallow: /?blackhole