# robots.txt — ton.com.br
# Atualizado em: março de 2026
# Objetivo: permitir acesso de todos os principais crawlers de IA

# ───────────────────────────────────────────
# REGRA GERAL — todos os bots
# ───────────────────────────────────────────
User-agent: *
Allow: /

# ───────────────────────────────────────────
# OPENAI (ChatGPT)
# ───────────────────────────────────────────
User-agent: GPTBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: ChatGPT-User/2.0
Allow: /

User-agent: OAI-SearchBot
Allow: /

# ───────────────────────────────────────────
# ANTHROPIC (Claude)
# ───────────────────────────────────────────
User-agent: ClaudeBot
Allow: /

User-agent: Claude-Web
Allow: /

User-agent: anthropic-ai
Allow: /

User-agent: Claude-User
Allow: /

User-agent: Claude-SearchBot
Allow: /

# ───────────────────────────────────────────
# GOOGLE (Gemini / AI Overviews)
# ───────────────────────────────────────────
User-agent: Googlebot
Allow: /

User-agent: Google-Extended
Allow: /

User-agent: GoogleAgent-Mariner
Allow: /

User-agent: Gemini-Deep-Research
Allow: /

User-agent: GoogleOther
Allow: /

# ───────────────────────────────────────────
# MICROSOFT (Bing / Copilot)
# ───────────────────────────────────────────
User-agent: Bingbot
Allow: /

User-agent: msnbot
Allow: /

# ───────────────────────────────────────────
# PERPLEXITY
# ───────────────────────────────────────────
User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

# ───────────────────────────────────────────
# META (Llama / Meta AI)
# ───────────────────────────────────────────
User-agent: FacebookBot
Allow: /

User-agent: meta-externalagent
Allow: /

User-agent: meta-externalfetcher
Allow: /

# ───────────────────────────────────────────
# APPLE (Siri / Apple Intelligence)
# ───────────────────────────────────────────
User-agent: Applebot
Allow: /

User-agent: Applebot-Extended
Allow: /

# ───────────────────────────────────────────
# AMAZON (Alexa / AWS AI)
# ───────────────────────────────────────────
User-agent: Amazonbot
Allow: /

# ───────────────────────────────────────────
# YOU.COM
# ───────────────────────────────────────────
User-agent: YouBot
Allow: /

# ───────────────────────────────────────────
# DUCKDUCKGO (DuckAssist)
# ───────────────────────────────────────────
User-agent: DuckAssistBot
Allow: /

# ───────────────────────────────────────────
# COHERE
# ───────────────────────────────────────────
User-agent: cohere-ai
Allow: /

# ───────────────────────────────────────────
# BYTEDANCE (Doubao / TikTok AI)
# ───────────────────────────────────────────
User-agent: Bytespider
Allow: /

# ───────────────────────────────────────────
# COMMON CRAWL (base de dados open source de IA)
# ───────────────────────────────────────────
User-agent: CCBot
Allow: /

# ───────────────────────────────────────────
# LINKEDIN
# ───────────────────────────────────────────
User-agent: LinkedInBot
Allow: /

# ───────────────────────────────────────────
# CLOUDFLARE AI (AutoRAG)
# ───────────────────────────────────────────
User-agent: Cloudflare-AutoRAG
Allow: /

# ───────────────────────────────────────────
# MANUS AI
# ───────────────────────────────────────────
User-agent: Manus-User
Allow: /

# ───────────────────────────────────────────
# BLOQUEIOS ESPECÍFICOS
# ───────────────────────────────────────────
User-agent: *
Disallow: /checkout/cart

# ───────────────────────────────────────────
# SITEMAP
# ───────────────────────────────────────────
Sitemap: https://www.ton.com.br/sitemap.xml