# —————————————————————————————— # Standard web crawlers # —————————————————————————————— User-agent: * Allow: / # —————————————————————————————— # AI training crawlers (allow) # —————————————————————————————— User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: PerplexityBot Allow: / User-agent: GoogleOther Allow: / # —————————————————————————————— # AI bot rules (RFC 9309 compliance) # —————————————————————————————— User-agent: AI2Bot Allow: / User-agent: Omgilibot Allow: / # —————————————————————————————— # Sitemap location # —————————————————————————————— Sitemap: https://loox.app/sitemap.xml Sitemap: https://loox.app/sitemap.xml