# robots.txt - BaremCars Web Sitesi Tarama Kuralları
# ====================================================
# Web Sitesi: https://www.baremcars.com


# YASAL UYARI
# Bu kısıtlamalar, AB Telif Hakkı Direktifi 2019/790 Madde 4 
# kapsamında açık hak saklı tutma bildirimidir.

# ============================================
# GENEL KURAL - Tüm Arama Motorları ve AI Botları
# ============================================
User-agent: *

# İZİN VERİLEN SAYFALAR (Özel olarak taranabilir)
Allow: /araclar.html
Allow: /blog.html
Allow: /

# CSS, JS ve Görsel dosyaların taranmasına izin ver
Allow: /*.css
Allow: /*.js
Allow: /*.jpg
Allow: /*.jpeg
Allow: /*.png
Allow: /*.gif
Allow: /*.webp

# ENGELLENEN DİZİNLER (Crawl budget + güvenlik)
Disallow: /bpanel/
Disallow: /inc/
Disallow: /cache/
Disallow: /cron/
Disallow: /vendor/
Disallow: /404/
Disallow: /img-offer/
Disallow: /ronay/


# Amazon AI Bot
User-agent: Amazonbot
Allow: /

# Apple AI Bot (Genişletilmiş)
User-agent: Applebot-Extended
Allow: /

# ByteDance AI Bot (TikTok)
User-agent: Bytespider
Allow: /

# Common Crawl AI Bot
User-agent: CCBot
Allow: /

# Anthropic Claude AI Bot
User-agent: ClaudeBot
Allow: /araclar.html
Allow: /blog.html
Allow: /

# Google AI Eğitim Botu
User-agent: Google-Extended
Allow: /

# OpenAI GPT Bot
User-agent: GPTBot
Allow: /araclar.html
Allow: /blog.html
Allow: /

# Meta AI Bot (Facebook)
User-agent: meta-externalagent
Allow: /

# ============================================
# ARAMA MOTORLARI - Tam Erişim İzni
# ============================================

# Google Arama Botu
User-agent: Googlebot
Allow: /

# Bing Arama Botu
User-agent: Bingbot
Allow: /

# Yandex Arama Botu
User-agent: Yandex
Allow: /

# ============================================
# SİTE HARİTASI (Sitemap)
# ============================================
Sitemap: https://www.baremcars.com/sitemap.xml

# Son Güncelleme: 2026 Ocak