User-agent: *
Disallow: /panel/
Disallow: /media/cache/
Allow: /

# NOT: robots.txt'de her bot YALNIZCA kendi en özel grubunu uygular; aşağıdaki
# isimli gruplar yukarıdaki "*" grubunu miras ALMAZ. Bu yüzden panel/cache
# engelleri her grupta ayrıca tekrarlanır.

# ── AI Eğitim/Tarama Botları: İzinli ──
# Bu botların site içeriğini (ve /llms.txt dosyasını) taramasına izin verilir.
User-agent: GPTBot
Disallow: /panel/
Disallow: /media/cache/
Allow: /

User-agent: ClaudeBot
Disallow: /panel/
Disallow: /media/cache/
Allow: /

User-agent: Google-Extended
Disallow: /panel/
Disallow: /media/cache/
Allow: /

# ── Hâlâ Engelli ──
# Toplu veri toplayan / eski nesil eğitim tarayıcıları.
User-agent: anthropic-ai
Disallow: /

User-agent: CCBot
Disallow: /

# ── AI Cevap/Arama Botları: İzinli ──
# Bu botlar kullanıcıya gerçek zamanlı cevap verirken sitemizi kaynak gösterir
# ve trafik getirir.
User-agent: PerplexityBot
Disallow: /panel/
Disallow: /media/cache/
Allow: /

User-agent: OAI-SearchBot
Disallow: /panel/
Disallow: /media/cache/
Allow: /

User-agent: ChatGPT-User
Disallow: /panel/
Disallow: /media/cache/
Allow: /

User-agent: Claude-User
Disallow: /panel/
Disallow: /media/cache/
Allow: /

Sitemap: https://www.izmirmyrentacar.com/sitemap.xml