# ---------------------------

# Alle regulären Crawler: voller Zugriff

User-agent: *
Disallow:

# KI-Retrieval/Search-Bots explizit erlauben (wichtig für Zitierbarkeit)

User-agent: OAI-SearchBot
Allow: /

User-agent: ChatGPT-User
Allow: /

User-agent: Claude-User
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Perplexity-User
Allow: /

# KI-Training-Bots (optional – nur zulassen, wenn Training gewünscht)

User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

Sitemap: https://mp18.de/sitemap_index.xml

# ---------------------------