# robots.txt für ekagger.de

# Standardeinstellungen:
# Alle Bots, die hier nicht explizit genannt sind,
# können die gesamte Website crawlen.
User-agent: *
Allow: /

# Google-Extended: Crawler für Google's KI-Produkte wie Gemini.
# Wird zur Sammlung von Trainingsdaten für generative KI genutzt.
User-agent: Google-Extended
Allow: /

# GPTBot: Crawler von OpenAI zur Verbesserung von Modellen wie GPT-4 und GPT-5.
# Erhöht die Chance auf Zitationen in Antworten von ChatGPT.
User-agent: GPTBot
Allow: /

# ClaudeBot: Crawler von Anthropic zur Sammlung von Trainingsdaten für Claude.
User-agent: ClaudeBot
Allow: /

# PerplexityBot: Crawler für Suchergebnisse bei Perplexity.
User-agent: PerplexityBot
Allow: /

# Perplexity-User: Crawler für nutzerinitiierte Anfragen bei Perplexity.
User-agent: Perplexity-User
Allow: /

User-agent: *
Disallow: /typo3/
Disallow: /typo3conf/
Disallow: /typo3temp/
Disallow: /typo3_src/
Disallow: /typo3conf/ext/
Disallow: /typo3temp/var/
Disallow: /typo3temp/logs/
Disallow: /typo3temp/Cache/
Disallow: /typo3temp/GB/
Disallow: /typo3temp/l10n/
Disallow: /typo3temp/llxml/
Disallow: /typo3temp/pics/
Disallow: /typo3temp/_temp_/
Disallow: /typo3temp/__temp__/
Disallow: /fileadmin/templates/
Disallow: /uploads/
Disallow: /*?id=* # Exclude all URLs with "id" parameter

Allow: /typo3/sysext/frontend/Resources/Public/
Allow: /typo3conf/ext/
Allow: /typo3conf/ext/*/Resources/Public/
Allow: /fileadmin/templates/
Allow: /uploads/
Allow: /*?type=4&tx_powermail_pi1[uid]=* # Allow URLs for specific extensions

Sitemap: https://www.ekagger.de/?type=1533906435