Sitemap: https://www.stilpunkte.de/sitemap.xml

# ===============================================
# Folgende Seiten sollen nicht indexiert werden:
# ===============================================

User-agent: *
Disallow: /api/
Disallow: /verwaltung/
Disallow: /webhooks/
Disallow: /app.v2/

# ===============================================
# Explizites Erlauben von ChatBots
# ===============================================
User-agent: GPTBot
User-agent: OAI-SearchBot
User-agent: ClaudeBot
User-agent: Claude-SearchBot
User-agent: PerplexityBot
User-agent: Google-Extended
Allow: /

# ===============================================
# Schließe folgende Spider komplett aus:
# ===============================================

User-agent: WebReaper
User-agent: WebCopier
User-agent: Offline Explorer
User-agent: HTTrack
User-agent: Microsoft.URL.Control
User-agent: EmailCollector
User-agent: penthesilea
Disallow: /