# ============================================================
# robots.txt — ASKANIA Carl Bamberg GmbH
# Stand: Juni 2026 — Strategie: "search + cite, no train"
# ============================================================
#
# Content Signals:
#   search:    klassische Indexierung mit Links und kurzen Extrakten.
#   ai-input:  Nutzung in KI-Echtzeit-Antworten (RAG, grounding).
#   ai-train:  Training oder Fine-Tuning von KI-Modellen.
#
# DIE HIER AUSGEDRÜCKTEN EINSCHRÄNKUNGEN SIND AUSDRÜCKLICHE
# RECHTSVORBEHALTE GEMÄSS ARTIKEL 4 DER EU-RICHTLINIE 2019/790
# ÜBER DAS URHEBERRECHT IM DIGITALEN BINNENMARKT.
 
# Globale Signale
User-agent: *
Content-Signal: search=yes, ai-input=yes, ai-train=no
Allow: /
 
# WordPress
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
 
# WooCommerce
Disallow: /wp-content/uploads/wc-logs/
Disallow: /wp-content/uploads/woocommerce_transient_files/
Disallow: /wp-content/uploads/woocommerce_uploads/
Disallow: /*?add-to-cart=
Disallow: /*?*add-to-cart=
Disallow: /warenkorb/
Disallow: /kasse/
Disallow: /mein-konto/
 
# Training Crawlers — explizit blockiert
User-agent: GPTBot
Disallow: /
User-agent: ClaudeBot
Disallow: /
User-agent: Google-Extended
Disallow: /
User-agent: CCBot
Disallow: /
User-agent: Applebot-Extended
Disallow: /
User-agent: FacebookBot
Disallow: /
User-agent: Meta-ExternalAgent
Disallow: /
User-agent: Amazonbot
Disallow: /
User-agent: cohere-ai
Disallow: /
User-agent: Diffbot
Disallow: /
User-agent: Omgilibot
Disallow: /
User-agent: Omgili
Disallow: /
 
# Crawlers aus Jurisdiktionen ohne DSGVO-Adäquanzbeschluss
User-agent: Bytespider
Disallow: /
User-agent: PetalBot
Disallow: /
User-agent: YandexBot
Disallow: /
 
# Search-/Retrieval-Crawler — ausdrücklich erlaubt
User-agent: Googlebot
Allow: /
User-agent: Bingbot
Allow: /
User-agent: DuckDuckBot
Allow: /
User-agent: Applebot
Allow: /
User-agent: OAI-SearchBot
Allow: /
User-agent: ChatGPT-User
Allow: /
User-agent: Claude-SearchBot
Allow: /
User-agent: Claude-User
Allow: /
User-agent: PerplexityBot
Allow: /
User-agent: Perplexity-User
Allow: /
User-agent: Amzn-SearchBot
Allow: /
User-agent: YouBot
Allow: /
 
# Sitemaps
Sitemap: https://askania.berlin/sitemap_index.xml