# START YOAST BLOCK
# ---------------------------
User-agent: *
Disallow: /wp-json/
Disallow: /?rest_route=

Sitemap: https://sp-compliance.com/sitemap_index.xml
# ---------------------------
# END YOAST BLOCK

# OpenAI GPTBot erlauben
User-agent: GPTBot
Disallow:

# Google-Extended (z. B. für Bard/Gemini)
User-agent: Google-Extended
Disallow:

# PerplexityBot erlauben
User-agent: PerplexityBot
Disallow:

# Common Crawl erlauben (häufige Quelle für KIs)
User-agent: CCBot
Disallow:

# Anthropic Claude erlauben (nutzt auch CC)
User-agent: ClaudeBot
Disallow: