# robots.txt für letsrockit.ch – WordPress + KI-Crawler # --- Standard: alles indexierbar, nur Admin aussperren --- User-agent: * Disallow: /wp-admin/ Allow: /wp-admin/admin-ajax.php Disallow: /wp-login.php Disallow: /?s=* # Suchseiten Disallow: /search/ # ggf. Such-URL Disallow: /trackback/ Disallow: /feed/ Disallow: /*?replytocom=* # alte Kommentar-Parameter # Sicherheits-Hinweis: Users-Endpoint sperren, Rest offen lassen Disallow: /wp-json/wp/v2/users/ Allow: /wp-json/ # Mediathek/Assets explizit erlauben (SEO/Bild-Indexierung) Allow: /wp-content/uploads/ # --- KI-/LLM-Crawler ausdrücklich erlauben --- User-agent: GPTBot Allow: / User-agent: Google-Extended Allow: / User-agent: PerplexityBot Allow: / User-agent: CCBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / # --- Sitemap-Hinweise --- Sitemap: https://letsrockit.ch/sitemap_index.xml