robots.txt Checker
Prüfe ob deine robots.txt KI-Crawler wie ChatGPT, Claude und Perplexity erlaubt.
Gib die URL deiner Website ein. Wir prüfen automatisch /robots.txt
⏰ Tageslimit erreicht
Du hast deine 3 kostenlosen Checks für heute verbraucht. Morgen kannst du wieder prüfen – oder sichere dir jetzt unbegrenzten Zugang.
🚀 Auf die WartelisteAnalysiere robots.txt...
0
Wird berechnet...
🤖 KI-Crawler Status
📋 Analyse-Details
📄 robots.txt Inhalt
⚡ Optimierte robots.txt Vorlage
Kopiere diese Vorlage um alle wichtigen KI-Crawler zu erlauben:
# robots.txt - Optimiert für KI-Sichtbarkeit # Generiert von CodeBack.de/robots-txt-checker/ # Alle Crawler erlauben User-agent: * Allow: / # KI-Crawler explizit erlauben User-agent: GPTBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: ClaudeBot Allow: / User-agent: Claude-Web Allow: / User-agent: PerplexityBot Allow: / User-agent: Google-Extended Allow: / User-agent: Amazonbot Allow: / User-agent: CCBot Allow: / # Sitemap Sitemap: https://example.com/sitemap.xml