Kostenlos · Keine Anmeldung nötig

KI-Bot-Zugriff prüfen

Damit KI-Assistenten Ihre Website lesen und in Antworten empfehlen können, müssen Sie deren Crawler zulassen. Sehen Sie die Berechtigungen von 14 KI-Crawlern mit einem Klick.

Warum wichtig?

Assistenten wie ChatGPT, Claude und Perplexity lesen das Web mit eigenen Crawlern, wenn sie antworten. Blockiert Ihre robots.txt diese Crawler, kann Ihre Website in den Antworten nicht als Quelle genannt werden.

Manche Crawler dienen nur dem Modelltraining (z. B. GPTBot, Google-Extended), andere der Live-Suche und Nutzeranfragen (OAI-SearchBot, ChatGPT-User, PerplexityBot). Trainings-Bots zu blockieren und Such-Bots zuzulassen, ist eine verbreitete und ausgewogene Wahl.

Zugriffsstatus jedes KI-Crawlers in der robots.txt
Unterscheidung zwischen Such-, Nutzeranfrage- und Trainings-Bots
Vorhandensein und Größe der llms.txt-Datei
noai-/noimageai- und X-Robots-Tag-Angaben auf der Seite

Häufig gestellte Fragen

Was ist llms.txt?

llms.txt ist ein vorgeschlagenes Dateiformat, das die wichtigsten Seiten Ihrer Website und eine kurze Zusammenfassung in einer einfachen, für KI-Modelle lesbaren Form auflistet. Mit unserem kostenlosen llms.txt-Generator erstellen Sie sie in Sekunden.

Wirkt sich das Blockieren von KI-Bots auf SEO aus?

Solange Sie den Googlebot nicht blockieren, bleibt Ihr Google-Ranking unberührt. Das Blockieren von KI-Such-Bots verringert jedoch die Chance, dass Ihre Website in Antworten von ChatGPT oder Perplexity als Quelle genannt wird.

Warum erscheint Google-Extended nicht als Besucher?

Google-Extended und Applebot-Extended sind robots.txt-Tokens; gecrawlt wird die Website vom normalen Googlebot bzw. Applebot. Diese Tokens erlauben oder blockieren lediglich die Nutzung der Inhalte in KI-Modellen.

Weitere kostenlose Tools

KI-SichtbarkeitscheckEmpfehlen ChatGPT und Perplexity Sie?Beliebt KI-BereitschaftstestKI-Bereitschaft Ihrer Website in 10 Fragen llms.txt-GeneratorFassen Sie Ihre Website für KI-Assistenten zusammen Wie sieht KI Ihre Seite?Textansicht ohne JavaScript und KI-Zugriff SEO-AnalyseÜber 80 Prüfungen, Kategorie-Scores und priorisierte EmpfehlungenBeliebt SEO-Website-AuditTechnische und OnPage-Prüfung für bis zu 15 SeitenBeliebt

Alle kostenlosen Tools

Sehen Sie in 20 Sekunden, wo Ihre Website steht.

Erfahren Sie mit der kostenlosen Analyse Ihre technischen Probleme und Lücken bei der KI-Sichtbarkeit; die Behebung übernimmt dann AutoAiSeo.

Keine Karte nötig
Einrichtung in 5 Minuten
Jederzeit kündbar