Kostenloser KI-Crawler-Check
Sehen Sie, welche KI-Bots Ihre Website lesen können — und welche Ihre robots.txt abweist.
Keine Anmeldung. Wir speichern und protokollieren die geprüften Domains nicht.
Domain wird geprüft...
Das ist ein Signal. Ihre Website hat mehr davon.
Der Website-Gesundheitscheck zeigt das Gesamtbild: Google-Lighthouse-Geschwindigkeit plus DNS, SSL, E-Mail-Authentifizierung und KI-Zugriff in einem Bericht.
Website-Gesundheitscheck startenSo funktioniert's
Geben Sie eine Domain ein: Wir laden ihre robots.txt und lesen sie so, wie es jeder KI-Crawler tut — ein Bot mit eigener User-Agent-Regel folgt dieser Regel, einer ohne fällt unter die Wildcard. Sie erhalten ein Urteil pro Bot — OAI-SearchBot, Claude-SearchBot, PerplexityBot, GPTBot, ClaudeBot, Google-Extended und Bytespider — wobei Suchcrawler, die in Live-Antworten Quellen zitieren, von Trainings-Crawlern getrennt sind.
Wann Sie es verwenden
Nach jeder Änderung an der robots.txt, nach einer Migration oder einem Relaunch, oder wenn KI-Assistenten über Ihr Unternehmen verstummt zu sein scheinen. Einen Suchcrawler zu blockieren entfernt Sie aus KI-Antworten, ohne dass auf Ihrer Seite je eine Fehlermeldung erscheint — ein Check lohnt sich also immer, wenn Sichtbarkeit zählt.
Häufig gestellte Fragen
Welche KI-Crawler prüft dieses Tool?
Sieben Bots in zwei Gruppen. Suchcrawler, die Seiten abrufen, um Fragen live zu beantworten und Quellen zu zitieren: OAI-SearchBot (ChatGPT-Suche), Claude-SearchBot und PerplexityBot. Trainings-Crawler, die Seiten für künftige Modelle sammeln: GPTBot, ClaudeBot, Google-Extended und Bytespider.
Sollte ich KI-Crawler auf meiner Website zulassen?
Für die meisten Unternehmen ist das Zulassen der Suchcrawler der klare Gewinn: Über sie zitieren ChatGPT, Claude und Perplexity Sie als Quelle. Trainings-Crawler sind eine echte Abwägung — sie zuzulassen hilft künftigen Modellen, Ihr Unternehmen zu kennen; sie zu blockieren ist eine legitime Haltung zur Nutzung von Inhalten. Dieses Tool zeigt, was Ihre aktuellen Einstellungen tatsächlich sagen.
Stoppt ein Block in der robots.txt einen Crawler wirklich?
Die großen Crawler, die dieses Tool prüft, respektieren die robots.txt. Nutzer-Abruf-Agenten — wie ChatGPT-User, der eine Seite lädt, wenn jemand einen Link einfügt — respektieren sie nicht zuverlässig; deshalb geben wir für sie kein Urteil ab.
Alles auf einmal prüfen
Ein Bericht über Geschwindigkeit, DNS, SSL, E-Mail-Authentifizierung und KI-Zugriff — die Signale, die entscheiden, ob Besucher, Suchmaschinen und KI-Assistenten Ihrer Website vertrauen.
Website-Gesundheitscheck starten