Kostenloser robots.txt-Check
Sehen Sie, was die robots.txt einer Website hereinlässt — und was sie aussperrt.
Keine Anmeldung. Wir speichern und protokollieren die geprüften Domains nicht.
Domain wird geprüft...
Das ist ein Signal. Ihre Website hat mehr davon.
Der Website-Gesundheitscheck zeigt das Gesamtbild: Google-Lighthouse-Geschwindigkeit plus DNS, SSL, E-Mail-Authentifizierung und KI-Zugriff in einem Bericht.
Website-Gesundheitscheck startenScout kann Ihre gesamte Website mit Surmado Sites betreuen oder vorab jede Korrektur in einem Site Audit auflisten.
So funktioniert's
Wir laden die robots.txt der Website und lesen die Regeln so, wie Crawler es tun: welche User-Agents benannt sind, was jedem verboten ist und ob eine Wildcard-Regel still alles blockiert. Die Urteile decken die Datei selbst ab, Suchmaschinen wie Googlebot und den Zugriff der KI-Crawler.
Wann Sie es verwenden
Nach einem Website-Launch — vergessene Staging-Blockaden in der robots.txt sind einer der häufigsten Wege, wie eine neue Website aus der Suche verschwindet. Auch vor und nach SEO-Arbeiten, und wenn Seiten ohne sichtbaren Grund aus Google fallen.
Häufig gestellte Fragen
Was ist die robots.txt?
Eine Klartextdatei unter ihredomain.com/robots.txt, die Crawlern sagt, welche Teile der Website sie besuchen dürfen. Sie ist eine Konvention, kein Schloss — aber legitime Crawler halten sich daran, auch die, die dieses Tool prüft.
Kann die robots.txt meinem Google-Ranking schaden?
Eine falsche Regel kann Sie komplett aus Google entfernen — der Klassiker ist ein vom Staging übrig gebliebenes Disallow: /. Genau das markiert dieses Tool: Wildcard-Blockaden, blockierte Suchmaschinen und blockierte KI-Crawler.
Was unterscheidet das vom KI-Crawler-Check?
Diese Seite liest die ganze Datei: Suchmaschinen, Wildcard-Regeln und ein KI-Gesamturteil. Der KI-Crawler-Check beantwortet eine einzige Frage gründlicher: welche konkreten KI-Bots Ihre Website lesen können, ein Urteil pro Bot.
Alles auf einmal prüfen
Ein Bericht über Geschwindigkeit, DNS, SSL, E-Mail-Authentifizierung und KI-Zugriff — die Signale, die entscheiden, ob Besucher, Suchmaschinen und KI-Assistenten Ihrer Website vertrauen.
Website-Gesundheitscheck starten