Robots.txt-Prüfer
Laden Sie die robots.txt jeder Website und validieren Sie jede Regel: blockierte Seiten, widersprüchliche Direktiven, kaputte Sitemap-Verweise und Crawl-Budget-Fehler.
So funktioniert es
Wir lesen die Datei, parsen die Regeln und übersetzen sie in Klartext.
Domain oder URL eingeben
Fügen Sie eine beliebige Website ein, um ihre robots.txt automatisch zu laden.
Regeln werden validiert
Jede Direktive wird gegen das Robots-Exclusion-Protokoll geprüft.
Ergebnisse prüfen
Sehen Sie blockierte Seiten, Konflikte und Sitemap-Verweise in Klartext.
Was wir prüfen
Jede Direktive, die bestimmt, was Google crawlen kann und was nicht.
Regel-Validierung
Prüft Syntax von User-agent-, Disallow-, Allow- und Sitemap-Direktiven.
Blockierte-Seiten-Erkennung
Zeigt, welche Seiten Ihrer Website vor Suchmaschinen verborgen werden.
Direktiven-Konflikte
Kennzeichnet widersprüchliche Allow- und Disallow-Regeln, die unerwartetes Verhalten erzeugen.
Sitemap-Verweis-Prüfung
Prüft, ob die Sitemap-Direktive auf eine vorhandene, gültige XML-Sitemap zeigt.
Crawl-Budget-Einblick
Erklärt, wie Ihre Regeln Googles Crawl-Budget lenken (oder verschwenden).
Klartext-Ausgabe
Übersetzt die robots.txt-Syntax in das, was sie für Ihre Website tatsächlich bedeutet.
Wer nutzt den Robots.txt-Prüfer
Seitenbetreiber, die wissen müssen, dass nichts Wichtiges blockiert ist.
Häufig gestellte Fragen
Blockiert robots.txt Ihre Seiten?
Eine falsche Regel kann Ihre besten Inhalte vor Google verstecken. Prüfen Sie die Datei in Sekunden.
Robots.txt jetzt prüfen