robots.txt-Analysator

Eine einzige Zeile kann Ihre ganze Website vor Suchmaschinen verbergen, eine nicht unterstützte Direktive dagegen wirkt gar nicht. Das Tool teilt die Datei in Gruppen, findet fehlerhafte Zeilen, CSS/JS-Sperren und Regeln, die geheime Pfade verraten, und bewertet einen Pfad für den gewählten Bot nach der Längster-Treffer-Regel. Es betont, dass robots.txt keine Sicherheitsmaßnahme ist.

So funktioniert es

1. Fügen Sie den Inhalt der robots.txt ein; optional Bot und Testpfad wählen.
2. Drücken Sie die Start-Schaltfläche. Ergebnisse erscheinen getrennt als sichere Probleme, mögliche Probleme, nicht prüfbar und in Ordnung; jeder Befund nennt Feststellung, Bedeutung, Lösung und Grenzen der Prüfung.
3. Setzen Sie die vorgeschlagene Lösung um und prüfen Sie mit einem erneuten Durchlauf. Mit „Ergebnis kopieren“ fügen Sie den Bericht einem Ticket hinzu.

Beispiel

Steht ein „Disallow: /“ aus der Entwicklung noch auf der Live-Seite, meldet das Tool die komplett gesperrte Website als sicheres Problem. Die Schaltfläche „Beispiel“ füllt ein solches Szenario aus und zeigt das Ergebnis sofort.

Umfang und Grenzen

Die Analyse läuft im Browser auf dem eingefügten Text; Ihre Website wird nicht abgefragt. Der Musterabgleich nutzt keine regulären Ausdrücke.

Ihre Eingaben landen weder in der Adresszeile noch in Analysesystemen, und Ergebnisseiten werden nicht indexiert.

Passende Ratgeber

• Core-Web-Vitals-Ratgeber
• WordPress-Checkliste vor dem Start
• Webhosting-Pakete

Weitere Werkzeuge

• Weiterleitungsgenerator
• Sitemap-Prüfung
• Fehlerprotokoll-Interpreter
• Alle Werkzeuge →