robots.txt erstellen

Über dieses Tool

robots.txt erstellen — Werte und Einstellungen für die Webentwicklung erstellen oder analysieren. Die Verarbeitung erfolgt im Browser. Eingaben und Dateien werden nicht an einen externen Werkzeugdienst gesendet. Wichtige Eingaben: User-Agent · Verbotene Pfade · Erlaubte Pfade · XML sitemap URL. Prüfen Sie Eingabebedingungen und Ergebnis vor der Verwendung. Bewahren Sie die Originaldaten auf.

So funktioniert es

1. Geben Sie User-Agent ein oder wählen Sie die Eingabe aus.
2. Stellen Sie Verbotene Pfade · Erlaubte Pfade · XML sitemap URL ein und prüfen Sie Einheiten sowie Eingabeformat.
3. Führen Sie die Verarbeitung aus, prüfen Sie das Ergebnis und kopieren oder laden Sie es bei Bedarf herunter.

Kommentar