Robots.txt Generator

Erstellen und validieren Sie robots.txt-Dateien für Ihre Website.

Schnellvorlagen
User-Agent-Regeln
Optionen

Verzögerung zwischen Crawler-Anfragen hinzufügen (in Sekunden)

Ihre robots.txt ist gültig
Generierte robots.txt
# robots.txt generated by Toolbox
# Generated on: 2026-01-02

User-agent: *
Disallow: 
Verwendung
  1. Konfigurieren Sie User-Agent-Regeln mit den Vorlagen oder manuellen Optionen
  2. Fügen Sie Sitemap-URLs hinzu, um Suchmaschinen zu helfen, Ihre Inhalte zu entdecken
  3. Kopieren Sie den generierten robots.txt-Inhalt
  4. Speichern Sie ihn als robots.txt im Stammverzeichnis Ihrer Website