Wofür kann ich dieses Tool verwenden?
Erstelle eine robots.txt-Datei mit User-Agent-Regeln, erlaubten und gesperrten Pfaden sowie Sitemap-Verweisen.
ENTWICKLER- UND SEO-TOOLS
Robots.txt-Generator
Erstelle eine robots.txt-Datei mit User-Agent-Regeln, erlaubten und gesperrten Pfaden sowie Sitemap-Verweisen.
KostenlosIm BrowserOhne Anmeldung
Crawler-Regeln
Dieses Tool arbeitet im Browser. Robots.txt ist kein Zugriffsschutz. Nicht alle Bots halten sich an die Regeln.
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Erstellte robots.txt
Erstellte Regeln
0
Gib Regeln ein, um robots.txt zu erstellen.
Sperrregeln
0
Erlaubnisregeln
0
Sitemaps
0
Status
Warten
Speicherort:
https://example.com/robots.txt
Dateiname:
robots.txt
Upload this file to your website root, for example https://example.com/robots.txt.
Robots.txt-Bericht
Robots.txt checks will appear here.
User-Agent
*
Crawl-Verzögerung
Keiner
Website-Stammverzeichnis
Fehlt
Crawl-Modus
Benutzerdefiniert
| Prüfung | Ergebnis |
|---|---|
| Aktueller Status | Warte auf Eingabe |
Anleitung
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Optionen und Hinweise
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Robots.txt ist kein Zugriffsschutz. Nicht alle Bots halten sich an die Regeln.
Anleitung
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Optionen und Hinweise
Robots.txt ist kein Zugriffsschutz. Nicht alle Bots halten sich an die Regeln.
Häufige Fragen zu Robots.txt-Generator
Wie benutze ich das Tool?
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Welche Einstellungen stehen zur Verfügung?
Wähle ein Regelprofil, füge Pfade hinzu und generiere die Datei. Lade robots.txt ins Stammverzeichnis deiner Website hoch.
Worauf sollte ich achten?
Robots.txt ist kein Zugriffsschutz. Nicht alle Bots halten sich an die Regeln.
Ist die Nutzung kostenlos?
Das Tool ist kostenlos und lässt sich ohne Registrierung im Browser verwenden.
Wie verwende ich das Ergebnis?
Du kannst das Ergebnis kopieren oder über die angebotenen Funktionen weiterverwenden.
Netzwerk & System
Entwickler-Tools
Textwerkzeuge
Rechner
Generatoren
Umrechner
-
Audio-Konverter online
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-