Waarvoor gebruik ik deze tool?
Maak een robots.txt-bestand met crawlerregels, toegestane of geblokkeerde paden en sitemapverwijzingen.
SEO- EN ONTWIKKELTOOLS
Robots.txt-generator
Maak een robots.txt-bestand met crawlerregels, toegestane of geblokkeerde paden en sitemapverwijzingen.
GratisIn je browserGeen registratie
Crawlerregels
Deze tool werkt in je browser. Robots.txt beveiligt geen privébestanden. Niet alle bots volgen deze regels.
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Gegenereerde robots.txt
Gegenereerde regels
0
Voer regels in om robots.txt te maken.
Blokkeerregels
0
Toestemmingsregels
0
Sitemaps
0
Status
Wachten
Uploadlocatie:
https://example.com/robots.txt
Bestandsnaam:
robots.txt
Upload this file to your website root, for example https://example.com/robots.txt.
Robots.txt-rapport
Robots.txt checks will appear here.
User-Agent
*
Crawlvertraging
Geen
Hoofdmap website
Ontbreekt
Crawlmodus
Aangepast
| Controle | Resultaat |
|---|---|
| Huidige status | Wachten op invoer |
Zo gebruik je het
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Opties en aandachtspunten
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Robots.txt beveiligt geen privébestanden. Niet alle bots volgen deze regels.
Zo gebruik je het
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Opties en aandachtspunten
Robots.txt beveiligt geen privébestanden. Niet alle bots volgen deze regels.
Veelgestelde vragen over Robots.txt-generator
Hoe werkt het?
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Welke instellingen zijn mogelijk?
Kies een profiel, voeg paden toe en genereer het bestand voor de hoofdmap van je website.
Waar moet ik op letten?
Robots.txt beveiligt geen privébestanden. Niet alle bots volgen deze regels.
Is dit gratis?
De tool is gratis en werkt zonder registratie in je browser.
Wat kan ik met het resultaat doen?
Je kunt het resultaat kopiëren of de beschikbare downloadfuncties gebruiken.
Netwerk en systeem
Ontwikkelaarstools
Teksttools
Rekenhulpen
Generatoren
Omrekenen
-
Online audio converter
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-