Robots.txt Generator
Genereer a robots.txt file for your website. Control crawler access, set crawl delay, and add sitemap URL.
Lokale verwerkingRobots.txt Generator
Hoe te gebruiken
Vul hierboven uw invoer in. Het resultaat wordt automatisch bijgewerkt. Gebruik de kopieerknop om het resultaat te kopiëren.
Privacy
Alle verwerking gebeurt in uw browser. Uw gegevens worden nooit naar een server geüpload.
Veelgestelde vragen
Wat is robots.txt?
Het vertelt de crawlers van zoekmachines welke pagina's ze wel of niet kunnen openen.