Robots.txt Generator
Genereer een geldig robots.txt-bestand voor uw website met Allow-, Disallow-, Sitemap- en Crawl-delay-instructies.
Advertisement
Gegenereerde robots.txt
Vul het formulier in en klik op genereren om uw robots.txt hier te zien.
Robots.txt Generator
De Robots.txt Generator maakt een geldig robots.txt-bestand dat crawlers van zoekmachines vertelt welke pagina's te crawlen en welke over te slaan. Gebruik het om bot-toegang tot uw site te beheren, privé-mappen te beschermen en crawlers naar uw sitemap te leiden.