Robots Generator
Visueel aanpassen van crawlerregels om zoekmachines te gidsen voor nauwkeurige indexeringZoekmachine Crawler (User-agent):
Globale Strategie (*)
Regelpaden Instellen
Crawl Blokkeren
XML Sitemap Index URL:
Preview: robots.txt
User-agent: * Disallow: /admin/