Robots-generator

Visuellt anpassa crawler-regler för att guida sökmotorer till exakt indexering
Sökmotor-crawler (User-agent):
Global strategi (*)
Förbjud crawl
XML Sitemap Index URL:
Preview: robots.txt
User-agent: *
Disallow: /admin/