Gerador de robots.txt

Monte um robots.txt com user-agent, allow, disallow, sitemap e crawl-delay.