Validador de robots.txt

Analise diretivas, grupos de robôs e possíveis problemas em arquivos robots.txt.