Gerador de robots.txt

Crie arquivos robots.txt para gerenciar o acesso de rastreadores de mecanismos de busca. Suporta múltiplos user agents, restrições de caminhos, atrasos de rastreamento e configuração de sitemap.