Construtor
User-Agent
Regras Allow / Disallow
Opções
robots.txt
Gerador de Robots.txt
O que esta ferramenta faz
Selecione um user-agent (ou use * para todos os bots), adicione regras Allow e Disallow para caminhos específicos e, opcionalmente, defina um crawl-delay e URL de sitemap. A prévia em tempo real mostra o conteúdo exato do robots.txt. Use uma predefinição para começar rapidamente e ajuste as regras conforme a estrutura do seu site.
Como usar
- Clique em uma predefinição (ex. WordPress) ou comece com Permitir Tudo.
- Selecione um User-Agent — use * para todos os crawlers.
- Adicione regras Disallow para os caminhos que deseja bloquear.
- Adicione a URL do Sitemap na seção Opções (opcional).
- Clique em Copiar ou Baixar para obter o arquivo.