All Tools / Ferramentas de Desenvolvedor / Gerador de Robots.txt — Construtor Visual | Gratuito Online
Construtor
User-Agent
Regras Allow / Disallow
Opções
robots.txt

        

Gerador de Robots.txt

O que esta ferramenta faz

Selecione um user-agent (ou use * para todos os bots), adicione regras Allow e Disallow para caminhos específicos e, opcionalmente, defina um crawl-delay e URL de sitemap. A prévia em tempo real mostra o conteúdo exato do robots.txt. Use uma predefinição para começar rapidamente e ajuste as regras conforme a estrutura do seu site.

Como usar

  1. Clique em uma predefinição (ex. WordPress) ou comece com Permitir Tudo.
  2. Selecione um User-Agent — use * para todos os crawlers.
  3. Adicione regras Disallow para os caminhos que deseja bloquear.
  4. Adicione a URL do Sitemap na seção Opções (opcional).
  5. Clique em Copiar ou Baixar para obter o arquivo.