Gerador de robots.txt
Crie seu arquivo com este gerador de robots.txt online grátis: bloqueie caminhos e rastreadores de IA, adicione sitemaps e teste URLs com as regras.
What next?
Achou útil? Compartilhe Gerador de robots.txt
Grátis, sem cadastro, funciona no navegador — envie para um amigo ou adicione ao seu site.
Ferramentas relacionadas
- Bloco de notas onlineEscreva e salve notas neste bloco de notas online grátis: salvamento automático no navegador, várias notas, busca, contagem de palavras e download .txt.
- Contador de palavrasConte palavras, caracteres, frases e tempo de leitura na hora. Contador de palavras online grátis — cole o texto e veja estatísticas ao vivo, sem cadastro.
- Ferramenta de ordem alfabéticaUse esta ferramenta de ordem alfabética online grátis: ordene listas de A–Z ou Z–A, por tamanho ou número, remova duplicatas e ordene por sobrenome.
- Conversor de maiúsculas e minúsculasConverta textos com este conversor de maiúsculas e minúsculas online grátis: MAIÚSCULAS, minúsculas, Título, Frase, camelCase, snake_case e mais.
- Resolvedor de palavras cruzadasAche palavras para suas cruzadas com este resolvedor de palavras cruzadas online grátis: digite letras conhecidas e ? nas lacunas e filtre letras.
- Copiar e colar emojisCopiar e colar emojis com um clique: pesquise 500 emojis populares por nome, navegue por categorias e monte mensagens. Teclado de emojis online grátis.
Faz parte do kit
Como usar Gerador de robots.txt
- 1Escolha se os buscadores podem rastrear seu site e depois liste os caminhos a bloquear e as exceções permitidas (ou escolha uma predefinição)
- 2Opcionalmente, bloqueie rastreadores de IA, adicione a URL do sitemap e um crawl-delay
- 3Teste URLs com as regras, depois copie ou baixe o robots.txt e envie para a raiz do seu domínio
Perguntas frequentes
Onde coloco o robots.txt?▾
Na raiz do seu domínio, para que carregue em https://yoursite.com/robots.txt. Os crawlers não o procuram em subpastas, e cada subdomínio precisa do próprio arquivo.
Como bloqueio crawlers de IA como o GPTBot?▾
Adicione um grupo para os user agents deles com Disallow: /. Marque 'Block AI crawlers' para adicionar GPTBot, ClaudeBot, Google-Extended, CCBot, PerplexityBot e outros, enquanto os mecanismos de busca mantêm acesso total.
Qual regra vence quando Allow e Disallow coincidem?▾
O Google e o Bing usam a regra mais específica — o caminho correspondente mais longo. Se um Allow e um Disallow tiverem o mesmo tamanho, o Allow vence. O testador integrado aplica exatamente essas regras.
O robots.txt remove páginas do Google?▾
Não. Ele para o rastreamento, mas um URL bloqueado ainda pode ser indexado se outros sites apontarem para ele. Para manter uma página fora dos resultados de busca, use uma meta tag noindex e deixe-a ser rastreada.
Embed Gerador de robots.txt on your website▾
Paste this snippet into your page. The embedded tool runs in your visitor's browser and shows a small “Powered by clkr.work” link.