Pular para o conteúdo
Especialista LV

Gerador de robots.txt

Marque o que pode ou não ser rastreado — incluindo bots de IA (GPTBot, ClaudeBot) — e baixe o arquivo pronto.

100% gratuita, sem cadastro Não armazenamos logs do que você consulta

Bloquear bots de buscadores tradicionais

Por padrão, todos os mecanismos de busca são permitidos. Marque para bloquear.

Bloquear bots de IA / LLM

Marcar bloqueia o acesso desses bots ao seu conteúdo (impede treinamento e/ou referenciamento em buscas com IA).

Bloqueios comuns para e-commerce

Regras customizadas

Sitemap e crawl-delay

O Google ignora Crawl-delay. Use apenas se outros bots estiverem sobrecarregando seu servidor.

robots.txt

Hospede este arquivo na raiz do seu domínio: sua-loja.com.br/robots.txt.

# robots.txt gerado em especialistalojavirtual.com.br/ferramentas/gerador-robots-txt

User-agent: *
Allow: /

Como funciona o Gerar robots.txt

checkboxes✓Bloquear /carrinho✓Bloquear /checkout✓Bloquear GPTBot✓Bloquear Google-ExtendedBloquear Bytespiderrobots.txt geradoUser-agent: *Disallow: /carrinhoDisallow: /checkoutUser-agent: GPTBotDisallow: /

Marque quais bots bloquear: busca (Google, Bing, Yandex), IA (GPTBot, ClaudeBot, Google-Extended, Bytespider) e caminhos comuns de e-commerce que não devem ser indexados (carrinho, checkout, busca, parâmetros).

O robots.txt é montado no seu navegador e pode ser baixado ou copiado. Coloque-o na raiz do domínio: https://sua-loja.com.br/robots.txt.

Perguntas frequentes

Bloquear bots de IA prejudica meu SEO no Google?

Não diretamente — Googlebot (busca) é diferente de Google-Extended (treinamento de Gemini). Bloquear Google-Extended impede uso para treinar IA mas mantém indexação. GPTBot e ClaudeBot são separados do search também.

Por que bloquear /cart e /checkout no robots.txt?

Essas páginas mudam o tempo todo (carrinho de cada visitante), não geram valor de busca e podem confundir o Google. Bloquear economiza orçamento de rastreamento (crawl budget) para suas páginas de produto e categoria.

Crawl-delay funciona no Google?

Não. O Google ignora a diretiva Crawl-delay desde 2019. Use Crawl-delay apenas para outros bots (Bing, Yandex). Para controlar a taxa do Googlebot, use o Google Search Console → Configurações → Taxa de rastreamento.

Como faço upload do robots.txt no meu site?

WordPress: instale o Yoast SEO e edite em Ferramentas → Editor de arquivo. Hospedagem cPanel: upload via Gerenciador de Arquivos para a pasta public_html. Sites custom: via FTP/SSH na raiz pública. Confirme acessando https://sua-loja.com.br/robots.txt.

Referências oficiais

Fontes primárias usadas na construção desta ferramenta. Use-as para aprofundar ou validar os critérios técnicos.

Ferramentas relacionadas

robots.txt

Inspecione o robots.txt do seu site e veja exatamente o que está bloqueado para o Google.

Abrir

Sitemap

Carregue seu sitemap.xml e descubra quantas URLs estão indexáveis e quais retornam erro.

Abrir

SEO on-page

Auditoria instantânea de title, description, canonical, headings, imagens sem alt e mais.

Abrir