Gerador de Robots.txt
Crie um arquivo robots.txt em segundos para controlar o que os buscadores podem rastrear. Inclui regras para WordPress, bloqueio de pastas, sitemap e exemplos prontos.
Suas ideias em realidade digital!
Crie um arquivo robots.txt em segundos para controlar o que os buscadores podem rastrear. Inclui regras para WordPress, bloqueio de pastas, sitemap e exemplos prontos.
Crie regras para rastreadores (Googlebot, Bingbot etc). Gere o conteúdo e copie ou baixe o arquivo robots.txt.
Dica: robots.txt controla rastreamento (crawl), não garante “segurança”.
https://seusite.com.br/robots.txtVeja também: Erro 301 e 302 (SEO e redirecionamentos) • Como resolver erro 500 e 404 em sites PHP
O que é um arquivo robots.txt?
O arquivo deve ficar obrigatoriamente na raiz do domínio:
https://www.seusite.com.br/robots.txt
Se você colocar em outra pasta, como /arquivos/robots.txt, os buscadores irão ignorar.
Não necessariamente.
O robots.txt bloqueia o rastreamento, mas não garante que a página não apareça nos resultados.
Para impedir indexação corretamente, o ideal é usar:
<meta name="robots" content="noindex">
ou cabeçalhos HTTP apropriados.
Sim. Você pode usar:
User-agent: *
Disallow: /
⚠ Atenção: Isso bloqueia todos os robôs. Use apenas em ambiente de teste ou desenvolvimento.
Sim, é altamente recomendado adicionar:
Sitemap: https://www.seusite.com.br/sitemap.xml
Isso ajuda o Google a descobrir suas páginas mais rapidamente.
Você pode gerar seu sitemap com nosso
👉 <a href="https://www.makrosites.com.br/ferramentas-online/gerador-sitemap-xml-online">Gerador de Sitemap XML</a>
Um exemplo básico e seguro para WordPress é:
User-agent: *
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Evite bloquear /wp-content/ ou arquivos CSS/JS, pois isso pode prejudicar SEO.
Sim.
Erros comuns incluem:
Bloquear páginas importantes
Bloquear CSS e JS
Bloquear o próprio sitemap
Bloquear todo o site sem perceber
Sempre teste após publicar.
Você pode:
Usar o Google Search Console
Verificar manualmente acessando seusite.com.br/robots.txt
Testar URLs com nosso
👉 <a href="https://www.makrosites.com.br/ferramentas-online/verificador-urls">Verificador de Status HTTP</a>
Não.
O robots.txt não protege conteúdo sensível. Ele apenas orienta robôs de busca.
Para segurança real, utilize:
Autenticação
Bloqueio via servidor
Regras no .htaccess
Você pode criar regras com nosso
👉 <a href="https://www.makrosites.com.br/ferramentas-online/gerador-htaccess-online">Gerador de .htaccess</a>
Sim, usando:
Disallow: /*?*
Isso impede rastreamento de URLs com parâmetros (como filtros e buscas internas), o que pode ajudar na organização do SEO.