🤖 Gerador de robots.txt

Configure Allow / Disallow em lote para mais de 20 principais crawlers (Googlebot / Bingbot / GPTBot / ClaudeBot / PerplexityBot / Bytespider etc.). Suporta diretivas Crawl-delay, Sitemap e Host.

100% Free No signup Browser-only 5 languages Dark mode

🔒 Sobre Privacidade

・Todo o processamento é concluído dentro do seu navegador
・O conteúdo da entrada não é enviado para o servidor
・Nenhum registro, login ou cobrança necessária

⚡ Predefinição

🤖 Rastreador (User-agent)

Allow path (1 por linha)

Caminho de Disallow (1 por linha)

Crawl-delay (Segundos)

Sitemap URL

Host (Para Yandex)

📄 robots.txt

📖 Como usar

1

Pick crawlers

Check the crawlers and toggle Allow / Disallow.
2

Add paths and options

Enter Allow / Disallow paths, Crawl-delay, Sitemap URL and Host.
3

Copy or download

Copy the generated robots.txt or save as file.

❓ Perguntas frequentes

Does blocking GPTBot or ClaudeBot affect SEO ranking?

No. They are separate AI training crawlers, distinct from Googlebot or Bingbot. SEO ranking is unaffected. Allow them if you want AI citations (LLMO).

Why is my Disallow ignored?

robots.txt is advisory. Malicious bots ignore it. For hard blocking, combine with HTTP 401 / Basic Auth or IP-level rules.

Where should robots.txt be placed?

It must be at the domain root (https://example.com/robots.txt). Subdirectories are not recognized.

🔗 Ferramentas relacionadas

🐛 Você encontrou um problema com esta ferramenta?

Completamente gratuito e sem registro. Até as etapas de reprodução são suficientes. Os relatos recebidos chegam diretamente aos operadores e servem como referência para correções.