🤖 Testador de robots.txt
Basta inserir o conteúdo do robots.txt e o caminho da URL alvo para determinar se esse caminho é permitido para cada User-agent como Googlebot / GPTBot / ClaudeBot. Analisa corretamente as regras Allow / Disallow / correspondência mais longa.
100% Free
No signup
Browser-only
5 languages
Dark mode
🤖 Determinação em lote dos principais rastreadores
🔗 Ferramentas relacionadas
📖 Como usar
-
1
Paste your robots.txt contentPaste the content of your robots.txt into the left textarea. Use the Sample button to try a typical robots.txt example.
-
2
Enter the URL path and User-agent to testEnter a path such as /admin/ in the Test URL path field and select a User-agent (Googlebot, GPTBot, ClaudeBot, etc.) from the dropdown.
-
3
Review the verdict and bulk crawler checkThe verdict (ALLOWED / DISALLOWED) and matched rule are shown for the selected User-agent. The bulk table at the bottom shows results for all major crawlers at once.
❓ Perguntas frequentes
What if both Disallow: / and Allow: / are present?
Google uses the longest-match rule. If Allow and Disallow match the same length, Allow wins. This tool follows the same logic.
Is the Sitemap directive parsed?
This tool focuses on Allow / Disallow rule evaluation. Sitemap, Crawl-delay, and other directives are ignored.
Is User-agent matching case-sensitive?
This tool uses case-insensitive matching. Googlebot and googlebot are treated the same. Real Google crawlers also match case-insensitively.
🐛 Você encontrou um problema com esta ferramenta?
Completamente gratuito e sem registro. Até as etapas de reprodução são suficientes. Os relatos recebidos chegam diretamente aos operadores e servem como referência para correções.
✅
Obrigado por seu relato!
Recebido pelos administradores. Usaremos como referência para melhorias.