Pular para o conteúdo

🤖 Análise detalhada de robots.txt

Insira apenas o nome do host para obter <code>/robots.txt</code> e analisar as regras Allow / Disallow por grupo de User-agent, Sitemap, Crawl-delay e o status de permissão dos principais mecanismos de busca e crawlers de IA.

100% Free No signup Server-side No logs / DB Rate-limited 5 languages Dark mode

⚠️ O servidor de diagnóstico será acessado a partir dos servidores do DevLab. IPs privados e localhost estão excluídos.

🔗 Ferramentas relacionadas