🤖 robots.txt detaillierte Analyse
Geben Sie einfach den Hostname ein, um <code>/robots.txt</code> abzurufen und die Allow/Disallow-Regeln pro User-Agent-Gruppe, Sitemap, Crawl-Delay und den Genehmigungsstatus der wichtigsten Suchmaschinen- und KI-Crawler zu analysieren.
100% Free
No signup
Server-side
No logs / DB
Rate-limited
5 languages
Dark mode
🔗 Verwandte Tools
- ・LLMO-Diagnose — KI-Crawler-Berechtigung · llms.txt
- ・Grundlegende SEO-Prüfung
- ・Validierung strukturierter Daten
- ・Umfassende URL-Diagnose