robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Araç doğrudan tarayıcıda çalışır ve yazılım kurmadan hızlı kontroller için uygundur.
Girdi hemen temizlenip yeniden hesaplanabilir; bu, tekrarlanan küçük işler için kullanışlıdır.
Uzun metinler, yapılandırılmış veriler veya büyük sonuçlar için daha fazla alan gerektiğinde tam ekran modunu kullanın.
Kopyalama düğmeleri sonucu kodda, belgelerde veya destek yazışmalarında yeniden kullanmayı kolaylaştırır.
Çoğu işlem deterministiktir: aynı girdi ve seçenekler aynı sonucu üretir.
Hassas içerikler için yerel tarayıcı araçlarını tercih edin ve paylaşmadan önce sonucu kontrol edin.