robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Narzędzie działa bezpośrednio w przeglądarce i nadaje się do szybkich sprawdzeń bez instalowania programu.
Dane wejściowe można od razu wyczyścić i przeliczyć ponownie, co pomaga przy powtarzalnych małych zadaniach.
Użyj trybu pełnoekranowego, gdy potrzebujesz więcej miejsca na długi tekst, dane strukturalne lub duże wyniki.
Przyciski kopiowania ułatwiają przeniesienie wyniku do kodu, dokumentów lub rozmów z pomocą techniczną.
Większość operacji jest deterministyczna: te same dane i ustawienia dają ten sam wynik.
Przy wrażliwych danych korzystaj z lokalnych narzędzi w przeglądarce i sprawdzaj wynik przed udostępnieniem.