robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Orodje deluje neposredno v brskalniku in je pripravljeno za hitra preverjanja brez namestitve programske opreme.
Vnos je mogoče takoj počistiti in znova izračunati, kar je uporabno za ponavljajoča se majhna opravila.
Uporabite celozaslonski način, ko potrebujete več prostora za dolgo besedilo, strukturirane podatke ali velike bloke rezultatov.
Gumbi za kopiranje so na voljo na ustvarjenem izhodu, tako da je mogoče rezultate znova uporabiti v kodi, dokumentih ali klepetih s podporo.
Večina operacij je determinističnih: isti vhod in možnosti proizvedejo enak izhod.
Za občutljivo vsebino raje uporabite lokalna orodja brskalnika in preglejte rezultat, preden ga delite naprej.