robots.txt and sitemap.xml analyzer robots.txt and sitemap.xml analyzer

Analyze robots.txt and sitemap.xml online

Enter a website URL to fetch robots.txt, parse crawler groups, detect Sitemap directives and validate linked sitemap XML files.

The analyzer checks whether important bots can crawl the root path, counts sitemap URLs, finds duplicate or external URLs and performs a sampled broken-link check for sitemap entries.

Восита мустақиман дар браузер кор мекунад ва бидуни насби нармафзор барои тафтиши зуд омода аст.
Вурудро фавран тоза кардан ва аз нав ҳисоб кардан мумкин аст, ки ин барои вазифаҳои такрории хурд муфид аст.
Ҳолати пурраи экранро истифода баред, вақте ки ба шумо барои матни дароз, маълумоти сохторӣ ё блокҳои калони натиҷаҳо фазои бештар лозим аст.
Тугмаҳои нусхабардорӣ дар баромади тавлидшуда мавҷуданд, то натиҷаҳоро дар код, ҳуҷҷатҳо ё чатҳои дастгирӣ дубора истифода бурдан мумкин аст.
Аксари амалиётҳо муайянкунандаанд: ҳамон як вуруд ва вариантҳо ҳамон натиҷа медиҳанд.
Барои мундариҷаи ҳассос, абзорҳои браузери маҳаллиро бартарӣ диҳед ва пеш аз мубодилаи минбаъда натиҷаро аз назар гузаронед.