Kontrola Robots.txt
Analyzujte súbor robots.txt, overte pravidlá a skontrolujte smernice sitemap. Bezplatný online nástroj.
O tomto nástroji
Robots.txt Checker je bezplatný online nástroj na validáciu a analýzu vášho súboru robots.txt. Súbor robots.txt kontroluje, ktoré stránky si môžu robotizovať a indexovať vyhľadávacie motory. Tento nástroj vám pomáha pochopiť pravidlá prehľadávania, identifikovať chyby a zabezpečiť, aby mal Googlebot a iní crawleri prístup k dôležitým stránkam. Perfektný pre SEO špecialistov, webmasterov a vývojárov spravujúcich prehľadávanosť stránok.
Ako používať
- 1Zadajte adresu URL svojho webu alebo vložte obsah robots.txt priamo
- 2Kliknutím na "Kontrola Robots.txt" a počkajte na validáciu
- 3Prehliadnite všetky pravidlá povolenia/zákazu pre rôznych robotov vyhľadávačov
- 4Skontrolujte chyby syntaxe alebo problémové pravidlá
- 5Získajte návrhy na zlepšenie konfigurácie robots.txt
Špecifikácie a obmedzenia
Validuje syntax robots.txt v súlade so štandardom REP (Robots Exclusion Protocol). Kontroluje: pravidlá User-agent, cesty Disallow/Allow, Crawl-delay, Request-rate, direktívy Sitemap. Testuje konkrétne adresy URL podľa pravidiel. Ukazuje, ktorých robotov ovplyvňuje každé pravidlo. Rýchlosť spracovania: okamžitá.