Generátor robots.txt (zvolte Allow/Disallow)
Rychle vytvořte šablonu robots.txt výběrem pravidel Allow / Disallow.
Tento nástroj slouží pro řízení crawlování. Nezaručuje zlepšení pozic ve vyhledávání.
Generátor šablon robots.txt
Vytvářejte praktickým formulářem nastavení blokování crawlerů. Vygenerovaný výsledek je prostý text, který můžete přímo vložit jako robots.txt.
Jak používat
- Nastavte User-agent a přidejte pravidla Allow/Disallow.
- Pokud je to potřeba, přidejte URL Sitemap (podporováno více řádků).
- Zkopírujte nebo stáhněte vygenerovaný výstup robots.txt.
Co dělá robots.txt
- robots.txt řídí chování crawlování.
- Řízení indexace může vyžadovat i jiné metody, například noindex.
- robots.txt umístěte do kořene webu, například https://example.com/robots.txt.
FAQ
Zlepší to SEO pozice?
Účelem robots.txt je řízení crawlerů. Nezaručuje zisk pozic.
Je Disallow: / nebezpečné?
Ano. Disallow: / může zablokovat crawlování celého webu. Tento nástroj zobrazí silné varování a před kopírováním nebo stažením vyžaduje potvrzení.
Mohu přidat i řádky Sitemap?
Ano. Zadejte URL do pole Sitemap a nástroj automaticky vypíše řádky Sitemap: ..., včetně více URL.