robots.txt-generator (Välj Allow/Disallow för att bygga en mall)
Välj Allow/Disallow-regler för att snabbt skapa en robots.txt-mall. Denna robots.txt-generator förenklar inställningar för att blockera sökrobotar.
Målet är kontroll över genomsökning. Det garanterar inte förbättringar i rankning.
Mallgenerator för robots.txt
Klar att klistra in som robots.txt.Börja från en mall som ligger närmast ditt mål.
Lägg till Sitemap-rader
Flera rader tillåtna. Varje giltig URL blir en Sitemap:-rad.
Förhandsgranskning
Alternativ
Avancerat
Öppna vid behov
Hur man använder robots.txt
Välj en User-agent och lägg till regelrader.
Du kan lägga till flera sitemap-URL:er.
Kopiera resultatet och spara det som /robots.txt.
Exempel
Tillåt allt och lägg till en sitemap.
User-agent: * Disallow: Sitemap: https://example.com/sitemap.xml
Blockera endast administratörsområdet.
User-agent: * Disallow: /admin/
Farligt, endast för miljöer som inte är i produktion.
User-agent: * Disallow: /
Vad robots.txt kan göra
- • robots.txt är till för kontroll av genomsökning.
- • Kontroll av indexering är separat och kan kräva noindex.
FAQ
Kommer detta att förbättra SEO?
Syftet med robots.txt är kontroll av genomsökning och det garanterar inte förbättringar i rankning. Använd det för att minska onödig genomsökning och klargöra förbjudna områden.
Är Disallow: / farligt?
Ja. Disallow: / blockerar hela webbplatsen. Att använda det i produktion kan få allvarliga konsekvenser. Det här verktyget visar en stark varning och kräver bekräftelse innan kopiering.
Kan jag lägga till sitemap-rader?
Ja. Lägg till URL:er i fältet Sitemap så skriver verktyget ut Sitemap: ...-rader (stöd för flera URL:er).