robots.txt Yaradıcı (Şablon qurmaq üçün Allow/Disallow seçin)
Sürətli robots.txt şablonu yaratmaq üçün Allow/Disallow qaydalarını seçin. Bu robots.txt yaradıcısı crawler bloklama ayarlarını sadələşdirir.
Məqsəd tarama (crawl) nəzarətidir. Reytinq yaxşılaşdırılmasına zəmanət vermir.
robots.txt Şablon Yaradıcısı
robots.txt kimi yapışdırmağa hazırdır.Məqsədinizə ən yaxın şablondan başlayın.
Sitemap sətirləri əlavə et
Çoxsətirli daxiletmə mümkündür. Hər bir etibarlı URL 'Sitemap:' sətrinə çevrilir.
Ön Baxış
Seçimlər
Təkmil
Lazım olduqda açın
robots.txt necə istifadə olunur
User-agent seçin və qayda sətirləri əlavə edin.
Birdən çox sitemap URL-i əlavə edə bilərsiniz.
Nəticəni kopyalayın və /robots.txt kimi saxlayın.
Nümunələr
Hər şeyə icazə verin və sitemap əlavə edin.
User-agent: * Disallow: Sitemap: https://example.com/sitemap.xml
Yalnız admin sahəsini qadağan edin.
User-agent: * Disallow: /admin/
Təhlükəlidir, yalnız qeyri-istehsal saytlar üçün.
User-agent: * Disallow: /
robots.txt nələr edə bilər
- • robots.txt tarama (crawl) nəzarəti üçündür.
- • İndeks nəzarəti ayrıdır və 'noindex' tələb edə bilər.
FAQ
Bu, SEO-nu yaxşılaşdıracaqmı?
robots.txt-nin məqsədi tarama nəzarətidir və reytinq yaxşılaşdırılmasına zəmanət vermir. Lazımsız taramanı azaltmaq və qapalı sahələri aydınlaşdırmaq üçün istifadə edin.
Disallow: / təhlükəlidirmi?
Bəli. Disallow: / bütün saytı bloklayır. Bunu real sayta tətbiq etmək ciddi təsir göstərə bilər. Bu alət güclü xəbərdarlıq göstərir və kopyalamadan əvvəl təsdiq tələb edir.
Sitemap sətirləri əlavə edə bilərəmmi?
Bəli. Sitemap sahəsinə URL-ləri əlavə edin və alət 'Sitemap: ...' sətirlərini çıxaracaq (birdən çox URL dəstəklənir).