robots.txt ජනකය (Allow/Disallow තෝරන්න)
Allow / Disallow නීති තෝරා robots.txt template එකක් ඉක්මනින් සාදන්න.
මෙම මෙවලම crawl control සඳහාය. Ranking වර්ධනය සහතික නොකරයි.
අනතුරුදායක full-site blocks අවවාදය සහ තහවුරු කිරීම සමඟ හඳුනා ගනී
robots.txt Template ජනකය
ප්රායෝගික form එකක් මඟින් crawler block settings සාදන්න. ජනනය කළ ප්රතිඵලය ඔබට robots.txt ලෙස සෘජුවම ඇලවිය හැකි plain text වේ.
භාවිතා කරන ආකාරය
- User-agent සකසා Allow/Disallow rules එක් කරන්න.
- අවශ්ය නම් Sitemap URLs එක් කරන්න (බහු පේළි සඳහා සහය ඇත).
- ජනනය කළ robots.txt ප්රතිදානය පිටපත් කරන්න හෝ බාගන්න.
robots.txt කරන්නේ මොකක්ද
- robots.txt crawling හැසිරීම පාලනය කරයි.
- Indexing පාලනයට noindex වැනි වෙනත් ක්රම අවශ්ය විය හැක.
- robots.txt අඩවියේ root එකේ තබන්න, උදාහරණයක් ලෙස https://example.com/robots.txt.
FAQ
මෙය SEO ranking වැඩි කරයිද?
robots.txt හි අරමුණ crawler control කිරීමයි. Ranking වාසි සහතික නොකරයි.
Disallow: / අනතුරුදායකද?
ඔව්. Disallow: / මඟින් සම්පූර්ණ අඩවියම crawl වීම අවහිර කළ හැක. මෙම මෙවලම දැඩි අවවාදයක් පෙන්වමින් පිටපත්/බාගැනීමට පෙර තහවුරු කිරීමක් ඉල්ලයි.
Sitemap lines ඇතුළත් කළ හැකිද?
ඔව්. Sitemap ආදානය තුළ URLs එක් කළහොත්, මෙවලම බහු URLs ඇතුළුව Sitemap: ... පේළි ස්වයංක්රීයව output කරයි.