"ನಾನು ಸೈಟ್\u200cಮ್ಯಾಪ್ ಸಾಲುಗಳನ್ನು ಸೇರಿಸಬಹುದೇ?"

"ಹೌದು. Sitemap ಫೀಲ್ಡ್\u200cನಲ್ಲಿ URL ಗಳನ್ನು ಸೇರಿಸಿ ಮತ್ತು ಸಾಧನವು Sitemap: ... ಸಾಲುಗಳನ್ನು ಔಟ್\u200cಪುಟ್ ನೀಡುತ್ತದೆ (ಅನೇಕ URL ಗಳನ್ನು ಬೆಂಬಲಿಸುತ್ತದೆ)."

robots.txt ಮಾದರಿ

robots.txt ಜನರೇಟರ್ (ಮಾದರಿಯನ್ನು ನಿರ್ಮಿಸಲು Allow/Disallow ಆಯ್ಕೆಮಾಡಿ)

Q: "ಇದು SEO ಅನ್ನು ಸುಧಾರಿಸುತ್ತದೆಯೇ?"

"robots.txt ಉದ್ದೇಶವು ಕ್ರಾಲರ್ ನಿಯಂತ್ರಣವಾಗಿದೆ ಮತ್ತು ಇದು ಶ್ರೇಯಾಂಕದ ಸುಧಾರಣೆಯನ್ನು ಖಾತರಿಪಡಿಸುವುದಿಲ್ಲ. ಅನಗತ್ಯ ಕ್ರಾನಿಂಗ್ ಅನ್ನು ಕಡಿಮೆ ಮಾಡಲು ಮತ್ತು ಪ್ರವೇಶವಿಲ್ಲದ ಪ್ರದೇಶಗಳನ್ನು ಸ್ಪಷ್ಟಪಡಿಸಲು ಇದನ್ನು ಬಳಸಿ."

Q: "Disallow: / ಅಪಾಯಕಾರಿಯೇ?"

"ಹೌದು. Disallow: / ಇಡೀ ಸೈಟ್ ಅನ್ನು ನಿರ್ಬಂಧಿಸುತ್ತದೆ. ಪ್ರೊಡಕ್ಷನ್ ಸೈಟ್\u200cಗೆ ಇದನ್ನು ಅನ್ವಯಿಸುವುದು ಗಂಭೀರ ಪರಿಣಾಮ ಬೀರಬಹುದು. ಈ ಸಾಧನವು ಬಲವಾದ ಎಚ್ಚರಿಕೆಯನ್ನು ತೋರಿಸುತ್ತದೆ ಮತ್ತು ನಕಲಿಸುವ ಮೊದಲು ದೃಢೀಕರಣವನ್ನು ಕೇಳುತ್ತದೆ."

robots.txt ಮಾದರಿಯನ್ನು ತ್ವರಿತವಾಗಿ ರಚಿಸಲು Allow/Disallow ನಿಯಮಗಳನ್ನು ಆರಿಸಿ. ಈ robots.txt ಜನರೇಟರ್ ಕ್ರಾಲರ್ ನಿರ್ಬಂಧಿಸುವ ಸೆಟ್ಟಿಂಗ್‌ಗಳನ್ನು ಸರಳಗೊಳಿಸುತ್ತದೆ.

ಇದರ ಗುರಿ ಕ್ರಾಲರ್ ನಿಯಂತ್ರಣವಾಗಿದೆ. ಇದು ಶ್ರೇಯಾಂಕದ (ranking) ಸುಧಾರಣೆಗಳನ್ನು ಖಾತರಿಪಡಿಸುವುದಿಲ್ಲ.

ನಿಮ್ಮ ಬ್ರೌಸರ್‌ನಲ್ಲಿ ಸ್ಥಳೀಯವಾಗಿ ಪ್ರಕ್ರಿಯೆಗೊಳಿಸಲಾಗಿದೆ.

robots.txt ಮಾದರಿ ಜನರೇಟರ್

robots.txt ಆಗಿ ಅಂಟಿಸಲು ಸಿದ್ಧವಾಗಿದೆ.

ಪ್ರಿಸೆಟ್ ಉದ್ದೇಶ

ನಿಮ್ಮ ಗುರಿಗೆ ಹತ್ತಿರವಿರುವ ಮಾದರಿಯಿಂದ ಪ್ರಾರಂಭಿಸಿ.

ಮೊದಲಿನಿಂದ ಪ್ರಾರಂಭಿಸಿ (ಡಿಫಾಲ್ಟ್) ಖಾಲಿ, ಸುರಕ್ಷಿತ ಮಾದರಿಯೊಂದಿಗೆ ಪ್ರಾರಂಭಿಸಿ. ಸ್ಟೇಜಿಂಗ್ (ಎಲ್ಲವನ್ನೂ ನಿರ್ಬಂಧಿಸಿ) Disallow: / ಅನ್ನು ಒಳಗೊಂಡಿದೆ ಮತ್ತು ಪ್ರೊಡಕ್ಷನ್‌ಗೆ ಅಪಾಯಕಾರಿಯಾಗಿದೆ. ಅಪಾಯಕಾರಿ ಅಡ್ಮಿನ್ ಮಾತ್ರ ನಿರ್ಬಂಧಿಸಿ (ಉದಾಹರಣೆ) ಉದಾಹರಣೆ: Disallow /admin/.

Sitemap ಸಾಲುಗಳನ್ನು ಸೇರಿಸಿ

Sitemap

ಅನೇಕ ಸಾಲುಗಳನ್ನು ಅನುಮತಿಸಲಾಗಿದೆ. ಪ್ರತಿ ಸಿಂಧುವಾದ URL ಒಂದು Sitemap: ಸಾಲಾಗುತ್ತದೆ.

ಮುನ್ನೋಟ

robots.txt ಆಗಿ ಅಂಟಿಸಲು ಸಿದ್ಧವಾಗಿದೆ.

ಆಯ್ಕೆಗಳು

ಸುಧಾರಿತ

ಅಗತ್ಯವಿದ್ದಾಗ ತೆರೆಯಿರಿ

Crawl-delay ಸೆಕೆಂಡ್‌ಗಳು. ಕೆಲವು ಕ್ರಾಲರ್‌ಗಳು ಇದನ್ನು ನಿರ್ಲಕ್ಷಿಸುತ್ತವೆ. ಕಾಮೆಂಟ್ ಸಾಲನ್ನು ಸೇರಿಸಿ ಮೇಲ್ಭಾಗದಲ್ಲಿ ಕಾಮೆಂಟ್ ಸೇರಿಸುತ್ತದೆ.

ಸ್ಪಷ್ಟವಾದ ಖಾಲಿ Disallow ಯಾವುದೇ ನಿಯಮಗಳಿಲ್ಲದಿದ್ದರೂ ಸಹ Disallow: ಅನ್ನು ಔಟ್‌ಪುಟ್ ನೀಡುತ್ತದೆ (ಶಿಫಾರಸು ಮಾಡಲಾಗಿದೆ). ಹಿಂದಿನ ಸೆಟ್ಟಿಂಗ್‌ಗಳನ್ನು ಮರುಸ್ಥಾಪಿಸಿ ಈ ಸಾಧನದಲ್ಲಿ ಸೆಟ್ಟಿಂಗ್‌ಗಳನ್ನು ಉಳಿಸಿ.

robots.txt ಬಳಸುವುದು ಹೇಗೆ

Allow/Disallow ಸೇರಿಸಿ

User-agent ಆಯ್ಕೆಮಾಡಿ ಮತ್ತು ನಿಯಮದ ಸಾಲುಗಳನ್ನು ಸೇರಿಸಿ.

Sitemap ಸೇರಿಸಿ (ಐಚ್ಛಿಕ)

ನೀವು ಅನೇಕ ಸೈಟ್‌ಮ್ಯಾಪ್ URL ಗಳನ್ನು ಸೇರಿಸಬಹುದು.

ನಕಲಿಸಿ ಮತ್ತು ಇರಿಸಿ

ಫಲಿತಾಂಶವನ್ನು ನಕಲಿಸಿ ಮತ್ತು ಅದನ್ನು /robots.txt ಆಗಿ ಉಳಿಸಿ.

ಉದಾಹರಣೆಗಳು

ಸುರಕ್ಷಿತ ಡಿಫಾಲ್ಟ್

ಎಲ್ಲವನ್ನೂ ಅನುಮತಿಸಿ ಮತ್ತು ಸೈಟ್‌ಮ್ಯಾಪ್ ಸೇರಿಸಿ.

User-agent: *
Disallow:

Sitemap: https://example.com/sitemap.xml

ಅಡ್ಮಿನ್ ನಿರ್ಬಂಧಿಸಿ

ಅಡ್ಮಿನ್ ಪ್ರದೇಶವನ್ನು ಮಾತ್ರ ನಿರ್ಬಂಧಿಸಿ.

User-agent: *
Disallow: /admin/

ಸ್ಟೇಜಿಂಗ್‌ಗಾಗಿ ಎಲ್ಲವನ್ನೂ ನಿರ್ಬಂಧಿಸಿ

ಅಪಾಯಕಾರಿ, ಪ್ರೊಡಕ್ಷನ್ ಅಲ್ಲದ ಸೈಟ್‌ಗಳಿಗಾಗಿ ಮಾತ್ರ.

User-agent: *
Disallow: /

robots.txt ಏನು ಮಾಡಬಹುದು

• robots.txt ಕ್ರಾಲರ್ ನಿಯಂತ್ರಣಕ್ಕಾಗಿ ಇರುತ್ತದೆ.
• ಇಂಡೆಕ್ಸ್ ನಿಯಂತ್ರಣವು ಪ್ರತ್ಯೇಕವಾಗಿದೆ ಮತ್ತು ಅದಕ್ಕೆ noindex ಅಗತ್ಯವಿರಬಹುದು.

ಸ್ಥಳ https://example.com/robots.txt

FAQ

ಇದು SEO ಅನ್ನು ಸುಧಾರಿಸುತ್ತದೆಯೇ?

robots.txt ಉದ್ದೇಶವು ಕ್ರಾಲರ್ ನಿಯಂತ್ರಣವಾಗಿದೆ ಮತ್ತು ಇದು ಶ್ರೇಯಾಂಕದ ಸುಧಾರಣೆಯನ್ನು ಖಾತರಿಪಡಿಸುವುದಿಲ್ಲ. ಅನಗತ್ಯ ಕ್ರಾನಿಂಗ್ ಅನ್ನು ಕಡಿಮೆ ಮಾಡಲು ಮತ್ತು ಪ್ರವೇಶವಿಲ್ಲದ ಪ್ರದೇಶಗಳನ್ನು ಸ್ಪಷ್ಟಪಡಿಸಲು ಇದನ್ನು ಬಳಸಿ.

Disallow: / ಅಪಾಯಕಾರಿಯೇ?

ಹೌದು. Disallow: / ಇಡೀ ಸೈಟ್ ಅನ್ನು ನಿರ್ಬಂಧಿಸುತ್ತದೆ. ಪ್ರೊಡಕ್ಷನ್ ಸೈಟ್‌ಗೆ ಇದನ್ನು ಅನ್ವಯಿಸುವುದು ಗಂಭೀರ ಪರಿಣಾಮ ಬೀರಬಹುದು. ಈ ಸಾಧನವು ಬಲವಾದ ಎಚ್ಚರಿಕೆಯನ್ನು ತೋರಿಸುತ್ತದೆ ಮತ್ತು ನಕಲಿಸುವ ಮೊದಲು ದೃಢೀಕರಣವನ್ನು ಕೇಳುತ್ತದೆ.

ನಾನು ಸೈಟ್‌ಮ್ಯಾಪ್ ಸಾಲುಗಳನ್ನು ಸೇರಿಸಬಹುದೇ?

ಹೌದು. Sitemap ಫೀಲ್ಡ್‌ನಲ್ಲಿ URL ಗಳನ್ನು ಸೇರಿಸಿ ಮತ್ತು ಸಾಧನವು Sitemap: ... ಸಾಲುಗಳನ್ನು ಔಟ್‌ಪುಟ್ ನೀಡುತ್ತದೆ (ಅನೇಕ URL ಗಳನ್ನು ಬೆಂಬಲಿಸುತ್ತದೆ).