Πρότυπο robots.txt

Γεννήτρια robots.txt (Επιλέξτε Allow/Disallow για να δημιουργήσετε ένα πρότυπο)

Q: "Θα βελτιώσει αυτό το SEO;"

"Ο σκοπός του robots.txt είναι ο έλεγχος της ανίχνευσης και δεν εγγυάται βελτιώσεις στην κατάταξη. Χρησιμοποιήστε το για να μειώσετε την περιττή ανίχνευση και να αποσαφηνίσετε τις απαγορευμένες περιοχές."

Q: "Είναι το Disallow: / επικίνδυνο;"

"Ναι. Το Disallow: / αποκλείει ολόκληρο τον ιστότοπο. Η εφαρμογή του στην παραγωγή μπορεί να έχει σοβαρές επιπτώσεις. Αυτό το εργαλείο εμφανίζει μια ισχυρή προειδοποίηση και απαιτεί επιβεβαίωση πριν από την αντιγραφή."

Q: "Μπορώ να προσθέσω γραμμές sitemap;"

"Ναι. Προσθέστε URL στο πεδίο Sitemap και το εργαλείο εξάγει γραμμές Sitemap: ... (υποστηρίζονται πολλαπλά URL)."

Επιλέξτε κανόνες Allow/Disallow για να δημιουργήσετε γρήγορα ένα πρότυπο robots.txt. Αυτή η γεννήτρια απλοποιεί τις ρυθμίσεις αποκλεισμού ανιχνευτών.

Στόχος είναι ο έλεγχος της ανίχνευσης. Δεν εγγυάται βελτιώσεις στην κατάταξη.

Η επεξεργασία γίνεται τοπικά στο πρόγραμμα περιήγησής σας.

Γεννήτρια προτύπων robots.txt

Έτοιμο για επικόλληση ως robots.txt.

Σκοπός προεπιλογής

Ξεκινήστε από ένα πρότυπο που βρίσκεται πιο κοντά στο στόχο σας.

Ξεκινήστε από το μηδέν (προεπιλογή) Ξεκινήστε με ένα κενό, ασφαλές πρότυπο. Staging (αποκλεισμός όλων) Περιλαμβάνει το Disallow: / και είναι επικίνδυνο για περιβάλλοντα παραγωγής. Κίνδυνος Αποκλεισμός μόνο διαχειριστή (παράδειγμα) Παράδειγμα: Disallow /admin/.

Προσθήκη γραμμών Sitemap

Sitemap

Επιτρέπονται πολλαπλές γραμμές. Κάθε έγκυρο URL γίνεται μια γραμμή Sitemap:.

Προεπισκόπηση

Έτοιμο για επικόλληση ως robots.txt.

Επιλογές

Για προχωρημένους

Ανοίξτε όταν χρειάζεται

Crawl-delay Δευτερόλεπτα. Ορισμένοι ανιχνευτές το αγνοούν. Προσθήκη γραμμής σχολίου Προσθέτει ένα σχόλιο στην κορυφή.

Ρητό κενό Disallow Εξάγει το Disallow: ακόμα και χωρίς κανόνες (συνιστάται). Επαναφορά προηγούμενων ρυθμίσεων Αποθήκευση ρυθμίσεων σε αυτήν τη συσκευή.

Πώς να χρησιμοποιήσετε το robots.txt

Προσθήκη Allow/Disallow

Επιλέξτε ένα User-agent και προσθέστε γραμμές κανόνων.

Προσθήκη Sitemap (προαιρετικά)

Μπορείτε να προσθέσετε πολλαπλά URL sitemap.

Αντιγραφή και τοποθέτηση

Αντιγράψτε το αποτέλεσμα και αποθηκεύστε το ως /robots.txt.

Παραδείγματα

Ασφαλής προεπιλογή

Να επιτρέπονται τα πάντα και προσθήκη ενός sitemap.

User-agent: *
Disallow:

Sitemap: https://example.com/sitemap.xml

Αποκλεισμός διαχειριστή

Αποκλεισμός μόνο της περιοχής διαχειριστή.

User-agent: *
Disallow: /admin/

Αποκλεισμός όλων για staging

Επικίνδυνο, μόνο για περιβάλλοντα εκτός παραγωγής.

User-agent: *
Disallow: /

Τι μπορεί να κάνει το robots.txt

• Το robots.txt είναι για τον έλεγχο της ανίχνευσης.
• Ο έλεγχος ευρετηρίασης είναι ξεχωριστός και μπορεί να απαιτεί noindex.

Τοποθεσία https://example.com/robots.txt

FAQ

Θα βελτιώσει αυτό το SEO;

Ο σκοπός του robots.txt είναι ο έλεγχος της ανίχνευσης και δεν εγγυάται βελτιώσεις στην κατάταξη. Χρησιμοποιήστε το για να μειώσετε την περιττή ανίχνευση και να αποσαφηνίσετε τις απαγορευμένες περιοχές.

Είναι το Disallow: / επικίνδυνο;

Ναι. Το Disallow: / αποκλείει ολόκληρο τον ιστότοπο. Η εφαρμογή του στην παραγωγή μπορεί να έχει σοβαρές επιπτώσεις. Αυτό το εργαλείο εμφανίζει μια ισχυρή προειδοποίηση και απαιτεί επιβεβαίωση πριν από την αντιγραφή.

Μπορώ να προσθέσω γραμμές sitemap;

Ναι. Προσθέστε URL στο πεδίο Sitemap και το εργαλείο εξάγει γραμμές Sitemap: ... (υποστηρίζονται πολλαπλά URL).