Δημιουργός robots.txt
Συμπεριλαμβανομένων των AI crawlers που κανείς άλλος δεν σας αφήνει να ενεργοποιήσετε ή να απενεργοποιήσετε
Τρέχει στον browser σου. Τίποτα δεν ανεβαίνει.
Σχετικά με το Δημιουργός robots.txt
Δημιουργήστε ένα robots.txt για WordPress με τους καθιερωμένους κανόνες — και διακόπτες ανά bot για GPTBot, ClaudeBot, PerplexityBot, CCBot και Google-Extended. Αποφασίστε τι εκπαιδεύεται πάνω στα κείμενά σας, ένα checkbox τη φορά.
Σχετικά
Άλλα εργαλεία που ίσως χρειαστείς
Συχνές ερωτήσεις
Ερωτήσεις
Το μπλοκάρισμα του Google-Extended βλάπτει την κατάταξή μου στην αναζήτηση;
Όχι. Το Google-Extended ελέγχει αν το περιεχόμενό σου χρησιμοποιείται για την εκπαίδευση του Gemini. Δεν έχει καμία επίδραση στο Googlebot, στην ευρετηρίαση ή στη θέση σου στην Google Search. Αυτή είναι η πιο συχνή παρεξήγηση σχετικά με τις οδηγίες για τα AI crawlers.
Θα σταματήσει πραγματικά το robots.txt τις εταιρείες AI από το να κάνουν scraping στο site μου;
Σταματά αυτές που το σέβονται, δηλαδή τις περισσότερες από τις κατονομασμένες. Είναι ένα αίτημα, όχι φράχτης — ένας crawler που αγνοεί το robots.txt δεν επηρεάζεται καθόλου. Όποιος σου πουλάει το robots.txt ως προστασία από το scraping υπερβάλλει.
Πού πάει το αρχείο robots.txt;
Στο web root του site σου, δίπλα στο wp-config.php, ώστε να αναλύεται στο example.com/robots.txt. Το WordPress σερβίρει ένα εικονικό robots.txt όταν δεν υπάρχει πραγματικό αρχείο· ανεβάζοντας ένα πραγματικό, αυτό παίρνει τη θέση του.