robots.txt Generatoru
Başqa heç kəsin aç-bağla etməyə imkan vermədiyi AI kroulerləri də daxil olmaqla
Brauzerinizdə işləyir. Heç nə yüklənmir.
robots.txt Generatoru haqqında
Standart qaydalarla WordPress robots.txt yaradın — və GPTBot, ClaudeBot, PerplexityBot, CCBot və Google-Extended üçün bot-bazlı aç-bağla düymələri ilə. Yazılarınız üzərində nəyin öyrədildiyinə bir dəfəyə bir işarə qutusu ilə qərar verin.
Əlaqəli
Ehtiyacınız ola biləcək digər alətlər
Tez-tez verilən suallar
Suallar
Google-Extended-i bloklamaq axtarış reytinqimə zərər verir?
Xeyr. Google-Extended kontentinizin Gemini-ni öyrətmək üçün istifadə olunub-olunmadığını idarə edir. Onun Googlebot-a, indeksləməyə və ya Google Axtarışdakı mövqeyinizə heç bir təsiri yoxdur. Bu, AI kroler direktivləri haqqında ən çox yayılmış yanlış anlaşılmadır.
robots.txt həqiqətən AI şirkətlərinin saytımı qırıb götürməsini dayandıracaq?
O, ona hörmət edənləri dayandırır, ki bu da adı çəkilənlərin əksəriyyətidir. Bu, xahişdir, hasar deyil — robots.txt-i görməzdən gələn kroler ona heç təsirlənmir. robots.txt-i qırıb götürməyə qarşı qoruma kimi satan hər kəs onu şişirdir.
robots.txt faylı hara qoyulur?
Saytınızın veb kökündə, wp-config.php ilə yanaşı, beləliklə o, example.com/robots.txt ünvanında açılır. Real fayl olmadıqda WordPress virtual robots.txt təqdim edir; real birini yükləmək onun yerini alır.