Məzmuna keç
Alətlər

robots.txt Generatoru

Başqa heç kəsin aç-bağla etməyə imkan vermədiyi AI kroulerləri də daxil olmaqla

Brauzerinizdə işləyir. Heç nə yüklənmir.

WordPress basics
AI crawlers

Blocking a bot here asks it not to crawl. It is a request, not a fence — a crawler that ignores robots.txt is unaffected by anything on this page. Also worth knowing: blocking a search-adjacent AI bot can remove you from that product's citations, which is sometimes traffic you wanted.

Sitemap
robots.txt

WordPress serves a virtual robots.txt unless a real file exists at your web root. Upload this file and it takes over.

robots.txt Generatoru haqqında

Standart qaydalarla WordPress robots.txt yaradın — və GPTBot, ClaudeBot, PerplexityBot, CCBot və Google-Extended üçün bot-bazlı aç-bağla düymələri ilə. Yazılarınız üzərində nəyin öyrədildiyinə bir dəfəyə bir işarə qutusu ilə qərar verin.

Əlaqəli

Ehtiyacınız ola biləcək digər alətlər

WordPress .htaccess Generatoru

WordPress-in ehtiyac duyduğu qaydalar, üstəgəl onunla birlikdə gəlməyən təhlükəsizlik qaydaları

FAQ

Suallar

Google-Extended-i bloklamaq axtarış reytinqimə zərər verir?

Xeyr. Google-Extended kontentinizin Gemini-ni öyrətmək üçün istifadə olunub-olunmadığını idarə edir. Onun Googlebot-a, indeksləməyə və ya Google Axtarışdakı mövqeyinizə heç bir təsiri yoxdur. Bu, AI kroler direktivləri haqqında ən çox yayılmış yanlış anlaşılmadır.

robots.txt həqiqətən AI şirkətlərinin saytımı qırıb götürməsini dayandıracaq?

O, ona hörmət edənləri dayandırır, ki bu da adı çəkilənlərin əksəriyyətidir. Bu, xahişdir, hasar deyil — robots.txt-i görməzdən gələn kroler ona heç təsirlənmir. robots.txt-i qırıb götürməyə qarşı qoruma kimi satan hər kəs onu şişirdir.

robots.txt faylı hara qoyulur?

Saytınızın veb kökündə, wp-config.php ilə yanaşı, beləliklə o, example.com/robots.txt ünvanında açılır. Real fayl olmadıqda WordPress virtual robots.txt təqdim edir; real birini yükləmək onun yerini alır.