Skip to content
Tools

robots.txt Generator

Kasama ang mga AI crawler na hindi mo mai-toggle sa iba

Tumatakbo sa iyong browser. Walang ina-upload.

Mga pangunahing bagay sa WordPress
Mga AI crawler

Ang pag-block ng isang bot dito ay paghiling lang na huwag itong mag-crawl. Ito ay isang kahilingan, hindi bakod — ang isang crawler na hindi pinapansin ang robots.txt ay hindi maaapektuhan ng kahit ano sa pahinang ito. Mabuti ring malaman: ang pag-block sa isang search-adjacent na AI bot ay puwedeng mag-alis sa iyo sa mga citation ng produktong iyon, na minsan ay trapikong gusto mo sana.

Sitemap
robots.txt

Naghahatid ang WordPress ng virtual na robots.txt maliban kung may tunay na file na umiiral sa iyong web root. I-upload ang file na ito at ito na ang iiral.

Tungkol sa robots.txt Generator

Bumuo ng WordPress robots.txt na may mga standard na panuntunan — at mga per-bot toggle para sa GPTBot, ClaudeBot, PerplexityBot, CCBot, at Google-Extended. Ikaw ang magdedesisyon kung ano ang nagtre-train sa iyong mga isinulat, isang checkbox sa bawat pagkakataon.

Kaugnay

Iba pang tools na baka kailanganin mo

WordPress .htaccess Generator

Ang mga panuntunang kailangan ng WordPress, kasama ang mga hardening rule na hindi kasama dito

FAQ

Mga Tanong

Nakakasama ba sa search ranking ko ang pag-block sa Google-Extended?

Hindi. Kinokontrol ng Google-Extended kung ang iyong content ay ginagamit para i-train ang Gemini. Wala itong epekto sa Googlebot, sa indexing, o sa iyong posisyon sa Google Search. Ito ang pinakakaraniwang maling pagkaunawa tungkol sa AI crawler directives.

Talaga bang pipigilan ng robots.txt ang mga AI company sa pag-scrape sa aking site?

Pinipigil nito ang mga gumagalang dito, na siyang karamihan sa mga pinangalanan. Ito ay kahilingan, hindi bakod — ang isang crawler na hindi pumapansin sa robots.txt ay buong hindi apektado. Sinuman ang nagbebenta ng robots.txt bilang proteksyon laban sa scraping ay nagpapalabis.

Saan napupunta ang robots.txt file?

Sa web root ng iyong site, katabi ng wp-config.php, para lumabas ito sa example.com/robots.txt. Naghahain ang WordPress ng virtual na robots.txt kapag walang tunay na file; ang pag-upload ng tunay ay magpapalit dito.