Generador de robots.txt
Incluidos los rastreadores de IA que nadie más te deja activar o desactivar
Funciona en tu navegador. No se sube nada.
Sobre Generador de robots.txt
Genera un robots.txt de WordPress con las reglas estándar, y con interruptores por bot para GPTBot, ClaudeBot, PerplexityBot, CCBot y Google-Extended. Decide qué se entrena con lo que escribes, una casilla a la vez.
Relacionadas
Otras herramientas que puedes necesitar
FAQ
Preguntas
¿Bloquear Google-Extended perjudica mi posicionamiento en búsquedas?
No. Google-Extended controla si tu contenido se usa para entrenar Gemini. No tiene ningún efecto sobre Googlebot, sobre la indexación ni sobre tu posición en Google Search. Este es el malentendido más común sobre las directivas para crawlers de IA.
¿Realmente el robots.txt impedirá que las empresas de IA rastreen mi sitio?
Detiene a las que lo respetan, que son la mayoría de las que tienen nombre. Es una petición, no una valla: un crawler que ignora el robots.txt no se ve afectado en absoluto. Cualquiera que te venda el robots.txt como protección contra el scraping está exagerando.
¿Dónde va el archivo robots.txt?
En la raíz web de tu sitio, junto a wp-config.php, para que se resuelva en example.com/robots.txt. WordPress sirve un robots.txt virtual cuando no existe un archivo real; subir uno real lo reemplaza.