Guía
Cómo editar el robots.txt en WordPress para gestionar bots de IA
Tres formas de editar el robots.txt en WordPress (plugin de SEO, archivo físico y virtual), cómo añadir reglas para bots de IA sin romper nada y cómo verificarlas.
En WordPress, el robots.txt puede ser un archivo físico en la raíz o uno virtual que genera el propio sistema o un plugin de SEO. Antes de editar, averigua cuál estás usando; si no, tus cambios pueden no hacer nada o quedar pisados.
Tipos
Qué tipo de robots.txt tienes
| Tipo | Cómo reconocerlo | Dónde se edita |
|---|---|---|
| Archivo físico | Existe robots.txt en la raíz vía FTP o administrador de archivos | Directamente en el archivo |
| Virtual de WordPress | No hay archivo, pero /robots.txt responde | Con un filtro o creando un archivo físico |
| Gestionado por plugin de SEO | Hay un editor en el plugin | En el editor del plugin |
Si existe el archivo físico, manda sobre cualquier versión virtual.
Pasos
Pasos para añadir una política de bots de IA
- Haz una copia del contenido actual.
- Genera las reglas con el generador de robots.txt con política de IA.
- Pégalas en el editor de tu plugin o en el archivo físico, conservando las reglas útiles que ya tenías (por ejemplo, Disallow de /wp-admin/ con la excepción de admin-ajax.php).
- Guarda y abre tudominio.com/robots.txt para confirmar que se ve la versión nueva.
- Valídalo con el comprobador de bots de IA y comprueba que Googlebot y Bingbot siguen permitidos.
Errores
Errores típicos en WordPress
- Marcar «Disuadir a los motores de búsqueda» en Ajustes, Lectura: genera un bloqueo y un noindex. Debe estar desmarcado en producción.
- Que el plugin de caché sirva una copia antigua del robots.txt: purga la caché tras editar.
- Un robots.txt físico olvidado que pisa el que gestiona el plugin.
- Perder el Sitemap al sobrescribir el archivo: vuelve a declararlo.
Verificar
Cómo verificar el resultado
Revisa el archivo en el navegador, pásalo por el comprobador y, en Search Console, mira si aparecen páginas bloqueadas que sí deberías posicionar. La referencia oficial del formato está en la guía de Google sobre robots.txt. Si quieres revisar el resto de tus cimientos, usa el comprobador de preparación para IA.
Resumen
En resumen
- Qué tipo de robots.txt tienes: Si existe el archivo físico, manda sobre cualquier versión virtual.
- Pasos para añadir una política de bots de IA: Haz una copia del contenido actual.; Genera las reglas con el generador de robots.txt con política de IA.
- Errores típicos en WordPress: Marcar «Disuadir a los motores de búsqueda» en Ajustes, Lectura: genera un bloqueo y un noindex.
- Cómo verificar el resultado: Revisa el archivo en el navegador, pásalo por el comprobador y, en Search Console, mira si aparecen páginas bloqueadas que sí deberías posicionar.
Preguntas frecuentes
Lo que suelen preguntar sobre editar robots.txt en WordPress
¿Puedo romper mi sitio editando el robots.txt?
No rompe la web, pero un error puede sacarla de los buscadores. Guarda una copia y verifica después.
¿Dónde está el robots.txt si no encuentro el archivo?
Probablemente es virtual; ábrelo en el navegador y revisa si lo gestiona tu plugin de SEO.