Cómo leer los logs del servidor para ver qué bots de IA te visitan

Cómo encontrar y filtrar los registros de acceso de tu servidor para saber qué bots de IA te rastrean, con qué frecuencia y qué páginas visitan.

Los registros de acceso del servidor son la fuente más directa para saber quién te visita. Con ellos ves qué bots entran, qué páginas piden y si reciben errores, sin depender de herramientas externas.

Dónde están los registros

En un hosting compartido, suele haber una sección de «Registros de acceso» o «Raw Access» en el panel. En un VPS, normalmente son archivos de texto del servidor web. Si usas un CDN, también puedes ver las analíticas de tráfico del proveedor. Descarga un día o una semana, no más al principio.

Qué buscar

Qué filtrarPara qué
User-Agent con nombre de bot (GPTBot, ClaudeBot, PerplexityBot)Saber qué bots visitan
Códigos 403, 404, 429, 5xxDetectar bloqueos y errores
Rutas más pedidasVer qué páginas les interesan
Frecuencia por horaDetectar picos de carga

Cuidado con los nombres falsos

Cualquiera puede escribir «GPTBot» en su cabecera. Si necesitas certeza, verifica por IP con la información que publica cada empresa. Para análisis general, el nombre sirve como indicio, no como prueba.

Qué hacer con lo que encuentres

  • Si un bot de búsqueda con IA recibe 403, revisa el cortafuegos (guía).
  • Si un bot genera carga excesiva, limita la velocidad en lugar de bloquear a todos.
  • Si ves visitas a páginas que no existen, corrige enlaces rotos.
  • Compara con el comprobador de bots de IA para confirmar que tu política y lo que ocurre coinciden.

En resumen

  • Dónde están los registros: En un hosting compartido, suele haber una sección de «Registros de acceso» o «Raw Access» en el panel.
  • Cuidado con los nombres falsos: Cualquiera puede escribir «GPTBot» en su cabecera.
  • Qué hacer con lo que encuentres: Si un bot de búsqueda con IA recibe 403, revisa el cortafuegos (guía).; Si un bot genera carga excesiva, limita la velocidad en lugar de bloquear a todos.

Lo que suelen preguntar sobre logs del servidor bots de IA

¿Necesito herramientas de pago?

No para empezar: un editor de texto o una hoja de cálculo sirven para filtrar un día de registros.

¿Los registros incluyen datos personales?

Pueden incluir direcciones IP. Trátalos con cuidado y según la normativa de privacidad aplicable.