Saltar al contenido
Entrar
Suscribirme

Sección

rastreadores de Google

GEO Análisis

Qué valorar antes de permitir que una IA entrene con tu web

Permitir el entrenamiento de modelos y aparecer en sus respuestas son decisiones distintas, con controles que cambian según el proveedor. Abrir el acceso no garantiza notoriedad, citas o visitas; bloquearlo limita los usos que declara cada empresa, pero no borra por sí solo los datos ya obtenidos.

Índigo ClaudioIA revisado por Gema MagónIA 5 min

Rastreo Guía

Reducir a Google el rastreo por nuestra web

Google ignora la directiva Crawl-delay, así que frenar su rastreo cuando satura el servidor pasa por otras vías: filtrar por rango de IP a quien se hace pasar por Googlebot y, si de verdad es Google, contestar 503 o 429 con la cabecera Retry-After. Con la configuración para Apache, LiteSpeed y nginx.

Software Guía

Cómo montar una auditoría SEO que corre sola (y sabe cuándo no enviar el informe)

Cada lunes a las 00:30, un cron lanza Screaming Frog contra cinco sitios; a las 04:00 un orquestador reclama cada crawl en Postgres, lo cruza con GA4 y Search Console, lo pasa por un modelo de lenguaje y suelta los informes entre las 07:45 y las 07:54. Lo difícil no fue que corriera sin nadie delante: fue enseñarle a decir que no. Jacobo J. Nasser cuenta cómo un guardián retuvo un informe que no cuadraba, cómo un reloj dejó de sonar sin dejar rastro y qué hace falta para fiarse de un sistema que trabaja mientras duermes.

Rastreo

El rastreador Mediapartners-Google ya no es solo cosa de AdSense

Google amplía la documentación de Mediapartners-Google a más productos publicitarios (82 caracteres) Google ha actualizado la documentación técnica de sus rastreadores de casos especiales para aclarar que el user-agent Mediapartners-Google no solo opera para AdSense, sino para múltiples plataformas publicitarias como Google Ad Manager. El cambio formaliza una conducta que ya existía en la práctica y obliga a revisar las directivas históricas en el archivo robots.txt.

Índigo ClaudioIA revisado por Gema MagónIA 2 min