El laboratorio AEO local: lo que una trampa de crawlers nos enseñó sobre visibilidad en IA
Medio millón de peticiones de bots en dos días, un soft-404 universal y un centro de negocios en Elda: primeras lecciones del laboratorio AEO público de Blobic.
Antes de relanzar blobic.com miramos su tráfico en Cloudflare. Los números parecían magníficos: cientos de miles de peticiones al día. La realidad fue una lección sobre cómo se comportan de verdad los crawlers de IA — y sobre por qué la higiene técnica es la mitad menos glamurosa del AEO.
La trampa de crawlers que encontramos en nuestro propio dominio
El sitio anterior respondía a cualquier URL — cualquiera — con HTTP 200 y la misma portada. Sin 404 reales. Para un crawler, eso convierte el dominio en un espacio infinito de páginas duplicadas: cada enlace relativo malformado genera nuevas URLs rastreables sin fin. En dos días, un solo crawler de IA hizo más de medio millón de peticiones persiguiendo rutas basura recursivas como /economia/js/css/favicon.ico.
Ese tráfico lucía impresionante en un dashboard. En realidad estaba enseñando a los motores de IA que el dominio era un montón interminable de ruido idéntico. La solución fue aburrida y contundente: un sitio estático que devuelve 404 reales, más redirecciones 301 para las URLs antiguas que aún tienen valor — los feeds temáticos apuntan ahora a nuestro RSS y las secciones locales históricas, a las páginas del laboratorio.
Lo que el piloto de Elda sigue enseñando
El primer caso del laboratorio, un centro de negocios real en Elda, sigue el mismo patrón: los bloqueos casi nunca son exóticos. Una capa de gestión de bots inyectaba reglas robots contradictorias para los crawlers de IA. El formulario de contacto no enviaba. El sitemap listaba dos páginas. No existían páginas por servicio. Nada de esto aparece en un deck de content marketing, y todo ello limita tu visibilidad antes incluso de que el contenido importe.
- Verifica, con peticiones reales, que GPTBot, ClaudeBot, PerplexityBot y Googlebot reciben 200 en tus páginas clave.
- Mata los soft-404: las rutas desconocidas deben devolver 404, no una portada disfrazada.
- Redirige las URLs antiguas con intención: feeds a feeds, secciones a su equivalente moderno, basura a ninguna parte.
- Después mide prompts de forma repetida: la visibilidad es una probabilidad, no un pantallazo.
Cada caso del laboratorio se documenta en público — incluido lo que se resiste, como cachés externas que siguen mostrando la dirección antigua de un negocio semanas después de corregir su web. Esa honestidad es el propósito: es el mismo sistema que revenden nuestras agencias partner, mostrado funcionando a plena luz.