Qué mide este check
Este check revisa si la página declara instrucciones de indexación mediante meta robots de forma clara y coherente.
La señal más habitual aparece en el HTML de la página:
<meta name="robots" content="index,follow">También puede existir una cabecera HTTP equivalente, como X-Robots-Tag. El problema aparece cuando ambas señales se contradicen o bloquean una URL que debería poder rastrearse o indexarse.
Por qué importa en AISEO
Una página técnicamente correcta puede quedar invisible si declara mal sus directivas robots. Un simple noindex accidental puede impedir que Google, crawlers técnicos o motores de IA consideren ese contenido.
AISEO no mira solo si existe una etiqueta. Lo importante es si la instrucción ayuda o bloquea la comprensión de la página.
- Un noindex accidental puede excluir contenido importante.
- Un nofollow mal usado en páginas estratégicas puede cortar el flujo de rastreo interno.
- Cabeceras HTTP y metaetiquetas contradictorias generan señales ambiguas.
Cómo comprobarlo paso a paso
Revisa el HTML
Busca la etiqueta meta name="robots" dentro del head y comprueba si contiene directivas como index, noindex, follow o nofollow.
Comprueba cabeceras HTTP
Valida si el servidor está enviando una cabecera X-Robots-Tag. Esta señal puede bloquear la indexación de una página aunque el HTML parezca correcto.
Contrasta la intención de la URL
Una página estratégica debe poder indexarse. Una página privada, duplicada o técnica puede requerir noindex. El valor depende del contexto.
Evita directivas redundantes
Cuanto más simple sea la instrucción, menor riesgo de contradicción. Index/follow suele ser suficiente cuando la página debe posicionar.
Ejemplo de configuración correcta
Una página pública que debe posicionar no debería bloquear la indexación ni cortar el seguimiento de enlaces internos.
<meta name="robots" content="index,follow">- La página no está bloqueada por noindex si debe posicionar.
- No existe contradicción con X-Robots-Tag.
- Las instrucciones son simples, legibles y no redundantes.
Errores frecuentes
- Dejar noindex en producción después de una fase de desarrollo.
- Bloquear URLs importantes desde un plugin SEO sin revisar la plantilla.
- Enviar una cabecera X-Robots-Tag: noindex desde servidor sin saberlo.
- Usar directivas demasiado complejas o contradictorias.
Checklist final
- La directiva robots coincide con el objetivo real de la página.
- No hay noindex accidental en URLs públicas estratégicas.
- No hay contradicción entre meta robots y X-Robots-Tag.
- La instrucción es sencilla y comprensible para crawlers.