Término técnico
Volver
Crawling
RastreoCrawling es el recorrido que hacen los bots por las URLs de una web. Es el primer paso: antes de indexar, resumir o valorar una página, el sistema tiene que encontrarla y poder leerla.
Qué significa Crawling
Crawling: Crawling es el recorrido que hacen los bots por las URLs de una web. Es el primer paso: antes de indexar, resumir o valorar una página, el sistema tiene que encontrarla y poder leerla.
Área AISEO: Rastreo. Esta etiqueta ayuda a situar el término dentro del glosario y a entender si pertenece a rastreo, semántica, rendimiento, seguridad, IA, accesibilidad o certificación.
Importa porque lo que no se rastrea bien queda fuera de juego. Una arquitectura clara facilita el recorrido y reduce pérdidas de tiempo en páginas inútiles.
- Revisar la respuesta real del servidor y no solo la apariencia visual.
- Comprobar robots.txt, estados HTTP, sitemap y reglas de indexación.
- Priorizar las URLs importantes y reducir rutas sin valor.
- Validar los cambios tras migraciones, redirecciones o ajustes de plantilla.
Errores habituales
Dar por hecho que Crawling funciona sin revisar la respuesta real del servidor.
Bloquear o esconder URLs importantes por una regla demasiado amplia.
Dejar rutas antiguas generando ruido de rastreo.
No comprobar logs, estados HTTP o herramientas de rastreo tras los cambios.
Preguntas frecuentes sobre Crawling
¿Qué es Crawling?
Crawling es el recorrido que hacen los bots por las URLs de una web. Es el primer paso: antes de indexar, resumir o valorar una página, el sistema tiene que encontrarla y poder leerla.
¿Por qué conviene revisar Crawling?
Importa porque lo que no se rastrea bien queda fuera de juego. Una arquitectura clara facilita el recorrido y reduce pérdidas de tiempo en páginas inútiles.
¿Cómo se trabaja Crawling en AISEO?
Revisar la respuesta real del servidor y no solo la apariencia visual. Comprobar robots.txt, estados HTTP, sitemap y reglas de indexación. Priorizar las URLs importantes y reducir rutas sin valor.