Si quieres analizar sitios web como un profesional del SEO debes usar la herramienta de rastreo de Screaming Frog. Podrás generar mapas del sitio XML, detectar enlaces no válidos, indexar sitios web ricos en JavaScript, comprobar los códigos de estado HTTP y mucho más. 

Para usarla, solo deberás descargar Screaming Frog descargar y escoger la versión que quieres usar. Encontrarás una versión gratuita y una de pago. En realidad, ambas te pueden ser muy útiles. Por supuesto, si quieres mayor rendimiento y tienes un proyecto más grande, la versión de pago es la mejor opción. 

En esta guía Screaming Frog encontrarás todas las ventajas que te ofrece la herramienta, la composición de sus Menús y cómo optimizar tus contenidos. Además, verás cómo puedes crawlear un sitio web y todas sus demás funciones. 

¿Qué es Screaming Frog?

Screaming Frog es una reconocida empresa de marketing digital que ha desarrollado una herramienta de SEO. Esta sirve para gestionar distintos tipos de auditorías en un sitio web determinado. De hecho, en la actualidad es uno de los rastreadores web más eficaces y populares dentro del mundo del SEO y marketing digital.

La herramienta te permite analizar tu sitio web de arriba a abajo y hasta lo más profundo. Lo mejor de todo es que puedes realizar el análisis de un sitio web propio, de un cliente o de tus competidores. Podrás revisar el estado de las urls y los enlaces internos y externos, e incluso hacer un mapa detallado y preciso de la estructura web.

Aunque es bastante popular, muchos no entienden por completo para qué sirve Screaming Frog. Esta es una herramienta relativamente fácil de usar y desarrollada para obtener información directa del sitio web que selecciones. Rastrea todas las páginas desde los enlaces contenidos en ella, así como desde la configuración del crawler y del fichero robots.txt. 

Parte de su éxito se debe al tiempo que ha tenido para su perfeccionamiento (gracias a esto se ha llevado varios premios a nivel mundial). En efecto, el diseño y desarrollo de Screaming Frog empezó en 2010. Desde entonces, han ido avanzado y agregando más y mejores funciones. 

Hasta la fecha, es una de las herramientas más completas de SEO que existen y que no debes dejar de usar. 

¿Entonces… para que sirve Screaming Frog?

Con esta guía y un poco de práctica podrás saber cómo usar Screaming Frog, ya que está diseñada para adaptarse a distintos niveles de conocimiento SEO. 

En primer lugar, la plataforma es útil para el análisis de datos en todo tipo de proyectos. Detecta errores internos de páginas, verifica todos enlaces que apuntan a redirecciones, analiza los problemas con title, H1 y descriptions, etc. 

Además, es perfecta para revisar todos los posibles errores en el enlazado interno y los errores de indexación. 

Aunque es una herramienta de pago, cuenta con una solidaria versión gratuita donde podrás analizar sitios web más modestos de hasta 500 URLs. Cuando veas todo su potencial te darás cuenta de que vale la pena invertir en su versión para su uso profesional.

De forma más específica, estas son algunas de las funciones en las que te puede ayudar Screaming Frog:  

• Podrás realizar auditorías SEO mucho más completas. 
• Funciona en distintos tipos de páginas web. Da igual que sea un e-commerce, un sitio web de servicios, un blog personal, etc.
• Ofrece información valiosa del estado de los distintos indicadores SEO.
• Podrás optimizar y corregir errores en las áreas adecuadas dentro de tu sitio web. 
• Podrás revisar las meta descripciones, titles y etiquetas de encabezado (H1, H2, H3). 
• Detectarás fácilmente las páginas con errores 4XX y 5XX. 
• Te permite optimizar y revisar URLs canónicas, rastreo de imágenes, enlaces internos y externos y redirecciones.
• Podrás detectar las URLs duplicadas y mejorar las directivas de enlaces.
• Te permite ver cómo está optimizado el snippet de las serps sin necesidad de acceder al sitio web. 

Además, funciona muy rápido y de forma precisa. Podrás encontrar nuevas funciones y mejoras en la plataforma. Sin duda, todo esto ha convertido a Screaming Frog en una herramienta totalmente consolidada. Es una de las mejores opciones para el análisis y la optimización del SEO de todo tipo de páginas web.

Primeros pasos: Descarga e instalación de Screaming Frog

Ahora que ya sabes qué es Screaming Frog, debes saber cómo usarla. Para empezar, ten en cuenta que es una herramienta intuitiva y que irás perfeccionando con su uso. Es verdaderamente sencilla, pero la gran cantidad de menús y opciones de configuración pueden hacer que te parezca algo confusa al principio. 

Pensando en esto, hemos sintetizado la información que debes conocer para ayudarte a dar los primeros pasos y sacar el máximo provecho a esta herramienta: 

¿Versión gratuita o de pago?

La versión de Screaming Frog más adecuada para ti dependerá de las necesidades específicas de tu página web. Por ejemplo, la versión gratuita de esta herramienta puede ser suficiente si: 

• Tienes un blog personal pequeño. 
• Te enfocas en nichos que tienen páginas web que no son muy grandes. 
• Incluso, si solo te dedicas a la programación. 

Con esta versión free podrás obtener prácticamente los mismos datos que con la licencia Screaming Frog. No obstante, tendrás la limitación de que solo funciona con sitios con menos de 500 URLs. Si tienes un sitio de mayor tamaño, también puedes hacer análisis con la herramienta, pero por subdominio o solo con las categorías principales. 

Por otra parte, cabe destacar que la licencia de Screaming Frog es bastante económica, considerando todas las funciones que ofrece. Es perfecta para un consultor SEO freelance con más experiencia y que tienen proyectos mucho más grandes. Permite hacer análisis de datos sin la limitación del número de las URLs. Además, tiene otras funciones.  

El precio anual de Screaming Frog tiene un coste aproximado de 130 euros. Incluye soporte técnico y funciones muy útiles como la validación de datos estructurados y páginas móviles aceleradas. También te permite la extracción de información personalizada del sitio web, pruebas de archivos robots, etc. 

Instalación de Screaming Frog

La instalación de esta herramienta es sumamente sencilla. Funciona como una aplicación de escritorio y la puedes descargar directamente desde su página web oficial. Para ello, tan solo tienes:

• Accede a la página oficial de Screaming Frog. 
• Presiona en el botón Download que verás en el menú principal. 
• Selecciona el sistema operativo de tu ordenador (Ubuntu, iOS o Windows). 
• Presiona en Next.
• La aplicación empezará a descargarse. Una vez lista, empieza el proceso de instalación. 
• Screaming Frog se instalará de forma automática. También puedes seleccionar si quieres añadir el acceso directo en el escritorio de tu ordenador.  
• Cuando esté listo el proceso, podrás abrir la herramienta para empezar a configurarla según tus preferencias. 

Configuración de Screaming Frog

En esta parte de la guía Screaming Frog sabrás cómo realizar la configuración de la herramienta de forma correcta. En primer lugar, debes tener en cuenta que podrás realizar distintos tipos de configuración para realizar los análisis que consideres pertinentes en el sitio web:  

• Custom Extraction y Custom Search. En este tipo de configuración podrás especificar expresiones xPath con las que podrás rastrear cierto tipo de elementos en el sitio web.   
• Firewalls.   
• Crawl text only vs JavaScript. Te permiten detectar un mayor número de incidencias. 
• Multi-Idioma y AMP.
• Configuración de rastreos programados. 

A continuación, conocerás los diferentes menús que encontrarás en la herramienta de Screaming Frog. 

Conoce los menús de Screaming Frog

Para de entender para qué sirve Screaming Frog es imprescindible reconocer los menús que ofrece y las distintas formas de configuración en ellos:  

El menú principal está situado en la parte superior. Ahí encontrarás las pestañas para Abrir archivos, Configurar la araña desde los robots.txt y la velocidad de crawleo. Además, con este menú tendrás las siguientes herramientas:

• Exportar archivos a niveles generales o específicos de las segmentaciones realizadas de los reportes.
• Visualizar la arquitectura de información o de ubicación de las URLs que quieras.
• Realizar análisis internos de comparación entre lo que has crawleado y lo que buscas.
• Podrás agregar o eliminar carpetas, subdominios y páginas de aterrizaje.
• Tendrás el modo de crawleo que permite importación de URLs desde un archivo.
• Podrás realizar la configuración de site maps a partir de crawleos determinados.
• Encontrarás la pestaña para validar la licencia de compra para la versión pro de Screaming Frog.
• Tienes a tu disposición el soporte al usuario, preguntas frecuentes, revisión de actualizaciones, etc.
• Podrás realizar un rastreo de asignación manual para URLs o crawleo usando un site map XML.

Más abajo del menú principal encontrarás el Menú de crawleo de sitios web (o barra de crawleo). Es justo en esta barra donde debes introducir la URL de la página web que deseas rastrear. Además, esta barra la puedes personalizar desde el menú principal para cambiar la forma de crawleo: por URL, importación de URLs y archivos .txt, .CSV, .xls y .xml.

Luego, abajo del menú de crawleo, encontrarás el Menú de Visualización principal. Con este menú tendrás acceso a las siguientes herramientas: 

• Podrás filtrar por categorías según las necesidades de tu búsqueda. 
• Te permite habilitar o deshabilitar distintas opciones.
• Verás la pestaña Sitemaps. Esta sirve para filtrar las URLs que están al interior y exterior del site map. Incluso, si están huérfanas o forman parte de varios sitemaps. 
• La pestaña Internal te permite revisar el detalle interno de cada una de las URLs que has agregado. Por su parte, en External podrás revisar los detalles externos.
• Podrás filtrar por HTTP o HTTPS en la opción de Protocol.
• En la opción de Responses code tienes la opción de filtrar directamente por códigos de respuesta. En URL verás los detalles técnicos de cada una.
• La opción de Directives te permite filtrar todas las URLs que tiene DoFollow, NoFollow, Index, No index, etc.
• En Page Titles podrás filtrar por Title usado, así como su longitud en caracteres y pixeles.
• La opción de Metadescription sirve para filtrar por las meta description usadas. En Meta Keywords podrás filtrar por las palabras clave.

También encontrarás las opciones H1, H2, Images, Canonicals, Hreflang, AJAX, AMP, Structured Data, PageSpeed, Custom Search o Custom Extraction. Además, en la opción de Analytics y Search Console podrás filtrar usando datos extraídos de Google Analytics y Search Console como el porcentaje de rebote o tasas de conversión.

Por otra parte, en la parte inferior encontrarás el Menú del Visualizador. Aquí encontrarás una serie de opciones que te permitirán ajustar ciertos detalles en cada URL:

• URL details
• Inlinks
• Outlinks
• Image Details
• Resource
• SERP snippet
• Rendered Page
• View Source
• Structured Data Details
• PageSpeed Detail

¿Cómo crawlear una web con Screaming Frog?

Es bastante sencillo Crawlear una web con Screaming Frog. Para empezar a probar esta herramienta y detectar los posibles errores de tu sitio solo debes insertar el nombre del dominio en el Menú de crawleo (abajo del menú principal) y pulsar en Start:

• Después de presionar en el botón Start, la herramienta empezará a rastrear el sitio. Es necesario que esperes a que se complete todo el proceso. 
• Según el tamaño del sitio web, este proceso puede tardar bastante. Generalmente, Screaming Frog no tarda más de 90 minutos en rastrear sitio webs de un tamaño medio. Debes tener paciencia. 
• Para ver como avanza el crawleo, en la parte superior de este menú podrás ver el progreso.
• Mientras tanto, en la parte inferior verás las URL totales, las procesadas y las que restan por procesar. 
• Generalmente, las URL totales van a ir aumentando mientras la herramienta vaya detectando nuevos enlaces.

No es necesario que vigiles todo el proceso, puedes minimizar la herramienta e ir trabajando en lo que necesites. Una vez finalizado el crawleo, podrás empezar a analizar los datos y detectar los problemas dentro del sitio web. Después, podrás proceder a optimizarlo.

Cómo excluir e incluir páginas a crawlear

Otra de las ventajas que te ofrece la plataforma es la posibilidad de excluir e incluir páginas para crawlear. De hecho, esta funcionalidad de Screaming Frog es una de las más preferidas por los usuarios. Es muy útil para reducir el tiempo de análisis y a optimizar los datos de una manera más organizada.

Para realizar la Exclusión de páginas a crawlear debes ajustarlo desde la pestaña Configuration > Exclude.

• Aquí podrás introducir las expresiones que quieras descartar. Por ejemplo, si no quieres incluir parámetros como el precio, puedes hacerlo poniendo el término de la siguiente manera: .*\?precio.*
• Además, con esta opción incluso puedes eliminar el crawleo de categorías de la misma manera. Por ejemplo: https://www.tusitioweb.com/.*/noticias.*

Por otra parte, para la inclusión de páginas para crawlear debes indicarle a la plataforma qué URLs quieres analizar. Este ajuste es perfecto para realizar el análisis de sólo un área en específico de tu sitio web. 

• Para encontrar las páginas con tu expresión regular, es necesario que empieces el crawl por una página web que la enlace.

Optimizar tus contenidos con Screaming Frog

En Screaming Frog encontrarás varias opciones para optimizar los contenidos de tu página web. Estas son algunas alternativas: 

• Podrás optimizar los títulos de tus páginas. La plataforma te muestra etiquetas de título perdidas o duplicadas, etiquetas de título largas/cortas, etiquetas de título no informativas, etc.
• Te permite identificar páginas con thin content. Así podrás encontrar el contenido malo o pobre y optimizarlo según las necesidades de tu sitio.
• Cuenta con opciones que permiten comprobar cómo se verá tu sitio web en los resultados de búsqueda de Google. Para hacerlo, solo debes introducir en uno de los resultados y presionar en el fragmento de SERP en el menú ubicado en la parte inferior. De esta forma, podrás ver cómo se muestran dichas páginas en los resultados del buscador.
• Encontrarás más fácilmente las páginas que tienen una lenta velocidad de carga. Aunque esta herramienta no indica directamente cuánto tiempo tarda en cargarse un sitio web, sí te indica cuando hay un problema con tu servidor. 

Otras funciones que puedes realizar con el herramienta Screaming Frog

Por último, estas son otras funciones que puedes aprovechar al descargar Screaming Frog. Recuerda que puedes realizar diversos ajustes de configuración y que irás mejorando su uso con la práctica. 

• Podrás crear o revisar un mapa del sitio. En el menú superior selecciona Sitemap > Crear sitemap XML.
• Comprueba los enlaces rotos en tu sitio web. Cuando finalice el rastreo, haz clic en el Código de respuesta, así podrás corregir las URL con el código de respuesta 4XX o 5XX.
• Podrás analizar la profundidad de tu página web para posicionarla mejor, también podrás optimizar el enlazamiento interno. En la columna de Inlinks podrás ver la relevancia que tiene cada URL. 
• Tendrás informes muy útiles que puedes analizar. El Errores Canonical es útil para sitios web en varios idiomas. El Rel next prev te muestra errores para la paginación SEO. El informe de páginas huérfanas te servirá para optimizar la vinculación interna del sitio.

Como puedes ver, Screaming Frog es una herramienta bastante útil para mejorar tu trabajo como consultor SEO. Descárgala ahora, sigue todos los consejos de nuestra guía y empieza a aprovechar todas sus ventajas.