Robots.txt – Disallow erroneo

Pequeño ejemplo de cómo una mala configuración del fichero robots.txt te puede dar la tarde.

Resulta que Google no encajaba bien la web versión móvil de un cliente. Una versión diseñada específicamente para dispositivos móviles, no responsive. Al revisar el Google Search Console, vimos que indicaba muchos errores con el mismo motivo: la web no estaba diseñada para móbil… Ummm si la visitas se ve en formato móvil (no responsive) y en cambio, Google no la acepta como móvil.

Si profundizamos un poco más, vemos una previsualización de cómo Google visiona la web, y efectivamente Google no aplica las hojas de estilo correctas. Es más, no carga las hogas de estilo y muchas de las imágenes.

En definitiva: si visitas la web con móvil se ve. Si la visitan las arañas de Google no la ven. Por tanto es algo que limitamos al robot de Google. ¿Desde dónde se limita la carga de ficheros a los robots? Nos toca revisar el fichero robots.txt

Al revisar Robots.txt vemos que efectivamente habíamos deshabilitado que los robots entraran diversas carpetas, entre las que estaban las hojas de estilo de la vista para móvil.

Por lo tanto, a la hora de configurar el fichero Robots.txt tened en cuenta que no debéis deshabilitar el contenido necesario para el robot de Google pueda explorar e indexar vuestra página. Deshabilitar lo estrictamente necesario.

Artículos relacionados

Google PageSpeed Si no conoces esta herramienta, tienes todos los números que tu web no esté bien posicionada en Google. Esta herramienta online, te permite saber que ...
Google y los fragmentos enriquecidos Os dejo un par de enlaces para el que quiera iniciarse en los fragmentos enriquecidos de Google. Mediante esta técnica podemos facilitar la informació...
Comprobar enlaces rotos El tener una página web con todos los enlaces correctos es mas importante de lo que se cree. De ello depende en gran medida que buscadores como Google...
Google – Resultados enriquecidos Una vez Google os indexa la página web, igual queréis que al salir en los resultados al hacer una búsqueda, mostréis información estructurada como pre...

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

*