Robots.txt – Disallow erroneo

Pequeño ejemplo de cómo una mala configuración del fichero robots.txt te puede dar la tarde.

Resulta que Google no encajaba bien la web versión móvil de un cliente. Una versión diseñada específicamente para dispositivos móviles, no responsive. Al revisar el Google Search Console, vimos que indicaba muchos errores con el mismo motivo: la web no estaba diseñada para móbil… Ummm si la visitas se ve en formato móvil (no responsive) y en cambio, Google no la acepta como móvil.

Si profundizamos un poco más, vemos una previsualización de cómo Google visiona la web, y efectivamente Google no aplica las hojas de estilo correctas. Es más, no carga las hogas de estilo y muchas de las imágenes.

En definitiva: si visitas la web con móvil se ve. Si la visitan las arañas de Google no la ven. Por tanto es algo que limitamos al robot de Google. ¿Desde dónde se limita la carga de ficheros a los robots? Nos toca revisar el fichero robots.txt

Al revisar Robots.txt vemos que efectivamente habíamos deshabilitado que los robots entraran diversas carpetas, entre las que estaban las hojas de estilo de la vista para móvil.

Por lo tanto, a la hora de configurar el fichero Robots.txt tened en cuenta que no debéis deshabilitar el contenido necesario para el robot de Google pueda explorar e indexar vuestra página. Deshabilitar lo estrictamente necesario.

Artículos relacionados

Internacionalización de páginas web Hasta ahora, cuando queríamos indicarle a Google que la página también está disponible en otros idiomas, lo hacíamos con 'metaetiquetas'. Supongamo...
Directrices Google para webmasters Cada cierto tiempo, en el blog de webmasters de Google van publicando artículos y resúmenes de las directrices que debemos seguir los que desarrollamo...
Google y los fragmentos enriquecidos Os dejo un par de enlaces para el que quiera iniciarse en los fragmentos enriquecidos de Google. Mediante esta técnica podemos facilitar la informació...
Validar ficheros Sitemap Si bien, en Webmastertools de Google puedes validar los ficheros sitemap, aquí os dejo un enlace que os puede interesar que valida diferentes tipos de...

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

*