Robots.txt – Disallow erroneo

Pequeño ejemplo de cómo una mala configuración del fichero robots.txt te puede dar la tarde.

Resulta que Google no encajaba bien la web versión móvil de un cliente. Una versión diseñada específicamente para dispositivos móviles, no responsive. Al revisar el Google Search Console, vimos que indicaba muchos errores con el mismo motivo: la web no estaba diseñada para móbil… Ummm si la visitas se ve en formato móvil (no responsive) y en cambio, Google no la acepta como móvil.

Si profundizamos un poco más, vemos una previsualización de cómo Google visiona la web, y efectivamente Google no aplica las hojas de estilo correctas. Es más, no carga las hogas de estilo y muchas de las imágenes.

En definitiva: si visitas la web con móvil se ve. Si la visitan las arañas de Google no la ven. Por tanto es algo que limitamos al robot de Google. ¿Desde dónde se limita la carga de ficheros a los robots? Nos toca revisar el fichero robots.txt

Al revisar Robots.txt vemos que efectivamente habíamos deshabilitado que los robots entraran diversas carpetas, entre las que estaban las hojas de estilo de la vista para móvil.

Por lo tanto, a la hora de configurar el fichero Robots.txt tened en cuenta que no debéis deshabilitar el contenido necesario para el robot de Google pueda explorar e indexar vuestra página. Deshabilitar lo estrictamente necesario.

Artículos relacionados

Google – Resultados enriquecidos Una vez Google os indexa la página web, igual queréis que al salir en los resultados al hacer una búsqueda, mostréis información estructurada como pre...
Introducción al SEM Si SEO se encarga de la optimización de las páginas web para posicionarla en los buscadores, SEM trata todo lo relacionado con la promoción y aparició...
Optimización página web – Paso 3 – Velocidad Cache... Uno de los puntos que Google tiene en cuenta a la hora de posicionarnos, es la utilización de la caché para los elementos estáticos (imágenes, javascr...
Internacionalización de páginas web Hasta ahora, cuando queríamos indicarle a Google que la página también está disponible en otros idiomas, lo hacíamos con 'metaetiquetas'. Supongamo...

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *

*