En respuesta a preguntas sobre la etiqueta de meta robots que incluye una directiva de index y follow, John Mueller de Google aclara cómo Google realmente maneja este aspecto.
Entendiendo la Meta Etiqueta Robots
Desglosemos la jerga técnica. El elemento meta HTML sirve como un comunicador de información que máquinas, como Googlebot, pueden entender. Entre varios elementos meta, el Elemento Meta Robots se destaca porque guía a los rastreadores de motores de búsqueda. La información comunicada por la etiqueta meta robots es un conjunto de instrucciones que le dicen a los rastreadores robóticos qué hacer.
Una instrucción comúnmente utilizada es la etiqueta meta “noindex, nofollow”:
<meta name=”robots” content=”noindex, nofollow”>
Esto esencialmente le dice a los rastreadores de motores de búsqueda que no incluyan el contenido de la página web en los resultados de búsqueda y que no sigan ningún enlace. Por otro lado, la etiqueta meta “index, follow” ampliamente utilizada instruye a los motores de búsqueda para incluir el contenido en los resultados de búsqueda y seguir todos los enlaces.
Efecto de omitir la Etiqueta Index
Imagina esto como una pieza de información faltante en el rompecabezas. Un usuario de Reddit estaba confundido sobre una etiqueta ‘index’ faltante en fragmentos meta. La respuesta de Mueller fue esclarecedora: tanto las instrucciones “index” como “follow” son ignoradas por Google. No es tan crítico como parece, y no funciona de la manera que muchos piensan.
Por qué Google Ignora Robots Index & Follow
Google ignora la meta etiqueta “index, follow” debido a que indexar contenido y seguir enlaces son comportamientos predeterminados para los rastreadores de motores de búsqueda. Las pautas de Google enfatizan que estos valores predeterminados, “index, follow”, no necesitan mención explícita. Si una directiva particular no está explícitamente listada en las directivas válidas de Google, Googlebot simplemente la ignorará.
¿Es Index, Follow completamente ineficaz?
Ahora, abordemos un concepto erróneo común. Para Googlebot, usar <meta name=”robots” content=”index, follow”> es como decirle a un chef que quieres sal cuando ellos ya agregan sal por defecto. Es redundante y se pasa por alto. Bing, otro motor de búsqueda, tiene una postura similar con algunas diferencias matizadas.
En resumen, aunque la directiva “index, follow” podría no ser tan impactante como se percibe, es crucial comunicar claramente en las prácticas de SEO. La claridad ayuda a disipar conceptos erróneos sobre la funcionalidad de ciertas etiquetas meta.
Citas de John Mueller:
- La etiqueta meta robots “index” no tiene función (al menos en Google) – es completamente ignorada. También “follow”.
- Google tiene documentación donde se enumeran las etiquetas meta que tienen funciones. Puedes usar cualquier otra cosa; será ignorada.
- Por defecto, asumimos “index”, pero si es necesario, puedes usar <meta name=”robots” content=”index”> para indicar explícitamente que podemos indexar la página.
- Por defecto, asumimos “follow”, pero puedes indicar explícitamente “follow” si así lo deseas.
