La etiqueta "noindex" es una etiqueta HTML que se aplica a una o varias páginas/recursos de un sitio web para indicar a los motores de búsqueda que no deben incluir esa(s) página(s) dentro de los resultados del índice de búsqueda.
Funciona igualmente para eliminar páginas o recursos previamente indexados. Cuando Google u otro motor de búsqueda la rastree nuevamente, este se eliminará de los resultados, incluso si existen enlaces internos o externos que apunten a ella.
IMPORTANTE
La directiva noindex no debe confundirse con el sistema de bloqueo robots.txt. Google no indexa una página con un bloqueo de archivo robots.txt, pero si existe un enlace hacia esa página bloqueada por el archivo robots.txt esta se terminará indexando.
De igual manera, una página previamente indexada que desea ser eliminada, no debe ser bloqueada por un archivo robots.txt o cualquier otro tipo de bloqueo que impida el rastreo de ella. El rastreador no podrá acceder a la página y ver la etiqueta noindex, por lo tanto, y en la mayoría de los casos, seguirá apareciendo en los resultados de búsqueda.
Aplica la siguiente etiqueta <meta> en la sección <head> de la página que no quieras indexar o eliminar de los resultados de búsqueda:
<meta name="robots" content="noindex">Esto es todo lo que tienes que hacer para impedir que la mayoría de los motores de búsqueda indexen una página de tu sitio.
En vez de usar una etiqueta meta, puedes utilizar un encabezado de respuesta HTTP para recursos que no sean HTML (archivos PDF, vídeo e imagen): X-Robots-Tag con los valores noindex o none.
Ejemplo:
HTTP/1.1 200 OK
(…)
X-Robots-Tag: noindex
(…)Existe un sinnúmero de formas de cuándo hacer uso de noindex y cada caso es distinto. Si se emplea incorrectamente, la etiqueta noindex puede dañar tu sitio web.
Esta etiqueta se utiliza generalmente en páginas de inicio de sesión, páginas de pago, contenido delgado (de poco valor o poco contenido), repetitivo o duplicado (depende), páginas de destino de anuncios, archivos de blog, páginas de autor y etiquetas, etc.
Siendo objetivos, páginas irrelevantes y/o que no aportan valor al usuario.
Usar la etiqueta noindex en páginas con contenido duplicado puede ser un error. La canonicalización o etiqueta rel=canonical es el método más efectivo para lidiar con el contenido duplicado.
Google menciona:
No recomendamos bloquear el acceso de los rastreadores al contenido duplicado de tu sitio web.
Una canonicalización bien ejecutada indicará a Google cuál es la URL que debe rastrear con mayor frecuencia y en la mayoría de los casos la que debe mostrarse en los resultados del buscador. Solo ten en cuenta que aunque selecciones específicamente una página canónica, Google puede elegir otra distinta a la tuya por varios motivos, como su rendimiento o su contenido.
Despreocúpate por una penalización por contenido duplicado, Google sabe exactamente cuando se duplica el contenido deliberadamente en un mismo sitio web o en diferentes dominios, con el objetivo de engañar y manipular los resultados de búsqueda.
Cuando el contenido duplicado suponga un rastreo excesivo del sitio, puedes editar el ajuste de frecuencia de rastreo en Google Search Console.
Ejemplo:
Im Search Engine cuenta con un sinfín de artículos excepcionales que se encuentran en nuestra área de blog. Tanto los artículos como la sección /blog/ están indexados, además, cada artículo está segmentado en una o varias categorías, es decir, un listado.
¿Este listado es valioso y aporta valor al usuario? Sí, ayuda a la navegación del usuario, ¡se indexa!
WordPress trae por defecto la opción de disuadir a la mayoría de los motores de búsqueda, pero cuidado, esta opción no es un noindex como tal. Esta casilla modifica el archivo robots.txt, y en la mayoría de los casos impide a los motores de búsqueda indexar tu sitio, para una efectividad absoluta usa la meta etiqueta noindex.
Principalmente, es usado para sitios totalmente nuevos. Es eficiente, pero es poco práctica, ya que bloquea todo el sitio y no páginas específicas o con libertad de elegir.
Esta opción se encuentra en: Ajustes ⇒ Lectura.
Simplemente, has clic en la casilla y guarda los cambios.
Existen otras formas más versátiles de disuadir a los motores de búsqueda en WordPress. La más habitual es a través colocar noindex con los plugins Rank Math y Yoast SEO, a continuación:
Rank Math cuenta con la opción global de poner noindex a todo un sitio. Dirígete a: Rank Math ⇒ Títulos y meta ⇒ Meta global ⇒ No Index.
¡No te olvides de guardar los cambios!
De forma individual, Rank Math permite colocar la etiqueta noindex. Dirígete a tu página, entrada o categoría que desees colocar noindex, en la parte inferior para categorías, en la barra lateral para páginas o entradas, has clic en:
Rank Math ⇒ Avanzado ⇒ No Index.
¡No olvides actualizar tu página, entrada o categoría para guardar los cambios!
Yoast SEO permite colocar noindex de forma general para todas las páginas, entradas o productos, etc.
Dirígete a: Yoast SEO ⇒ Apariencia en el buscador ⇒ Tipos de contenido.
Elige las que requieras no indexar y guarda los cambios.
NOTA
La opción de noindex para productos solo se muestra en instalaciones de WordPress con WooCommerce. Por lo tanto, si cuentas con algún otro plugin o funcionalidad instalada, se mostrarán más casillas para habilitar o inhabilitar la indexación. Lo mismo sucede con Rank Math.
De forma individual, Yoast SEO permite colocar la etiqueta noindex. Dirígete a tu página, entrada o categoría que desees colocar noindex, en la parte inferior para categorías, en la barra lateral para páginas o entradas, has clic en:
Yoast SEO ⇒ Avanzado ⇒ No Index.
No olvides actualizar o guardar para que los cambios surtan efecto.
Aplicar noindex, follow a largo plazo es lo mismo que noindex, nofollow.
Cuando colocas noindex y Google pasa por tu sitio, entiende que no deseas que se muestre determinada página en el índice, Google la mantiene en su índice, pero deja de aparecer en los resultados. De esta manera, Google puede seguir los enlaces incluso con un noindex en esa página.
Pero si durante un tiempo Google observa que la etiqueta noindex continua, comprende que esa página realmente no quiere ser utilizada para la búsqueda y la eliminará por completo de su índice.
De esta forma, Google no podrá seguir los enlaces que existen dentro de esa página, porque simplemente ya no existe dentro de su índice y no hay manera de rastrearla. Entonces, a largo plazo noindex, follow es prácticamente lo mismo que noindex, nofollow.
John Mueller explicó esto en un video para webmasters en el minuto 54:51.
Depende de la frecuencia de rastreo y otros factores que solo Google sabe.
No, el link juice y PageRank no puede ser transferido desde páginas no indexadas. De igual manera no funcionará usar la directiva noindex, follow.
La meta etiqueta noindex tiene como función evitar indexar cualquier tipo de contenido de baja calidad o no deseado en los motores de búsqueda. El uso pertinente ayuda a mejorar el posicionamiento orgánico de tu sitio o desaparecerlo completamente. Cada sitio web es distinto, por consiguiente, investiga a tu competencia e identifica qué páginas están en noindex y por qué, aplica esta etiqueta de forma sabia.
