Cómo hacer para NO indexar un página

En ocasiones, puede ser conveniente evitar que una página web se indexe en los motores de búsqueda. Tal vez se trate de una página que aún está en construcción o que contiene información confidencial. O quizás simplemente no quieres que la página aparezca en los resultados de búsqueda. En cualquier caso, hay algunos métodos que puedes utilizar para asegurarte de que una página no se indexe.

El método más común para evitar que una página se indexe es mediante el archivo robots.txt. Este archivo se encuentra en la raíz del sitio web y le indica a los motores de búsqueda qué páginas deben o no deben indexarse. Si quieres que una página no se indexe, simplemente agrega la ruta de la página al archivo robots.txt. Por ejemplo, si quieres evitar que la página “miweb.com/mi-pagina” se indexe, agrega la siguiente línea al archivo robots.txt:

Esta línea le indica a los motores de búsqueda que la página “miweb.com/mi-pagina” no debe ser indexada por ningún agente de usuario. Si deseas excluir varias páginas, puedes agregar varias líneas “Disallow” al archivo robots.txt.

Es importante tener en cuenta que el archivo robots.txt es solo una sugerencia para los motores de búsqueda. Si un motor de búsqueda no respeta el archivo robots.txt, puede indexar la página de todos modos. Además, cualquier persona puede acceder a la página directamente a través de la URL, independientemente de si está indexada o no.

Otro método para evitar que una página se indexe es mediante la etiqueta meta “robots” en la sección head de la página. Esta etiqueta se utiliza para indicar a los motores de búsqueda cómo deben indexar la página. Si quieres evitar que la página se indexe, agrega la siguiente etiqueta al head de la página: