Las etiquetas meta de robots son elementos HTML que proporcionan instrucciones a los rastreadores web (como los bots de los motores de búsqueda) sobre cómo manejar la indexación y el rastreo de una página web o un sitio web. Estas etiquetas se colocan en la sección <head> de un documento HTML y ayudan a controlar el comportamiento de los robots web.
Aquí tienes algunas etiquetas meta de robots comunes con ejemplos:
- robots=“noindex”: Indica a los motores de búsqueda que no indexen la página.
Ejemplo:<meta name="robots" content="noindex"> - robots=“nofollow”: Indica a los motores de búsqueda que no sigan los enlaces de la página.
Ejemplo:<meta name="robots" content="nofollow"> - robots=“noarchive”: Indica a los motores de búsqueda que no cacheaden ni archiven la página.
Ejemplo:<meta name="robots" content="noarchive"> - robots=“nosnippet”: Indica a los motores de búsqueda que no muestren un fragmento o descripción de la página en los resultados de búsqueda.
Ejemplo:<meta name="robots" content="nosnippet"> - robots=“all”: Indica a los motores de búsqueda que indexen y sigan todos los enlaces de la página (comportamiento predeterminado).
Ejemplo:<meta name="robots" content="all"> - robots=“none”: Indica a los motores de búsqueda que no indexen, sigan enlaces ni cacheaden la página.
Ejemplo:<meta name="robots" content="none">
Estas etiquetas se pueden combinar separándolas con comas. Por ejemplo:<meta name="robots" content="noindex, nofollow">
Las etiquetas meta de robots son útiles para controlar cómo interactúan los motores de búsqueda con páginas o secciones específicas de un sitio web, permitiendo a los administradores web optimizar la visibilidad y el comportamiento de rastreo de su sitio.
Relacionado: