Les balises meta robots sont des éléments HTML qui fournissent des instructions aux robots d'exploration (comme les robots des moteurs de recherche) sur la manière de gérer l'indexation et le crawl d'une page Web ou d'un site Web. Ces balises sont placées dans la section <head> d'un document HTML et aident à contrôler le comportement des robots Web.
Voici quelques balises meta robots courantes avec des exemples :
- robots=“noindex” : Indique aux moteurs de recherche de ne pas indexer la page.
Exemple :<meta name="robots" content="noindex"> - robots=“nofollow” : Indique aux moteurs de recherche de ne pas suivre les liens de la page.
Exemple :<meta name="robots" content="nofollow"> - robots=“noarchive” : Indique aux moteurs de recherche de ne pas mettre en cache ou d'archiver la page.
Exemple :<meta name="robots" content="noarchive"> - robots=“nosnippet” : Indique aux moteurs de recherche de ne pas afficher d'extrait ou de description pour la page dans les résultats de recherche.
Exemple :<meta name="robots" content="nosnippet"> - robots=“all” : Indique aux moteurs de recherche d'indexer et de suivre tous les liens de la page (comportement par défaut).
Exemple :<meta name="robots" content="all"> - robots=“none” : Indique aux moteurs de recherche de ne pas indexer, suivre les liens ou mettre en cache la page.
Exemple :<meta name="robots" content="none">
Ces balises peuvent être combinées en les séparant par des virgules. Par exemple :<meta name="robots" content="noindex, nofollow">
Les balises meta robots sont utiles pour contrôler la manière dont les moteurs de recherche interagissent avec des pages ou des sections spécifiques d'un site Web, permettant aux webmasters d'optimiser la visibilité et le comportement de crawl de leur site.
Articles associés :