I meta tag robots sono elementi HTML che forniscono istruzioni ai crawler web (come i bot dei motori di ricerca) su come gestire l'indicizzazione e il crawling di una pagina web o di un sito web. Questi tag sono inseriti nella sezione <head> di un documento HTML e aiutano a controllare il comportamento dei robot web.
Ecco alcuni meta tag robots comuni con esempi:
- robots=”noindex”: Istruisce i motori di ricerca a non indicizzare la pagina.
Esempio:<meta name="robots" content="noindex"> - robots=“nofollow”: Istruisce i motori di ricerca a non seguire i link nella pagina.
Esempio:<meta name="robots" content="nofollow"> - robots=“noarchive”: Istruisce i motori di ricerca a non memorizzare nella cache o archiviare la pagina.
Esempio:<meta name="robots" content="noarchive"> - robots=“nosnippet”: Istruisce i motori di ricerca a non visualizzare uno snippet o una descrizione per la pagina nei risultati di ricerca.
Esempio:<meta name="robots" content="nosnippet"> - robots=“all”: Istruisce i motori di ricerca a indicizzare e seguire tutti i link nella pagina (comportamento predefinito).
Esempio:<meta name="robots" content="all"> - robots=“none”: Istruisce i motori di ricerca a non indicizzare, seguire i link o memorizzare nella cache la pagina.
Esempio:<meta name="robots" content="none">
Questi tag possono essere combinati separandoli con virgole. Ad esempio:<meta name="robots" content="noindex, nofollow">
I meta tag robots sono utili per controllare come i motori di ricerca interagiscono con pagine o sezioni specifiche di un sito web, consentendo ai webmaster di ottimizzare la visibilità e il comportamento di crawling del proprio sito.
Correlati: