Robots meta tags são elementos HTML que fornecem instruções aos rastreadores da web (como os bots de mecanismos de busca) sobre como lidar com a indexação e a rastreagem de uma página da web ou site. Essas tags são colocadas na seção <head> de um documento HTML e ajudam a controlar o comportamento dos robôs da web.
Aqui estão algumas meta tags de robôs comuns com exemplos:
- robots=”noindex”: Instruí os mecanismos de busca a não indexar a página.
Exemplo:<meta name="robots" content="noindex"> - robots=“nofollow”: Instruí os mecanismos de busca a não seguir os links da página.
Exemplo:<meta name="robots" content="nofollow"> - robots=“noarchive”: Instruí os mecanismos de busca a não armazenar em cache ou arquivar a página.
Exemplo:<meta name="robots" content="noarchive"> - robots=“nosnippet”: Instruí os mecanismos de busca a não exibir um snippet ou descrição da página nos resultados de pesquisa.
Exemplo:<meta name="robots" content="nosnippet"> - robots=“all”: Instruí os mecanismos de busca a indexar e seguir todos os links da página (comportamento padrão).
Exemplo:<meta name="robots" content="all"> - robots=“none”: Instruí os mecanismos de busca a não indexar, seguir links ou armazenar em cache a página.
Exemplo:<meta name="robots" content="none">
Essas tags podem ser combinadas separando-as por vírgulas. Por exemplo:<meta name="robots" content="noindex, nofollow">
Robots meta tags são úteis para controlar como os mecanismos de busca interagem com páginas ou seções específicas de um site, permitindo que os webmasters otimizem a visibilidade e o comportamento de rastreamento de seu site.
Relacionado: