Faça SEO Conosco!
A meta tag robots informa aos mecanismos de busca quais páginas do seu site devem ser indexadas. Essa meta tag tem um propósito similar ao robots.txt; ela é geralmente usada para evitar que um mecanismo de busca indexe páginas individuais, enquanto robots.txt impedirá que ele indexe um site inteiro ou uma seção de um site. Se você não adicionar uma meta tag de robôs, o padrão para os rastreadores será indexar e seguir sua página. Por que você precisaria usar essa meta tag?

Pode ser que você tenha algumas páginas no seu site que são necessárias, mas com conteúdo bem ralo. Você não quer necessariamente que elas sejam indexadas na busca, mas elas ainda são importantes para o site, então você pode usar uma tag noindex para evitar que elas apareçam nas SERPs. O Google também exige que links sejam nofollowed sob certas circunstâncias.

Por exemplo, em 2016, ele emitiu uma diretiva para blogueiros para nofollow quaisquer links que eles incluíssem como parte de uma análise de produto, pois “esses links não surgem organicamente”. Se você quiser nofollow um link individual, você pode conseguir isso adicionando rel=”nofollow” ao HTML do link.

No entanto, se você quiser simplesmente aplicar nofollow em todos os links de uma página específica, você pode fazer isso com a meta tag robots. Takeaway: gerencie as páginas que os rastreadores de mecanismos de busca acessam no seu site, guiando-os pela meta tag robots. Use a meta tag robots para garantir que os rastreadores de busca processem cada página da maneira que você deseja.