Você já se perguntou como dizer a um mecanismo de busca para não olhar para uma determinada página do seu site? É isso que um metatags de robôs são para. É um pequeno trecho de código HTML que você coloca no cabeçalho de uma página. Ele fornece aos mecanismos de busca instruções sobre como lidar com aquela página específica.
Por exemplo, se você quiser dizer a um mecanismo de busca para não indexar uma página, você usaria esta tag:
Você também pode usar esta tag para dar outros comandos aos mecanismos de busca, como não seguir os links de uma página. Você pode adicionar mais diretivas separando-as com uma vírgula.
Qual é a diferença entre o arquivo robots.txt e as meta tags do Robots?
Você pode ficar confuso entre os robots.txt arquivo e uma meta tag. Aqui está uma maneira simples de pensar na diferença:
- robots.txt arquivo: Este é um arquivo para todo o seu site. Ele informa aos mecanismos de busca onde eles têm permissão para rastrear.
- Meta tag de robôs: Esta é uma tag para uma única página. Ela informa aos mecanismos de busca como lidar com aquela página, como se ela deve ser indexada ou não.
O robots.txt O arquivo é como uma cerca ao redor da sua propriedade. Uma meta tag de robôs é como uma placa na porta que diz: "Não entre".
Quando você deve usar a meta tag Robots No-Index
Você deve usar esta tag para páginas que não deseja que apareçam nos resultados de pesquisa. Isso é útil por alguns motivos:
- Páginas privadas: Você pode usá-lo para proteger conteúdo sensível, como uma área de membro privada ou uma oferta exclusiva.
- Conteúdo reduzido ou duplicado: Se você tiver páginas muito semelhantes, você pode usar um noindex marque uma delas para evitar que os mecanismos de busca fiquem confusos.
- Páginas de confirmação: Você pode usá-lo para manter uma página de confirmação ou agradecimento fora dos resultados de pesquisa.
Como usar diferentes meta tags de robôs
Existem alguns outros meta tags você pode precisar usar.
Como usar a tag “noindex,follow” do Meta Robots
Se você quiser que os mecanismos de busca não indexem uma página, mas ainda sigam os links nela, use esta tag. Ela é útil para páginas que você substituiu, mas ainda contêm links valiosos.
Tags dos Meta Robots “noindex,nofollow” e “none”
Use esta tag para informar aos mecanismos de busca para não indexar uma página e não seguir os links nela contidos. tag tem o mesmo efeito.
Casos de uso da tag “noarchive” do Meta Robots
Os mecanismos de busca geralmente salvam uma cópia da página. Se você não quiser que um mecanismo de busca salve uma cópia da sua página, pode usar esta tag. Isso é útil para páginas que são atualizadas com frequência.
Pule o snippet com a tag “nosnippet” e o atributo “data-nosnippet”
Quando sua página aparece nos resultados de pesquisa, uma breve descrição, ou snippet, aparece abaixo do título. Se não quiser que um mecanismo de busca exiba um snippet da sua página, você pode usar esta tag.
Meta Tag “Noimageindex”
Use esta tag se não quiser que as imagens da sua página sejam indexadas pelos mecanismos de busca.
Meta Tag “Notranslate”
Se você não quiser que um mecanismo de busca se ofereça para traduzir sua página, você pode usar esta tag.
E a Tag X-Robots?
O Etiqueta X-Robots é usado para arquivos que não são HTML, como imagens e PDFs. Ele é colocado no seu site HTTP Cabeçalho de resposta. Também é uma ótima maneira de dar diretivas a um grande grupo de arquivos de uma só vez.
O que acontece se houver diretivas conflitantes?
Os mecanismos de busca normalmente adotam a diretiva mais restritiva. Por exemplo, se você instruir um mecanismo de busca a não indexar uma página no seu arquivo robots.txt e também usar uma tag noindex, o arquivo robots.txt prevalecerá.
Posso usar robots.txt e meta tags robots para noindexar minha página?
Você pode, mas não é uma boa ideia. Usar ambos pode gerar confusão para os mecanismos de busca. É melhor usar uma tag noindex para controlar a indexação.
Posso usar a tag noindex para páginas paginadas?
Não deveria. Os mecanismos de busca sabem como lidar com páginas paginadas e não exigem uma tag noindex.
