Bloquear a indexação de pesquisa com noindex
Para impedir que uma página ou outro recurso apareça na Pesquisa Google, inclua um cabeçalho ou uma metatag noindex na resposta HTTP. Na próxima vez que o Googlebot rastrear a página, ele vai ver a tag ou o cabeçalho e excluir totalmente a página dos resultados da pesquisa Google, mesmo que outros sites tenham links para ela.
O uso de noindex é útil se você não tem acesso à raiz do servidor, já que ele
permite controlar o acesso página por página ao seu site.
Implementação de noindex
Há duas maneiras de implementar noindex: como uma metatag
e como um cabeçalho de resposta HTTP. Elas têm o mesmo efeito. Escolha o método mais adequado ao tipo de conteúdo e
conveniente para o site.
Tag <meta>
Para evitar que a maioria dos mecanismos de pesquisa indexem uma página do site, insira a seguinte metatag na seção <head> da página:
<meta name="robots" content="noindex">
Para impedir que somente os rastreadores da Web do Google indexem uma página:
<meta name="googlebot" content="noindex">
Talvez alguns mecanismos de pesquisa interpretem a diretiva noindex de maneira diferente. Consequentemente, é possível que a página continue sendo exibida nos resultados de outros mecanismos de pesquisa.
Leia mais sobre a metatag noindex.
Cabeçalho de resposta HTTP
Em vez de uma metatag, também é possível retornar um cabeçalho X-Robots-Tag com um valor
de noindex ou none na sua resposta. Um cabeçalho de resposta pode ser usado para recursos não HTML, como PDFs e arquivos de vídeo e de imagem. Veja um exemplo de resposta HTTP com um X-Robots-Tag instruindo os mecanismos de pesquisa a não indexar uma página:
HTTP/1.1 200 OK (…) X-Robots-Tag: noindex (…)
Leia mais sobre o cabeçalho de resposta noindex.
Ajudar a identificar suas metatags
É preciso rastrear sua página para ver as metatags e os cabeçalhos HTTP. Caso sua página ainda apareça nos resultados, isso indica que provavelmente não rastreamos seu site desde que a tag foi adicionada. É possível solicitar que o Google rastreie sua página novamente usando a Ferramenta de inspeção de URL. Isso também pode acontecer quando o arquivo robots.txt bloqueia o URL dos rastreadores da Web do Google. Por esse motivo, não é possível ver a tag. Para desbloquear sua página do Google, é necessário editar o arquivo robots.txt. Use a ferramenta Testar robots.txt para editar e testar o arquivo.