Bloquear a indexação de pesquisa com noindex
Para impedir que uma página ou outro recurso apareça na Pesquisa Google, inclua um cabeçalho ou uma metatag noindex
na resposta
HTTP. Na próxima vez que o Googlebot rastrear a página, ele verá a tag ou o cabeçalho e excluirá
totalmente essa página dos resultados da Pesquisa Google, mesmo que outros sites tenham links para ela.
O uso de noindex é útil se você não tem acesso à raiz do servidor, já que ele
permite controlar o acesso página por página ao seu site.
Implementação de noindex
Há duas maneiras de implementar noindex: como uma metatag
e como um cabeçalho de resposta HTTP. Elas têm o mesmo efeito. Escolha o método mais adequado ao tipo de conteúdo e
conveniente para o site.
Tag <meta>
Para evitar que a maioria dos rastreadores da Web de mecanismos de pesquisa indexem uma página do seu site, insira
a seguinte metatag na seção <head> da sua página:
<meta name="robots" content="noindex">
Para impedir que somente os rastreadores da Web do Google indexem uma página:
<meta name="googlebot" content="noindex">
É possível que alguns rastreadores da Web de mecanismos de pesquisa interpretem a
diretiva noindex de maneira diferente. Consequentemente, é possível que a página continue
sendo exibida nos resultados de outros mecanismos de pesquisa.
Leia mais sobre a metatag noindex.
Cabeçalho de resposta HTTP
Em vez de uma metatag, também é possível retornar um cabeçalho X-Robots-Tag com um valor
de noindex ou none na sua resposta. Um cabeçalho de resposta pode
ser usado para recursos não HTML, como PDFs e arquivos de vídeo e de imagem. Veja um exemplo de uma resposta HTTP
com um X-Robots-Tag que instrui os rastreadores a não indexar uma página:
HTTP/1.1 200 OK (…) X-Robots-Tag: noindex (…)
Leia mais sobre o cabeçalho de resposta noindex.
Ajudar a identificar suas metatags
É preciso rastrear sua página para ver as metatags e os cabeçalhos HTTP. Caso sua página ainda apareça nos resultados, isso indica que provavelmente não rastreamos seu site desde que a tag foi adicionada. É possível solicitar que o Google rastreie sua página novamente usando a Ferramenta de inspeção de URL. Isso também pode acontecer quando o arquivo robots.txt bloqueia o URL dos rastreadores da Web do Google. Por esse motivo, não é possível ver a tag. Para desbloquear sua página do Google, é necessário editar o arquivo robots.txt. Use a ferramenta Testar robots.txt para editar e testar seu arquivo robots.txt.