Qualquer site pode ser removido do Google, desde que você seja o dono e tenha acesso a ele. Remover uma determinada página do Google muitas vezes é parte de uma estratégia de SEO.
A remoção de um site pode ser feita de duas formas:
Método 1 – Adicionando a meta tag
Adicione estas duas tags ao seu site, dentro da seção <head> … </head>:
<meta name="googlebot" content="noindex,nofollow">
<meta name="robots" content="noindex,nofollow"> Isto irá dizer tanto ao Google como outros buscadores, para não indexar aquela página, e também não seguir os links existentes nela.
Método 2 – Editando o arquivo robots.txt
Você também pode editar um arquivo, na mesma pasta do index do seu site, com o seguinte conteudo:
User-agent: *
Disallow: / Isto irá dizer aos buscadores para não indexar seu site.
Opções avançadas
Você também pode apenas pedir para não indexar determinados arquivos ou pastas. Supondo que você queira apenas restringir a listagem a um arquivo chamado privado.htm , e a uma pasta chamada confidencial, basta adicionar estas linhas:
User-agent: *
Disallow: /privado.htm
Disallow: /confidencial E se o objetivo for o contrário?
O robots.txt serve para esconder. Existe também um arquivo novo para o oposto — destacar conteúdo, e especificamente para modelos de IA: o llms.txt.
Ele não bloqueia nem permite nada. Apenas indica ao ChatGPT, Claude e Gemini quais páginas do seu site importam mais, com uma descrição de cada uma. Se o que você quer é bloquear bots de IA, as regras vão no próprio robots.txt — com User-agent: GPTBot, ClaudeBot e Google-Extended.