Glossário
O que é robots.txt
Também: ficheiro robots, regras de rastreio, noindex
O robots.txt é um pequeno ficheiro de texto na raiz do seu site que diz aos rastreadores dos motores de busca que partes podem ou não visitar. Uma linha errada pode esconder o site inteiro do Google.
O robots.txt vive em seudominio.pt/robots.txt e contém regras para os rastreadores: «Googlebot, não visites /admin», «aqui está o Sitemap (sitemap.xml)Um sitemap é uma lista legível por máquinas de todas as páginas do site (sitemap.xml) que ajuda o Google a encontrá-las e indexá-las mais depressa. A maioria das plataformas gera-o sozinha; envie-o na Search Console.→». É a placa «só pessoal autorizado» em certas portas. Não protege nada com palavra-passe — é um pedido educado que os motores de busca respeitam — e é também uma causa comum de sites invisíveis: um Disallow: / esquecido da fase de desenvolvimento bloqueia tudo. Para manter uma única página fora dos resultados, a ferramenta certa é uma Meta tags (título e descrição)As meta tags são o título e a descrição da página que o Google mostra nos resultados e que os navegadores mostram no separador. Boas meta tags geram mais cliques; cada página deve ter as suas.→ noindex.
- Verifique o seu: abra
/robots.txtno navegador —Disallow: /sobUser-agent: *significa que o Google está trancado fora. - Os rastreadores de IA (GPTBot, ClaudeBot…) leem o mesmo ficheiro; permiti-los ajuda o seu negócio a aparecer em respostas de IA.
- As plataformas gerem-no por si; raramente o edita à mão.